linux命令过滤空行 shell过滤空格

Linux如何通过命令查看日志文件的某几行(中间几行或最后几行)

【一】从第3000行开始，显示1000行。即显示3000~3999行

创新互联建站专注为客户提供全方位的互联网综合服务，包含不限于成都网站设计、网站制作、玉山网络推广、微信小程序、玉山网络营销、玉山企业策划、玉山品牌公关、搜索引擎seo、人物专访、企业宣传片、企业代运营等，从售前售中售后，我们都将竭诚为您服务，您的肯定，是我们最大的嘉奖；创新互联建站为所有大学生创业者提供玉山建站搭建服务，24小时服务热线：13518219792，官方网址：www.cdcxhl.com

cat filename | tail -n +3000 | head -n 1000

【二】显示1000行到3000行

cat filename| head -n 3000 | tail -n +1000

*注意两种方法的顺序

分解：

tail -n 1000：显示最后1000行

tail -n +1000：从1000行开始显示，显示1000行以后的

head -n 1000：显示前面1000行

【三】用sed命令

sed -n '5,10p' filename 这样你就可以只查看文件的第5行到第10行。

Linux统计文件行数

语法：wc [选项] 文件…

说明：该命令统计给定文件中的字节数、字数、行数。如果没有给出文件名，则从标准输入读取。wc同时也给出所有指定文件的总统计数。字是由空格字符区分开的最大字符串。

该命令各选项含义如下：

- c 统计字节数。

- l 统计行数。

- w 统计字数。

这些选项可以组合使用。

输出列的顺序和数目不受选项的顺序和数目的影响。

总是按下述顺序显示并且每项最多一列。

行数、字数、字节数、文件名

如果命令行中没有文件名，则输出中不出现文件名。

例如：

$ wc - lcw file1 file2

4 33 file1

7 52 file2

11 11 85 total

举例分析：

1.统计demo目录下，js文件数量：

find demo/ -name "*.js" |wc -l

2.统计demo目录下所有js文件代码行数：

find demo/ -name "*.js" |xargs cat|wc -l 或 wc -l `find ./ -name "*.js"`|tail -n1

3.统计demo目录下所有js文件代码行数，过滤了空行：

find /demo -name "*.js" |xargs cat|grep -v ^$|wc -l

linux去掉文件中的空行

方法一：利用grep

grep -v '^\s*$' test.txt

注：-v表示将匹配的结果进行反转，正则表达式匹配空行。（空行可包括空格符制表符等空白字符）

方法二：利用sed

sed '/^\s*$/d' test.txt

注：d代表删除该行

方法三：利用awk

awk NF test.txt

注：NF代表当前行的字段数，空行的话字段数为0,被awk解释为假，因此不进行输出。

以上三种方式均可处理包含空白字符（空格符，制表符等）的空行。

方法四：若空行均由’\n'造成，则还可以利用tr命令去除空行。《Linux就该这么学》

tr -s '\n' test.txt

注：-s代表将多个连续的字符压缩成一个字符，这里是将多个‘\n'压缩成一个'\n'，达到去除空行的效果。

方法四的缺陷:如果首行就出现空行的话则无法去除首行的空行

linux命令grep怎么取得空白行

那个命令本身就有问题出来的结果是0；

修改后的命令如下：

last| grep [a-zA-Z]|egrep -v  ‘wtmp’|wc -l

grep [a-zA-Z]排除空行，因为空行不包含字母

Linux查看和去除文件的空行

做Coregenome SNP分析时，有时参考基因组的pep文件有空行，总是导致分析过程中出错，最后获取不到coreSNP信息。遇到几次，每次都是打开pep文件逐行查看是否有空行。这次记录下上次的解决方案，备后续使用。还是整理成脚本，每次跑程序前过滤一遍。

此方法可以手工逐个解决空行查看和删除空行上一行后问题。

直接提取非空行

方法三：

方法四：

Linux grep、egrep使用命令详解

grep egrep区别

grep 默认不支持扩展 但可以通过-E 选择来支持扩展正则

egrep 支持扩展正则

关于正则与扩展正则的区别可以看我另一篇shell 正则的介绍

文件处理顺序 以行为单位,逐行进行处理

默认只输出与表达式相匹配的文本行

基本用法

- 格式1:egrep [选择] '正则表达式' 文件

- 格式2:前置命令 | egrep [选择] '正则表达式'

• egrep命令工具 (扩展正则命令)

• 常用命令选项

•grep 正则表达式,用来查找过滤文档的工具符号

grep "root" user //在user文档中查找有单词root的行

grep "^root" user //在user文档中查找以单词root开头的行

grep "bash " user //查找空行

grep "^ " user //查找以空格开头的行

grep "[rot]" user //查找字母r或者o或者t

grep "roo[tn]" user //查找root或者roon

grep "[^rot]" user //查找字母r或者o或者t之外的内容

grep "[a-z]" user //查找小写字母

grep "[A-Z]" user //查找大写字母

grep "[a-Z]" user //查找所有字母

grep "[0-9]" user //查找数字

grep "r..t" user //查找以r开头t结尾中间有2个任意字符的单词

grep "r. " user //查找以r开头后面任意字符 相当手通配符

grep "ro*" user //查找以r开头后面有或没有字母o的单词,o可以出现任意次

grep "o{1,2}" user //查找o出现1次到2次的行

grep "o{2,3}" user //查找o出现2次到3次的行

grep "o{2}" user //查找o出现2次的行

grep "o{1,} " user //查找o出现1次以及1次以上

grep "(:0){2}" user //查找:0(数字零)连续出现2次的行

扩展正则

egrep "o+" user //查找o出现1次以及1次以上

egrep "o?" user //查找o出现0次或1次

egrep "o{1,2}" user //查找o出现1次到2次的行

egrep "o{2,3}" user //查找o出现2次到3次的行

egrep "o{2}" user //查找o出现2次的行

egrep "o{1,}" user //查找o出现1次以及1次以上

egrep "(:0){2}" user //查找:0(数字零)连续出现2次的行

egrep "bash|nologin" user //查找bash或者nologin

egrep "\bthe\b" a //查找单词the,前后是空格或者特殊符号

案例:

正则表达式匹配练习

1）典型的应用场合：grep、egrep检索文本行

grep命令不带-E选项时，支持基本正则匹配模式。比如“word”关键词检索、“^word”匹配以word开头的行、“word$”匹配以word结尾的行……等等。

输出以“r”开头的用户记录：

输出以“localhost”结尾的行：

若希望在grep检索式同时组合多个条件，比如输出以“root”或者以“daemon”开头的行：

而若若使用grep -E或egrep命令，可支持扩展正则匹配模式，能够自动识别 |、{} 等扩展正则表达式中的特殊字符，用起来更加方便，比如：

或者

使用grep -E 与 使用egrep命令完全等效，推荐使用后者，特别是涉及到复杂的正则表达式的时候。

2）grep、egrep命令的-q选项

选项 -q 表示 quiet（静默）的意思，结合此选项可以只做检索而并不输出，通常在脚本内用来识别查找的目标是否存在，通过返回状态 $? 来判断，这样可以忽略无关的文本信息，简化脚本输出。

比如，检查/etc/hosts文件内是否存在192.168.4.4的映射记录，如果存在则显示“YES”，否则输出“NO”，一般会执行：

这样grep的输出信息和脚本判断后的提示混杂在一起，用户不易辨别，所以可以改成以下操作：

是不是清爽多了，从上述结果也可以看到，使用 -q 选项的效果与使用 /dev/null的效果类似。

3）基本元字符 ^、$ —— 匹配行首、行尾

输出注释的配置行（以#开头的行）：

统计本地用户中登录Shell为“/sbin/nologin”的用户个数：

提示: -m10仅在文件的前10行中过滤，后面的行不再过滤。

结合 -c 选项输出匹配的行数

使用 -c 选项可输出匹配行数，这与通过管道再 wc -l的效果是相同的，但是写法更简便。比如，统计使用“/bin/bash”作为登录Shell的正常用户个数，可执行：

或者

4）基本元字符 . —— 匹配任意单个字符

以/etc/rc.local文件为例，确认文本内容：

输出/etc/rc.local文件内的空行（用 –v 选项将条件取反）：

5）基本元字符 +、?、 —— 目标出现的次数*

还以/etc/rc.local文件为例：

输出包括 f、ff、ff、……的行，即“f”至少出现一次：

输出包括init、initial的行，即末尾的“ial”最多出现一次（可能没有）：

输出包括stu、stuf、stuff、stufff、……的行，即末尾的“f”可出现任意多次，也可以没有。重复目标只有一个字符时，可以不使用括号：

输出所有行，单独的“.*”可匹配任意行（包括空行）：

输出/etc/passwd文件内“r”开头且以“nologin”结尾的用户记录，即中间可以是任意字符：

6）元字符 {} —— 限定出现的次数范围

创建一个练习用的测试文件：

输出包括ababab的行，即“ab”连续出现3次：

输出包括abab、ababab、abababab的行，即“ab”连续出现2~4次：

输出包括ababab、abababab、……的行，即“ab”最少连续出现3次：

7）元字符 [] —— 匹配范围内的单个字符

还以前面的测试文件bracet.txt为例：

输出包括abc、abd的行，即前两个字符为“ab”，第三个字符只要是c、d中的一个就符合条件：

输出包括大写字母的行，使用[A-Z]匹配连续范围：

8）单词边界匹配

以文件/etc/rc.local为例：

输出包括单词“init”的行，文件中“initialization”不合要求：

或者：

输出包括以“ll”结尾的单词的行，使用 匹配单词右边界：

或者：

9）多个条件的组合

通过dmesg启动日志查看蓝牙设备、网卡设备相关的信息：

linux怎样用grep过滤

不知道你是想实现什么目的，如果你是想只显示配置文件中的以 # 号开头的行，那就使用

# grep ^# filename

如果是想显示除 # 号开头的行的话呢，只需加个参数-v (-v 表示相反的过滤)就行了

# grep -v ^# filename