linuxshell(find sed awk vi)-note

Find指令

Find / -name access.log

Find / -name ‘*.log’

Find / -amin -10

Find / -cmin -10

Find / -atime -1

Find / -ctime -1

Find / -mmin -24

Find / -mtime -1

Find / -empty

Find / -false

Find / -fstype ext3

Find / -group actors

Find / -user actor

Find / -uid 0

Find / -gid 0

Find / -nouser

Find / -daystart 1

find . -maxdepth 2 –name access.log

find /tmp –size +1000000 –and –mtime -2

find /tmp –user actor –or –user unactor

find /tmp ! –user actor

find / -name “httpd.conf” –ls

下面的表格就是一些常用的查找文件并显示文件信息的参数和使用方法

Vi指令

进入vi的命令

vi filename : 打开或新建文件，并将光标置于第一行首

vi +n filename ：打开文件，并将光标置于第n行首

vi + filename ：打开文件，并将光标置于最后一行首

vi +/pattern filename：打开文件，并将光标置于第一个与pattern匹配的串处

vi -r filename ：在上次正用vi编辑时发生系统崩溃，恢复filename

vi file1….filen ：打开多个文件，依次进行编辑

移动光标类命令

h ：光标左移一个字符

l ：光标右移一个字符

k或Ctrl+p ：光标上移一行

j或Ctrl+n ：光标下移一行

space：光标右移一个字符

Backspace：光标左移一个字符

Enter ：光标下移一行

w或W ：光标右移一个字至字首

b或B ：光标左移一个字至字首

e或E ：光标右移一个字至字尾

) ：光标移至句尾

( ：光标移至句首

} ：光标移至段落开头

{ ：光标移至段落结尾

nG ：光标移至第n行首

n+ ：光标下移n行

n- ：光标上移n行

n$ ：光标移至第n行尾

H ：光标移至屏幕顶行

M ：光标移至屏幕中间行

L ：光标移至屏幕最后行

0：（注意是数字零）光标移至当前行首

$：光标移至当前行尾

屏幕翻滚类命令

Ctrl+u：向文件首翻半屏

Ctrl+d：向文件尾翻半屏

Ctrl+f：向文件尾翻一屏

Ctrl+b：向文件首翻一屏

nz：将第n行滚至屏幕顶部，不指定n时将当前行滚至屏幕顶部。

插入文本类命令

i ：在光标前

I ：在当前行首

a：光标后

A：在当前行尾

o：在当前行之下新开一行

O：在当前行之上新开一行

r：替换当前字符

R：替换当前字符及其后的字符，直至按ESC键

s：从当前光标位置处开始，以输入的文本替代指定数目的字符

S：删除指定数目的行，并以所输入文本代替之

ncw或nCW：修改指定数目的字

nCC：修改指定数目的行

删除命令

ndw或ndW：删除光标处开始及其后的n-1个字

do：删至行首

d$：删至行尾

ndd：删除当前行及其后n-1行

x或X：删除一个字符，x删除光标后的，而X删除光标前的

Ctrl+u：删除输入方式下所输入的文本

搜索及替换命令

/pattern：从光标开始处向文件尾搜索pattern

?pattern：从光标开始处向文件首搜索pattern

n：在同一方向重复上一次搜索命令

N：在反方向上重复上一次搜索命令

：s/p1/p2/g：将当前行中所有p1均用p2替代

：n1,n2s/p1/p2/g：将第n1至n2行中所有p1均用p2替代

：g/p1/s//p2/g：将文件中所有p1均用p2替换

选项设置

all：列出所有选项设置情况

term：设置终端类型

ignorance：在搜索中忽略大小写

list：显示制表位(Ctrl+I)和行尾标志（$)

number：显示行号

report：显示由面向行的命令修改过的数目

terse：显示简短的警告信息

warn：在转到别的文件时若没保存当前文件则显示NOwrite信息

nomagic：允许在搜索模式中，使用前面不带“\”的特殊字符

nowrapscan：禁止vi在搜索到达文件两端时，又从另一端开始

mesg：允许vi显示其他用户用write写到自己终端上的信息

最后行方式命令

：n1,n2 co n3：将n1行到n2行之间的内容拷贝到第n3行下

：n1,n2 m n3：将n1行到n2行之间的内容移至到第n3行下

：n1,n2 d ：将n1行到n2行之间的内容删除

：w ：保存当前文件

：e filename：打开文件filename进行编辑

：x：保存当前文件并退出

: ZZ：保存当前文件并退出

：q：退出vi

：q!：不保存文件并退出vi

：!command：执行shell命令command

：n1,n2 w!command：将文件中n1行至n2行的内容作为command的输入并执行之，若不指定n1，n2，则表示将整个文件内容作为command的输入

：r!command：将命令command的输出结果放到当前行

寄存器操作

“?nyy：将当前行及其下n行的内容保存到寄存器？中，其中?为一个字母，n为一个数字

“?nyw：将当前行及其下n个字保存到寄存器？中，其中?为一个字母，n为一个数字

“?nyl：将当前行及其下n个字符保存到寄存器？中，其中?为一个字母，n为一个数字

“?p：取出寄存器？中的内容并将其放到光标位置处。这里？可以是一个字母，也可以是一个数字

ndd：将当前行及其下共n行文本删除，并将所删内容放到1号删除寄存器中。

常见问题及应用技巧

:r /etc/passwd 在打开的文件file中光标所在处读入/etc/passwd

:3r /etc/passwd在打开的文件file第3行开始读入/etc/passwd

:%s/:.*//g 删除/etc/passwd中用户名后面的从冒号开始直到行尾的所有部分

#cat squid.conf.default | grep -v ^$ | grep-v ^# 删掉文件中所有的空行及以#开始的注释行

:w /tmp/1 保存所做的所有修改，也可以将其中的某一部分修改保存到临时文件

:20,59w /tmp/1仅仅把第20～59行之间的内容存盘成文件/tmp/1

Ctrl+G显示行号，再到结尾处再按Ctrl+G，显示文件结尾的行号

:23,1045d 假定2次得到的行号为23和1045，则把这期间的内容全删

:a,bd 也可以在要删开始行和结束行中用ma、mb命令标记

:3,$s/^/some string / 在文件的第三行至最后一行的行首插入“some string”

:%s/$/some string/g 在整个文件每一行的行尾添加“some string”

:%s/string1/string2/g 在整个文件中替换“string1”成“string2”

:3,7s/string1/string2/ 仅替换文件中的第3行到第7行中的“string1”成“string2”

注意: 其中s为substitute，%表示所有行，g表示global。

vi file1 file2

yy 在文件1的光标处拷贝所在行

:n 切换到文件2 (n=next)

p 在文件2的光标所在处粘贴所拷贝的行

:n 切换回文件1

:%s#/usr/bin#/bin#g”可以把文件中所有路径/usr/bin换成/bin

:%s//usr/bin//bin/g”可以把文件中所有路径/usr/bin换成/bin

注意“# /”是转义字符，表明其后的“/”字符是具有实际意义的字符，不是分隔符。

Grep “192.168.1.100“ access.log | cut –d“,” –f 1 | grep “\”processstate\”:\”0\”” | wc -l统计文件中包含某段文件的行有多少

cut –d “,” –f 1 access.log -d：按分隔符切割-f：取第几列

Wc指令

Wc –lcw file1 file2

sed指令

sed ‘1d’ ab             #删除第一行

sed ‘$d’ ab             #删除最后一行

sed ‘1,2d’ ab          #删除第一行到第二行

sed ‘2,$d’ ab          #删除第二行到最后一行

sed –n ‘1p’ab     #显示第一行

sed –n ‘$p’ab     #显示最后一行

sed –n ‘1,2p’ab   #显示第一行到第二行

sed –n ‘1,$p’ab   #显示第一行到最后一行

sed –n ‘/ruby/p’ ab  #查询包括关键字ruby所在所有行

sed –n ‘/\$/p’ ab    #查询包括关键字$所在所有行，使用反斜线\屏蔽特殊含义

sed ‘1a drink tea’ ab  #第一行后增加字符串“drinktea”

sed’1,3a drink tea’ ab  #第一行到第三行后增加字符串“drinktea”

sed ‘1a drink tea \n or coffee’ ab   #第一行后增加多行，使用换行符\n

sed ‘1c Hi’ab                #第一行代替为Hi

sed’1,2c Hi’ab             #第一行到第二行代替为Hi

sed -n’/ruby/p’ ab | sed’s/ruby/bird/g’    #替换ruby为bird

sed -n ‘/ruby/p’ab | sed ‘s/ruby//g’       #删除ruby

sed -i’$a bye’ ab    #在文件ab中最后一行直接输入“bye”

awk

awk –F “,” ‘{print $3}’ access.log

last -n 10 | awk ‘{print $1}’ $0则表示所有域,$1表示第一个域,$n表示第n个域，域分隔符是“空白键” 或 “[tab]键“

cat /etc/passwd | awk –F ‘:’ ‘{print $1}’

cat /etc/passwd | awk –F ‘:’ ‘{print$1”\t”$7}’

cat /etc/passwd |awk  -F ‘:’ ‘BEGIN {print “name,shell”} {print $1″,”$7} END {print “blue,/bin/nosh”}’

awk –F ‘:’ ‘/root/’ /etc/passwd

awk –F ‘:’ ‘/root/{print $7}’ /etc/passwd

awk内置变量

#awk  -F ‘:’  ‘{print “filename:” FILENAME”,linenumber:” NR “,columns:” NF”,linecontent:”$0}’ /etc/passwd统计/etc/passwd:文件名，每行的行号，每行的列数，对应的完整行内容

awk  -F ':'  '{printf("filename:%10s,linenumber:%s,columns:%s,linecontent:%s\n",FILENAME,NR,NF,$0)}' /etc/passwd 使用printf替代print,可以让代码更加简洁，易读

print和printf两种打印输出的函数:其中print函数的参数可以是变量、数值或者字符串。字符串必须用双引号引用，参数用逗号分隔。如果没有逗号，参数就串联在一起而无法区分。这里，逗号的作用与输出文件的分隔符的作用是一样的，只是后者是空格而已。printf函数，其用法和c语言中printf基本相似,可以格式化字符串,输出复杂时，printf更加好用，代码更易懂。

awk '{count++;print $0;} END{print "user count is ", count}' /etc/passwd 统计/etc/passwd的账户人数

awk 'BEGIN {count=0;print "[start]user count is ", count} {count=count+1;print $0;} END{print "[end]user count is ", count}' /etc/passwd 初始化count为0

ls -l |awk 'BEGIN {size=0;} {size=size+$5;} END{print "[end]size is ", size}'统计某个文件夹下的文件占用的字节数

ls -l |awk 'BEGIN {size=0;} {size=size+$5;} END{print "[end]size is ", size/1024/1024,"M"}' 以M为单位显示

ls -l |awk 'BEGIN {size=0;print "[start]size is ", size} {if($5!=4096){size=size+$5;}} END{print "[end]size is ", size/1024/1024,"M"}'过滤4096大小的文件

awk -F ':' 'BEGIN {count=0;} {name[count] = $1;count++;}; END{for (i = 0; i < NR; i++) print i, name[i]}' /etc/passwd 显示/etc/passwd的账户

可以统计出现某段文字的行与未出现行的比例等各种复杂需求

awk-F “,” ‘BEGIN { s0=0;s1=0 } {

if ($1 ~”getPosPrice”) {

if($3==”\”processState\”:\”0\””) {

s0++

}

else{

s1++

}

}

}END { print s0,s1 }’ 13_tp.log