Linux Shell 基础知识（二）

1.本文知识结构

2.文件的查询与检索

2.1. cd 目录切换

• 找到文件/目录位置：cd
• 切换到上一个工作目录： cd -
• 切换到home目录： cd or cd ~
• 显示当前路径: pwd
• 更改当前工作路径为path: $cd path

2.2. locate 查找目录及文件

• find 实时查找
• locate 为文件系统建立索引数据库，如果有文件更新，需要定期执行更新命令来更新索引库，在查找文件之前要先更新数据库

# 搜寻文件或目录:
$find ./ -name "core*" | xargs file

# 查找目标文件夹中是否有obj文件:
$find ./ -name '*.o'

# 递归当前目录及子目录删除所有.o文件
$find ./ -name "*.o" -exec rm {} \;

# 寻找包含有string的路径
$updatedb
$locate string

2.3. chown 文件与目录权限修改

• 改变文件的拥有者 chown
• 改变文件读、写、执行等属性 chmod
• 递归子目录修改： chown -R tuxapp source/
• 增加脚本可执行权限： chmod a+x myscript

2.4. 管道和重定向

• 批处理命令连接执行，使用 |
• 串联: 使用分号 ;
• 前面成功，则执行后面一条，否则，不执行:&&
• 前面失败，则后一条执行: ||
• 重定向: >

3.文本处理

3.1. find 文件查找

find命令用来在指定目录下查找文件。如果使用该命令时，不设置任何参数，则find命令将在当前目录下查找子目录与文件，并且将查找到的子目录和文件全部进行显示。

一般来说，其语法格式为：

find path -option [ -print ] [ -exec -ok command ] {} \;

find 后分为两部分: path 和 expression ，以 第一个 - 为分隔线。如果 path 是空字串则使用目前路径，如果 expression 是空字串则使用 -print 为预设 expression。

常用的expression选项

另外，在find查找文件也是可以使用正则表达式的。

使用正则表达式查询需要的选项有两个：-regextype 和 -regex。----regextype 指定正则匹配的类型，可用的选项有很多，常见的有：‘awk‘ , ‘egrep‘ , ‘ed‘, ‘emacs‘, ‘grep‘, ‘sed‘ 等，不同匹配模式匹配的结果不一样。默认是emacs。

-regex pattern 表示文件名与正则表达式 pattern 匹配。这是对整个路径的匹配，不是搜索文件。即书写正则表达式时要考略前面的路径。

3.2. grep 文本搜索

grep 指令用于查找内容包含指定的范本样式的文件，如果发现某文件的内容符合所指定的范本样式，预设 grep 指令会把含有范本样式的那一列显示出来。

其一般语法为：

grep [ options ] pattern [file]

常见的 options 选项

3.3. xargs 命令行参数转换

xargs 是给命令传递参数的一个过滤器，也是组合多个命令的一个工具。xargs 可以将管道或标准输入（stdin）数据转换成命令行参数，也能够从文件的输出中读取数据。之所以能用到这个命令，关键是由于很多命令不支持|管道来传递参数，而日常工作中有有这个必要，所以就有了 xargs 命令。xargs 一般是和管道一起使用。

其一般语法为:

somecommand | xargs -item command

常见的item选项

3.4. uniq 删除重复

uniq 命令用于检查及删除文本文件中重复出现的行列，一般与 sort 命令结合使用。

# 消除重复行
$ sort unsort.txt | uniq

# 统计各行在文件中出现的次数
$ sort unsort.txt | uniq -c

# 找出重复行
$ sort unsort.txt | uniq -d

3.5. tr 字符转换

tr 命令用于转换或删除文件中的字符。它从标准输入设备读取数据，经过字符串转译后，将结果输出到标准输出设备。

其一般语法为：

tr [options]  SET1 [SET2]

常见options选项

常见SET字符含义

3.6. cut、paste 裁剪与拼接

cut命令用于显示每行从开头算起 num1 到 num2 的文字。

• cut 取的范围

  N- 第N个字段到结尾

  -M 第1个字段为M

  N-M N到M个字段

• cut 取的单位

  -b 以字节为单位

  -c 以字符为单位

  -f 以字段为单位（使用定界符）

paste 指令会把每个文件以列对列的方式，一列列地加以合并。

其一般语法为：

$ paste [-s] [-d <间隔字符>] [文件...]

参数：

• -d<间隔字符>或--delimiters=<间隔字符> 　用指定的间隔字符取代跳格字符。
• -s或--serial 　串列进行而非平行处理。
• --help 　在线帮助。
• --version 　显示帮助信息。
• [文件…] 指定操作的文件路径

3.7. sed 文本替换

sed 命令可依照脚本的指令来处理、编辑文本文件，它主要用来自动编辑一个或多个文件、简化对文件的反复操作、编写转换程序等。sed 命令是一行一行的处理文件内容的，一般在动作前加数字以确定对应的行。

其一般语法为：

$ sed [-hnV][-e<script>][-f<script文件>][文本文件]

参数说明：

• -e script 或--expression=script 以选项中指定的script来处理输入的文本文件。
• -f script文件 或--file=script文件 以选项中指定的script文件来处理输入的文本文件。
• -h或--help 显示帮助。
• -n或--quiet或--silent 仅显示script处理后的结果。
• -V或--version 显示版本信息。
• -r或--regexp-extended 在脚本中使用扩展的正则表达式

动作说明：

• a ：新增， a 的后面可以接字串，而这些字串会在新的一行出现(目前的下一行)
• c ：取代， c 的后面可以接字串，这些字串可以取代 n1,n2 之间的行
• d ：删除，因为是删除啊，所以 d 后面通常不接任何东西
• i ：插入， i 的后面可以接字串，而这些字串会在新的一行出现(目前的上一行)；
• p ：打印，亦即将某个选择的数据印出。通常 p 会与参数 sed -n 一起运行
• s ：取代，可以直接进行字符级的替换的工作

# sed 命令需要多练习，可参考菜鸟教程实例

3.8. awk 数据流处理

awk 是一种处理文本文件的语言，是一个强大的文本分析工具。

其一般语法为：

awk [选项参数] 'script' var=value file(s)
或
awk [选项参数] -f scriptfile var=value file(s)

选项参数说明：

• -F fs or --field-separator fs
  指定输入文件折分隔符，fs是一个字符串或者是一个正则表达式，如-F:。
• -v var=value or --asign var=value
  赋值一个用户定义变量。
• -f scripfile or --file scriptfile
  从脚本文件中读取awk命令。
• -mf nnn and -mr nnn
  对nnn值设置内在限制，-mf选项限制分配给nnn的最大块数目；-mr选项限制记录的最大数目。这两个功能是Bell实验室版awk的扩展功能，在标准awk中不适用。
• -W compact or --compat, -W traditional or --traditional
  在兼容模式下运行awk。所以gawk的行为和标准的awk完全一样，所有的awk扩展都被忽略。
• -W copyleft or --copyleft, -W copyright or --copyright
  打印简短的版权信息。
• -W help or --help, -W usage or --usage
  打印全部awk选项和每个选项的简短说明。
• -W lint or --lint
  打印不能向传统unix平台移植的结构的警告。
• -W lint-old or --lint-old
  打印关于不能向传统unix平台移植的结构的警告。
• -W posix
  打开兼容模式。但有以下限制，不识别：/x、函数关键字、func、换码序列以及当fs是一个空格时，将新行作为一个域分隔符；操作符和=不能代替^和^=；fflush无效。
• -W re-interval or --re-inerval
  允许间隔正则表达式的使用，参考(grep中的Posix字符类)，如括号表达式[[:alpha:]]。
• -W source program-text or --source program-text
  使用program-text作为源代码，可与-f命令混用。
• -W version or --version
  打印bug报告信息的版本。

4.进程管理

4.1. lsof 查看进程状态

lsof 命令的全称是 list open files ，它是一个列出当前系统打开文件的工具。在 Linux 环境中，所有的事物都以文件的形式存在，通过文件不仅仅可以访问常规数据，还可以访问网络连接和硬件。

其一般语法为：

$ lsof [options] filename

常用参数列表：

$ lsof -i[46] [protocol][@hostname|hostaddr][:service|port]

# 46 –> IPv4 or IPv6
# protocol –> TCP or UDP
# hostname –> Internet host name
# hostaddr –> IPv4地址
# service –> /etc/service中的 service name (可以不只一个)
# port –> 端口号 (可以不只一个)

4.2. pmap 分析线程栈

Pmap 提供了进程的内存映射，pmap命令用于显示一个或多个进程的内存状态。其报告进程的地址空间和内存状态信息

其一般语法为：

$ pmap [options] PID

常见的options选项为：

• -x：显示扩展格式；
• -d：显示设备格式；
• -q：不显示头尾行；
• -V：显示指定版本。

5.性能监控

5.1. sar 性能监控

sar 命令是系统维护的重要工具，主要帮助我们掌握系统资源的使用情况，特别是内存和CPU 的使用情况。

其一般语法为：

$ sar [options] [-A] [-o file] t [n]

其中：t为采样间隔，n为采样次数，默认值是1；-o file表示将命令结果以二进制格式存放在文件中，file 是文件名。

常见的options选项有：

参考材料：

Linux教程|菜鸟教程
Linux Tools Quick Tutorial
Linux 命令帮助文档

Linux Shell 基础知识（二）

原文：https://www.cnblogs.com/fang-ren/p/11647675.html