ln [-sf] 源文件 目标文件(符合连接文件)
    -s: 创建符号连接，而不是硬连接
    -f: 如果目标文件存在，就将目标文件删除后再创建

cat /dev/null > clear.txt
echo "" > clear.txt
> clear.txt

> cat test.txt
a b c d e f g
h i j k l m n
o p q
> cat test.txt | xargs
a b c d e f g h i j k l m n o p q
> cat test.txt | xargs -n3
a b c
d e f
g h i
j k l
m n o
p q 

> cat arg.txt | xargs -I {} ./sk.sh -p {} -l
-p aaa -l
-p bbb -l
-p ccc -l

split -l 50000  4-2019-09-02-15-54-17.log -d -a 2  sp/4-2019-09-02-15-54-17_

wget [参数] [url地址]
    -o, –output-file=FILE: 把**记录**写到FILE文件中
    -a, –append-output=FILE: 把**记录**追加到FILE文件中
    -d, –debug: 打印调试输出
    -q, –quiet: 安静模式(没有输出)
    -v, –verbose: 冗长模式(这是缺省设置)
    -nv, –non-verbose: 关掉冗长模式，但不是安静模式
    -i, –input-file=FILE: 下载在FILE文件中出现的URLs
    -F, –force-html: 把输入文件当作HTML格式文件对待
    -B, –base=URL: 将URL作为在-F -i参数指定的文件中出现的相对链接的前缀
    –sslcertfile=FILE: 可选客户端证书
    –sslcertkey=KEYFILE: 可选客户端证书的KEYFILE
    –egd-file=FILE: 指定EGD socket的文件名
    -t, –tries=NUMBER 设定最大尝试链接次数(0 表示无限制).

    -O –output-document=FILE 把文档写到FILE文件中
    -nc, –no-clobber 不要覆盖存在的文件或使用.#前缀
    -c, –continue 接着下载没下载完的文件
    –progress=TYPE 设定进程条标记
    -N, –timestamping 不要重新下载文件除非比本地文件新
    -S, –server-response 打印服务器的回应
    –spider 不下载任何东西
    -T, –timeout=SECONDS 设定响应超时的秒数
    -w, –wait=SECONDS 两次尝试之间间隔SECONDS秒
    –waitretry=SECONDS 在重新链接之间等待1…SECONDS秒
    –random-wait 在下载之间等待0…2*WAIT秒
    -Y, –proxy=on/off 打开或关闭代理
    -Q, –quota=NUMBER 设置下载的容量限制
    –limit-rate=RATE 限定下载输率

    --post-data="" : 通过post方式提交数据

date +Format
    - %Y : 年份
    - %y : 年份的最后两位
    - %d : 按月计的日期(例如：01)
    - %D : 按月计的日期；等于%m/%d/%y
    - %H : 小时(00-23)
    - %I : 小时(00-12)
    - %m : 月份
    - %M : 分钟
    - %S : 秒(00-60)
date +%Y%m%d%H%M%S   => 20170617194225
# 输出时间 是一小时前的时间
date -d'-1 hour' +%F' ' %T  

date -s 06/17/2017
date -s 19:42:25

lsof
    -a : 列出打开文件存在的进程
    -c<进程名>: 列出指定进程所打开的文件
    -g : 列出GID号进程详情
    -d<文件号> : 列出占用该文件号的进程
    +d<目录> : 列出目录下被打开的文件
    +D<目录> : 递归列出目录下被打开的文件
    -n<目录> : 列出使用NFS的文件
    -i<条件> : 列出符合条件的进程。（4、6、协议、:端口、 @ip ）
    -p<进程号> : 列出指定进程号所打开的文件
    -u : 列出UID号进程详情
    -h : 显示帮助信息
    -v : 显示版本信息

# 拷贝本地文件
rsync [options] src dest
# 使用一个远程shell程序将本地机器的内容拷贝到远程机器
rsync [options] src [user@]host:dest
# 使用一个远程shell将远程机器拷贝到本地机器
rsync [options] [user@]host:src dest
# 从远程rsync服务器中拷贝文件到本地机器
rsync [options] [user@]host::src dest
# 从本地机器拷贝文件到远程rsync服务器中
rsync [options] src [user@]host::dest
# 列远程机器的文件列表，类似rsync传输，不过需要在命令中省略本地机器
rsync [options] rsync://[user@]host[:port]/src [dest]

# 参数
-v, --verbose: 详细模式输出
-q, --quiet: 精简模式输出
-c, --checksum: 打开校验开关
-a, --archive: 归档模式，表示以递归方式传输文件，并保持所有文件属性，相当于 `-rlptgoD`
-r, --recursive: 对子目录以递归模式处理
-R, --relative: 使用相对路径信息
-b, --backup: 创建备份
    --backup-dir=DIR 将备份文件放到 DIR 中
    --suffix=SUFFIX: 定义备份文件前缀
-u, --update: 跳过接收机器上较新的文件
-d, --dirs: 不会递归地传输目录
-l, --link: 保留软连接
-k, --copy-dirlinks: 将符号链接转换为指定目录
-K, --keep-dirlinks: 将符号链接作为一个递归的目录
-H, --hard-links: 保留硬链接
-p, --perms: 保持文件权限
-o, --owner: 保持文件属主信息
-g, --group: 保持文件属组信息。 
-D, --devices: 保持设备文件信息
** -t, --times: 保持文件时间信息  **
-S, --sparse: 对稀疏文件进行特殊处理以节省DST的空间
-w, --whole-file: 拷贝文件，不进行增量检测 
-x, --one-file-system: 不要跨越文件系统边界
-B, --block-size=SIZE: 检验算法使用的块尺寸，默认是700字节
-e, --rsh=command: 指定使用rsh、ssh方式进行数据同步
    --rsync-path=PATH: 指定远程服务器上的rsync命令所在路径信息
    --existing: 仅仅更新那些已经存在于DST的文件，而不备份那些新创建的文件
    --delete: 删除那些DST中SRC没有的文件
    --delete-excluded: 同样删除接收端那些被该选项指定排除的文件
    --delete-after: 传输结束以后再删除
    --ignore-errors: 即使出现IO错误也进行删除
    --max-delete=NUM: 最多删除NUM个文件
-C, --cvs-exclude: 使用和CVS一样的方法自动忽略文件，用来排除那些不希望传输的文件
-P, --partial: 保留那些因故没有完全传输的文件，以是加快随后的再次传输
--force: 强制删除目录，即使不为空
--numeric-ids: 不将数字的用户和组id匹配为用户名和组名
--timeout=time: ip超时时间，单位为秒
-I, --ignore-times: 不跳过那些有同样的时间和长度的文件
--size-only: 当决定是否要备份文件时，仅仅察看文件大小而不考虑文件时间
--modify-window=NUM: 决定文件是否时间相同时使用的时间戳窗口，默认为0
-T --temp-dir=DIR: 在DIR中创建临时文件
--compare-dest=DIR: 同样比较DIR中的文件来决定是否需要备份。
--progress: 显示备份过程
-z, --compress: 对备份的文件在传输时进行压缩处理
    --exclude=PATTERN: 指定排除不需要传输的文件模式
    --include=PATTERN: 指定不排除而需要传输的文件模式
    --exclude-from=FILE: 排除FILE中指定模式的文件
    --include-from=FILE: 不排除FILE指定模式匹配的文件
    --version: 打印版本信息
    --address: 绑定到特定的地址
    --config=FILE: 指定其他的配置文件，不使用默认的rsyncd.conf文件
    --port=PORT: 指定其他的rsync服务端口
    --blocking-io: 对远程shell使用阻塞IO
    -stats: 给出某些文件的传输状态
    --progress: 在传输时现实传输过程
    --password-file=FILE: 从FILE中得到密码
-i, --itemize-changes: 输出所有更新的更改摘要
     --out-format=FORMAT     使用指定的FORMAT输出
     --log-file=FILE         将rsync做的操作记录到FILE中
     --list-only             只列出文件，而不拷贝
     --bwlimit=KBPS          限制I/O带宽，KBytes per second
-h, --help: 显示帮助信息。

rsync -azi machine::user/path/dir/ /search/odin/ --exclude '*_log*'

crontab [-u username] [-l|-e|-r]
-u: 只有root才能使用这个参数，可以用其他用户的名义新建/删除 crontab 任务 
-l: 查看 crontab 的内容
-e: 编辑 crontab 的内容
-r: 删除所有的 crontab 的工作内容

# 示例
# 使用 crontab -e 进入到任务编辑页面
crontab -e  
 0  1  *  *  * shell exec.sh
#分 时 日 月 周   执行内容

ps [options]
 -A: 所有的进程均显示出来
 -a: 与 terminal 无关的所有进程
 -u: 有效用户相关的进程
 x: 通常与 a 一起使用，可得到较为完整的信息

 l: 较详细地将PID的信息列出
 j: 工作的格式
 -f: 做一个更完整的输出

# 示例
ps aux
 USER       PID %CPU %MEM    VSZ   RSS TTY      STAT START   TIME COMMAND
root         1  0.0  0.0  10352   680 ?        Ss    2015  18:00 init [3]                             
root         2  0.0  0.0      0     0 ?        S<    2015   1:40 [migration/0]
root         3  0.0  0.0      0     0 ?        SN    2015   0:50 [ksoftirqd/0]
root         4  0.0  0.0      0     0 ?        S<    2015   0:00 [watchdog/0]

top [-d 数字] | top [-bnp]
参数如下：
-d: 后面可以接秒数，就是整个进程界面更新的秒数，默认是 5s
-b: 以批次的方式执行top，通常会结合数据流重定向来批处理结果
-n: 与 -b 搭配，表示需要进行几次 top 结果的数据
-p: 指定某些PID来进行查看
-H: 显示线程
在top命令中，可以使用如下按键命令：
   ?: 显示在top当中可以输入的按键指令
   P: 以 CPU 的使用资源排序显示
   M: 以内存的使用资源排序显示
   N: 以PID来排序
   T: 该进程使用的CPU时间累积排序
   k: 给予某个PID一个信号
   r: 给某个PID重新定制一个nice属性
   q: 离开top

pstree [-A|U] [-up]
参数：
-A: 各进程树之间的连接
-U: 各进程树之间的连接以utf8码的字符来连接
-p: 列出每个进程的PID
-u: 列出每个进程的账号
示例：

init(1)-+-agetty(2112)
        |-crond(2071)---crond(13076)---sh(13084)---sleep(13112)
        |-events/0(8)
        |-events/1(9)
        |-glusterfs(19972)-+-{glusterfs}(19973)
        |                  \`-{glusterfs}(19982)
        |-httpd(1988)-+-httpd(884,apache)

kill -signal PID
killall [-iIe] -signal 命令名称
参数: 
-i: interactive ，交互式的，若需要删除，会出现提示
-e: exact，表示后边接的 命令名称 要一致，但完整的命令不能超过15个字符
-I: 命令名称（可能含有参数），忽略大小写

# 关闭特定的进程
kill -SIGHUP $(ps aux | grep 'syslog' | grep -v 'grep' | awk '{print $2}')

# 关闭一个命令开启的所有进程
killall -i -9 bash

sed [-nerf] [动作]
-n: 安静模式，只有经过处理的那行才会被列出来
-e: 直接在命令行模式上进行 sed 的动作编辑
-f: 直接将sed的动作写在一个文件中
-r: sed支持扩展型正则表达式
-i: 直接修改读取文件的内容

动作说明
    n1, n2: 可选内容，代表选择进行动作的行数；若动作需要在 10到20行之间进行，则 10,20 function
    function 有如下参数：
        a: 新增
        c: 替换
        d: 删除
        i: 插入
        p: 打印
        s: 替换，通常s搭配正则表达式

# 删除2~3行
nl /etc/passwd | sed '2,3d'
# 控制台输出
     1	root:x:0:0:root:/root:/bin/bash
     4	adm:x:3:4:adm:/var/adm:/sbin/nologin
     5	lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
     6	sync:x:5:0:sync:/sbin:/bin/sync

# 在第二行后加上 drink tea ...... 与 drink beer?
nl /etc/passwd | sed '2a drink tea ...... \
> drink beer?'
## 控制台输出
     1	root:x:0:0:root:/root:/bin/bash
     2	bin:x:1:1:bin:/bin:/sbin/nologin
drink tea ...... 
drink beer?
     3	daemon:x:2:2:daemon:/sbin:/sbin/nologin
     4	adm:x:3:4:adm:/var/adm:/sbin/nologin
     5	lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
     6	sync:x:5:0:sync:/sbin:/bin/sync

# 输出第2到4行
nl /etc/passwd | sed -n '2,4p'
# 控制台输出如下
     2	bin:x:1:1:bin:/bin:/sbin/nologin
     3	daemon:x:2:2:daemon:/sbin:/sbin/nologin
     4	adm:x:3:4:adm:/var/adm:/sbin/nologin

# 替换第 2到3行
nl /etc/passwd | sed '2,3c No 2-3number'
# 控制台输出如下
     1	root:x:0:0:root:/root:/bin/bash
No 2-3number
     4	adm:x:3:4:adm:/var/adm:/sbin/nologin
     5	lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
     6	sync:x:5:0:sync:/sbin:/bin/sync

sed 's/要被替换的字符串/新字符串/g'
/sbin/ifconfig eth0 | grep "inet addr" |sed 's/^.*addr://g' | sed 's/Bcast.*$//g'
# 控制台输出
192.168.0.1

# 还可以使用正则匹配捕获内容，替换中 \0 代表整行，\1 代表捕获的第一个内容
sed -rn 's/.*filter_([0-9]+).*$/\0@@@\1/p'

ob.resin.201803281530
cat adcost | awk '{sum+=$1} END {print "Avg= ", sum/NR}'

awk 'BEGIN {max = 0} {if ($1+0 > max+0) max=$1} END {print "Max=", max}' adcost
sed -rn 's/.*NewBlacklistFilter_([0-9]+).*$/\0@@@\1/p'  | awk 'BEGIN {FS="@@@"}  {if $2 >0 sum+=$2} END {print "AVG= ", sum/NR}' 
| awk '{sum+=$1} END {print "Avg= ", sum/NR}'

grep -P 'cost:[0-9]+' --color

cat /etc/passwd | awk '{FS="":} $3 < 10 {print $1 "\t" $3}'
# 使用 if
cat /etc/passwd | awk '{FS="":} {if($3<10) printf "%10s\t%10s", $1, $3}' 

awk '/nologin/' /etc/passwd
## 控制台输出
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin

awk -F ':' '$1 ~ /oo/' /etc/passwd
# 控制台输出
root:x:0:0:root:/root:/bin/bash

awk -F ':' '$1 ~ /o+/' /etc/passwd
# 控制台输出
root:x:0:0:root:/root:/bin/bash
daemon:x:2:2:daemon:/sbin:/sbin/nologin
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown