SET 命令
用途:
可以设置 shell 的执行方式,不带参数时输出环境变量。
> set [+-abCdefhHklmnpPtuvx]
注:
1. [-] 表示设置参数
2. [+] 表示取消设置参数
示例:
> tmp="nice day"
> $tmp
nice day
> set | grep tmp
tmp="nice day"
> unset tmp
> $tmp
SSH 命令
用途:
连接远程计算机。
> ssh -p <port> <user>@<hostname> <remote cmd>
注:
- [-p] 指定端口号,默认为 22
- [remote cmd] 远程执行命令并显示到本地继续工作
配置 [.ssh] 在 [~/.ssh/config] 中,
Host <myhost>
User <username>
HostName <ip>
IdentityFile ~/env/<username>.id_rsa
可快速进行ssh连接,ssh myhost
。
SSHPASS 命令
不用提示输入密码,直接使用配置的密码进行远程登录,适用于脚本。
安装:
# Ubuntu
apt-get install sshpass
# Mac
brew install https://raw.githubusercontent.com/kadwanev/bigboybrew/master/Library/Formula/sshpass.rb
进程管理命令
前后台切换命令 bg、fg
> fg <task id>
> bg <task id>
注:
- 当使用这两个任务时,如果提示
no job control in this shell
,可以使用set -m
命令开启。 - 当一个任务进程在执行过程中想要暂时挂起,可以使用
ctrl + Z
,若要终止,进入suspended
状态,使用ctrl + C
,进入terminated
状态。 - 挂起的任务可以通过
fg
重新调到前台运行,或者通过bg
调到后台运行。 - 若要终止挂起的任务,可以使用
kill <pid>
。
& 字符的作用
用途:
放在启动参数后面表示设置此进程为后台进程,这是称之为 job。通过 jobs
命令可以查看当前有多少后台运行的命令。
示例:
> ./run.sh &
> jobs -l
注:
- [-l] 显示pid。
nohup 保住进程
当用户关闭窗口时,终端会受到HUP(hungup)信号,从而关闭其所有子进程。
若要让命令不被终止,有两种处理方式:
- 让进程忽略HUP信号,
nohup
之所为 - 让进程运行在新的会话中,
setsid
、(<cmd> &)
之所为
示例:
> nohup ping www.ibm.com &
> setsid ping www.ibm.com
> (ping www.ibm.com &)
> ps -ef | grep www.ibm.com
如果事前没有使用前面的方式保住进程,那么可以使用如下流程进行补救:
- 先
ctrl+Z
挂起进程,使用jobs -l
获取进程号; - 使用
bg <pid>
将其放入后台运行; - 再使用
disown <pid>
,可以避免 HUP 信号的影响。
使用 nohup
命令时默认会将输出保存到文件 nohup.ou
,可以通过以下方式修改保存文件
> nohup ${my_app} > common.out 2> error.out
> nohup ${my_app} > all_in.out &
ps 进程快照
process status, 列出当前运行的进程的快照。命令参数:
- [-A] 显示所有进程;
- [-e] 显示环境变量;
- [-f] 显示程序间的关系;
- [-aux] 显示所有包含其他使用者的进程。
查找特定的名称的进程时通常与 grep 命令连用,以查找 Wechat 相关进程为例:
# 将所有进程中的包含 Wechat 的连同表头一起输出
> ps -ef | grep -Ei 'PID|Wechat'
在我的电脑上输出结果是:
UID PID PPID C STIME TTY TIME CMD
501 1079 1 0 Thu10AM ?? 3:23.55 /Applications/WeChat.app/Contents/MacOS/WeChat
kill 终止进程
终止进程的命令,参数有:
- [-9] 强制删除;
文件管理命令
tail 查看文件末尾
> tail [-n <line numbers>] [-f] <file>
注:
- [-n] 可以指定显示的日志行数,不指定默认为 10 行
- [-f] 可以监视文件的增长,简缩的命令为
tailf
- 与之相对应的显示前面几条日志的命令为
head
cat 一次显示文件内容
> cat [-ns] <file>...
注:
- [-n] 可以显示行号
- [-s] 可以合并连续的空行为一
- 与之相对的命令为
tac
可以从尾到头显示文件内容(Mac 好像不支持)
示例:
# 一次显示整个文件
cat <file1> <file2>
# 创建新文件
cat > <file>
# 将多个文件合并为一个文件
cat <file1> <file2> > <file>
more 逐页显示文件内容
> more [-s] [-<line numbers>] [+<line numbers>] <file>
注:
- [-s] 可以合并连续的空行为一
- [-n] 可以定义每次上滚 n 行
- [+n] 可以指定从第 n 行开始显示
ctrl +F
向上滚动一屏,空格键
向下滚动一屏=
显示当前显示的行数范围及文件名称
示例:
# 从第 100 行开始显示 debug.log, 每次滚动 10 行,合并空行为一
> more -s -10 +100 debug.log
less 分页显示文件内容
比 more
强大的真正意义上的分页查看文件命令,more
一次会加载整个文件,而 less
是逐页加载。less
还支持向上翻页和搜索。
> less [-gimNsS] [-x <numbers>] <file>
注:
- [-g] 高亮先前的搜索结果
- [-i] 搜索时忽略大小写
- [-m] 显示已显示内容的百分比
- [-N] 显示行号
- [-s] 合并显示连续的空行为一
- [-S] 行过长时舍弃超出部分
- [-x 4] 设置
tab
为规定的数量的空格 /
向上查找?
向下查找n
正向重复查找N
反向重复查找b
向后翻一页d
向后翻半页y
向前翻一页u
向前翻半页q
退出
示例:
# 查找历史命令中包含run的命令
> history | less
/run
# 假设找到要运行的命令序号为 100,按 q 退出,再按如下重新执行
> !100
grep 查找文件内容
grep (global search regular expression(RE) and print out the line,全面搜索正则表达式并把行打印出来)
> grep <option> <file>...
- [-A num] 显示匹配行后面 num 行
- [-B num] 显示匹配行前面 num 行
- [-C num] 显示匹配行前后各 num 行
- [--color=auto] 匹配结果自动配色
- [-m num] 当匹配了 num 行后不再继续查找
- [-n] 显示匹配行所在行号
- [-v] --invert-match 输出不匹配的行
- [-i] 不区分大小写
- [-E] --extended-regexp 支持扩展的正则表达式
示例:
# 查询日志文件中包含 keyword 但不含 keywords 的行,最多输出 10 行匹配,且显示匹配行前后 2 行
> grep -C 2 -n -m 10 keyword *.log | grep -v keywords
# 同时查找多个关键字
> grep -E 'a_key|b_key' a.file
tar 解压缩文件
tar 最初的设计目的是将文件备份到磁带上(tape archie),故名 tar。
tar 代表未压缩的 tar 文件,已经压缩的 tar 文件会附加压缩文件的扩展名,如 .tar.gz
表示经过 gzip 压缩。
命令参数:
[-x] --extract 解开 tar 文件
[-z] --gzip,--gunzip,--unzip 调用 gzip 执行压缩或解压缩
[-f] --file 指定要处理的文件名
[-t] --list 列出 tar 文件中包含的文件的信息
解压 .tar.gz 文件到当前文件夹
tar -zxf a_file.tar.gz
解压 .tar 文件到 tmp 文件夹
tar -xf b_file.tar -C tmp/
gzip 压缩文件 c_file 和目录 d_dir 到 out.tar.gz
tar -czvf out.tar.gz c_file d_dir
gunzip 解压文件
gzip -d all.gz
gunzip all.gz
awk 文本分析
文本处理语言和工具,用于在文件中查找与模式匹配的行并在这些行上执行指定的操作,名称取自三位创始人 Alfred Aho,Peter Weinberger, 和 Brian Kernighan 的 Family Name 的首字符。可参见 AWK程序设计语言 、 awk命令 - IBM 以及 Linux awk 命令 - runoob.com 进行完整的学习。下面简单介绍下语法:
> awk '{[pattern] action}' {filenames} # 行匹配语句 awk '' 只能用单引号
Pattern 支持:
- 正则表达式,eg.
awk '/smith?/' a_file
- 关系表达式,eg.
awk '$1 > $3' b_file
- 模式的组合,以上模式的组合
- 与或非
|| && !
,值为真则匹配 - 圆括号
()
,组合匹配 - 逗号
,
,匹配前一个的匹配
- 与或非
- BEGIN 和 END 模式
- BEGIN 模式在读取输入前执行
- END 模式在读取输入后执行
示例:
# 指定分隔符(默认是空格或 TAB),有两种写法
## 用逗号分割
> awk -F, '{print $3}' a_file
> awk 'BEGIN{FS=","} {print $3}' a_file
## 先用空格分割再用逗号分割
> awk -F '[ ,]' '{print $3}' a_file
> awk 'BEGIN{FS="[ ,]"} {print $3}' a_file
# 忽略匹配文本的大小写
> awk 'BEGIN{IGNORECASE=1} /a_key/' a_file
# 获取 Kafka 进程的 ID
> ps aux | grep server.properties | grep -v grep | awk '{print $2}'
sed
alias 添加别名
树状查看文件:
# 注意:这种方式会列出所有文件,建议使用 brew instal tree. 因为可以使用 `tree -L [depth]`自定义深度
> alias tree="find . -print | sed -e 's;[^/]*/;|____;g;s;____|; |;g'"
> source ~/.zshrc
取消别名:
> unalias tree
ctrl 移动光标
Windows 快捷键
Mac 快捷键
功能
ctrl + 左右键
option + 左右键
在单词之间跳转
ctrl + a
同左
跳到本行的行首
ctrl + e
同左
跳到页尾
ctrl + u
同左
删除当前光标前面的文字
ctrl + k
同左
删除当前光标后面的文字
ctrl + w、ctrl + d
同左
对于当前的单词进行删除操作,w删除光标前面的单词的字符,d则删除后面的字符
ctrl + y
同左
恢复删除的文字
ctrl + l
同左
清屏
同步一台服务器中的文件到另一台
基本思路:拷贝文件到本地,然后覆盖另一台上的同名文件。命令如下,其中 server-a
以及 server-b
是定义在文件 ~/.ssh/config
中的 HOST
。
ssh server-a "cat ~/test.txt" > ~/Desktop/test.txt;scp ~/Desktop/run.sh server-b:~/test.txt
# scp
scp root@172.34.2.7:/root/apps/web/app.mdeploy.config ~/Downloads
Tree 命令中文乱码
tree -N folder
更改文件访问权限
以下摘引自 鸟哥的 Linux 私房菜 第六章,略有删减。
(1)数字类型改变文件权限
Linux文件的基本权限就有九个,分别是 owner/group/others
三种身份各有自己的 read/write/execute
权限,文件的权限字符为:-rwxrwxrwx
, 这九个权限是三个三个一组的!其中,我们可以使用数字来代表各个权限,各权限的分数对照表如下:
r:4 w:2 x:1
每种身份( owner/group/others
)各自的三个权限( r/w/x
)分数是需要累加的,例如当权限为: [-rwxrwx---]
分数则是
owner = rwx = 4+2+1 = 7 group = rwx = 4+2+1 = 7 others= --- = 0+0+0 = 0
变更权限的指令chmod的语法是这样的:
chmod [-R] xyz 文件或目录
选项与参数:
- xyz : 就是刚刚提到的数字类型的权限属性,为 rwx 属性数值的相加。
- -R : 进行递归(recursive)的持续变更,亦即连同次目录下的所有文件都会变更。
(2)符号类型改变文件权限
还有一个改变权限的方法呦!从之前的介绍中我们可以发现,基本上就九个权限分别是 (1)user (2)group (3)others
三种身份啦!那么我们就可以藉由 u, g, o
来代表三种身份的权限!此外, a
则代表 all 亦即全部的身份!那么读写的权限就可以写成 r, w, x
!也就是可以使用底下的方式来看:
格式
chmod
u g o a
+(加入) -(除去) =(设定)
r w x
文件或目录
例子
chmod
a
=
r
.bashrc
来实作一下吧!假如我们要设定一个文件的权限成为-rwxr-xr-x
时,基本上就是:
user (u):具有可读、可写、可执行的权限;
group 与 others (g/o):具有可读与执行的权限。
chmod u=rwx,go=rx .bashrc
注意喔!那个 u=rwx,go=rx 是连在一起的,中间并没有任何空格!
chmod a+w .bashrc
增加.bashrc这个文件的每个人均可写入的权限
正则方式删除文件(Delete files with regular expression)
偶然间,使用 ll
命令发现桌面上有许多 ~$
开头的文件,是用微软三件套打开后暂存文件,原文件已经删除了,可这暂存文件还隐存在桌面上,于是想要批量删除它们。
# 在当前目录找到以 “~$” 开头的文件,然后执行删除操作
find . -name "~\$*" -delete
wget 下载文件
wget "http://mirrors.hust.edu.cn/apache/kafka/2.1.0/kafka_2.11-2.1.0.tgz"
不下载文件,只控制台输出
wget -qO- $url
使用 Post 请求
wget --post-data="$post-data" $url
wget --post-file="$post-file" $url
查看系统信息
# 查看内核/操作系统/CPU信息
uname -a
# 查看操作系统版本
head -n 1 /etc/issue
# 查看CPU信息
cat /proc/cpuinfo
# 查看计算机名
hostname
# 查看环境变量
env
# 查看内存使用量和交换区使用量
free -m
# 查看各分区使用情况
df -h
# 查看指定目录的大小
du -sh <目录名>
# 查看内存总量
grep MemTotal /proc/meminfo
# 查看空闲内存量
grep MemFree /proc/meminfo
# 查看系统运行时间、用户数、负载
uptime
# 查看系统负载
cat /proc/loadavg
# 查看所有磁盘分区
fdisk -l
让系统的 CPU 变高
for i in `seq 1 $(cat /proc/cpuinfo |grep "physical id" |wc -l)`; do dd if=/dev/zero of=/dev/null & done
排查占用 CPU 高的 Java 线程
使用 https://github.com/oldratlee/useful-scripts 即可,命令如下:
sh show-busy-java-threads
限制:
- Linux 环境;
- 安装了 jstack,Amazon Linux 默认没有该工具,需要通过
sudo yum install java-1.8.0-devel
安装。