Skip to content

Latest commit

 

History

History
1143 lines (933 loc) · 24.9 KB

README.md

File metadata and controls

1143 lines (933 loc) · 24.9 KB

Shell

Linux 命令（Command） 和 Shell 内容，放在一起，主要是因为两者紧密联系。

学习指南

常用命令

首字母目录

A

  • alias

    • 显示全部已定义的别名

      > alias lrt='ls -lrt'
> lrt

    • 一般放到bashrc等文件中，shell启动自动加载

      • 我的是放在~/.zshrc里

  • ant

    • ant命令

  • apt

    • 在 Debian 和 Ubuntu 中的 Shell 前端软件包管理器

  • awk

B

  • bash
  • bg

    • 将一个在后台暂停的命令，变成继续执行

      > sleep 10
^Z
[1]  + 99094 suspended  sleep 10
✘ ⚙ > jobs
[1]  + suspended  sleep 10
⚙ > bg %1
[1]  + 99094 continued  sleep 10
[1]  + 99094 done       sleep 10
>

C

  • cal

  • cat

    • 查看文件内容

    • 常用命令

      # 查看操作系统版本
> cat /etc/redhat-release
CentOS Linux release 7.8.2003 (Core)

  • cd

    • 进入目录

  • chmod

    • 修改文件权限

  • chown

    • 修改文件所属

  • clear

    • 清楚屏幕

  • clock

    • 调整 RTC 时间

  • convert

    • GraphicsMagick的工具命令
      • convert -font Hiragino -fill grey -pointsize 50 -draw "text 1768,90 'AI记单词'" /Users/rollin/1-the.jpg

  • cp

    • copy files

    • 复制

      • cp source target
      > cp test1.txt /tmp/
      • cp -R source target
      > cp -R . /tmp/
      • cp source1 source2 target
      > cp test1.txt test2.txt /tmp/

  • crontab

    • 定时执行任务
    • crontab -e
    • crontab -l

  • curl

    • 网络访问
    • 该命令可以用来测试网络情况访问情况，监控网页的响应时间等
      • curl -o /dev/test -s -w %{time_namelookup}::%{time_connect}::%{time_starttransfer}::%{time_total}::%{speed_download}"\n" "http://127.0.0.1:8080/health"
      • curl -o /dev/test -s -w %{time_namelookup}::%{time_connect}::%{time_starttransfer}::%{time_total}::%{speed_download}"\n" "https://www.baidu.com"
        • 0.004548::0.017515::0.130251::0.130386::5974.000
      • curl -o /dev/test -s -w %{time_namelookup}::%{time_connect}::%{time_starttransfer}::%{time_total}::%{speed_download}"\n" "https://www.xianglesong.com"
        • 0.005135::0.078192::0.327840::0.327971::10879.000

D

  • date

    • 查看日期

  • df -h /

    • 查看磁盘使用情况

  • diff

  • dig

    • 域名信息查看

      > dig www.baidu.com

; <<>> DiG 9.10.6 <<>> www.baidu.com
;; global options: +cmd
;; Got answer:
;; ->>HEADER<<- opcode: QUERY, status: NOERROR, id: 50678
;; flags: qr rd ra ad; QUERY: 1, ANSWER: 2, AUTHORITY: 0, ADDITIONAL: 0

;; QUESTION SECTION:
;www.baidu.com.			IN	A

;; ANSWER SECTION:
www.baidu.com.		78	IN	A	36.152.44.95
www.baidu.com.		78	IN	A	36.152.44.96

;; Query time: 239 msec
;; SERVER: 192.168.1.1#53(192.168.1.1)
;; WHEN: Sat Feb 11 12:27:06 CST 2023
;; MSG SIZE  rcvd: 63
      > dig www.xianglesong.com

; <<>> DiG 9.10.6 <<>> www.xianglesong.com
;; global options: +cmd
;; Got answer:
;; ->>HEADER<<- opcode: QUERY, status: NOERROR, id: 39947
;; flags: qr rd ra; QUERY: 1, ANSWER: 1, AUTHORITY: 0, ADDITIONAL: 0

;; QUESTION SECTION:
;www.xianglesong.com.		IN	A

;; ANSWER SECTION:
www.xianglesong.com.	600	IN	A	47.243.232.189

;; Query time: 71 msec
;; SERVER: 192.168.1.1#53(192.168.1.1)
;; WHEN: Sat Feb 11 12:28:22 CST 2023
;; MSG SIZE  rcvd: 53

  • docker

  • du -sh .

    • 返回当前目录使用空间

E

  • egrep
  • emacs
    • 神的编辑器
    • 我不会用
  • expect
    • 很多时候要输入密码，可以借助于该工具，比如mysql，ssh登录等

      • mysql示例 ./expect.sh

        #!/usr/bin/expect

# 首先安装好expect
# yum install -y expect tcl tclx tcl-devel

spawn mysql -h 127.0.0.1 -uroot -p
set timeout 100
expect "Enter password:"
send "123456\r"
interact

F

  • ffmepg
    • 视频相关命令
  • fg
    • fg %n
      • 任务放到前端执行
      • 示例1：
        • vim test.txt &
        • jobs
        • fg 1
      • 示例2：
        • vim test.txt
        • ctrl + z
        • jobs
        • fg 1
  • file
  • find
    • 查找文件
    • find . -type d -name target -exec rm -fr "{}" ;
      • 批量强制删除文件夹
      • 一般删除java项目使用
    • find . -type d -name node_modules -exec rm -fr "{}" ;
      • 批量强制删除文件夹
      • 一般删除前端项目使用
    • find . -type d -empty -delete
      • 批量删除空文件夹
    • find . -name *.log -type f -delete
      • 批量删除文件
  • firewall
    • 防火墙配置
    • systemctl status firewalld
    • systemctl stop firewalld
    • systemctl start firewalld
    • systemctl disable firewalld
      • 开机禁用
    • systemctl enable firewalld
      • 开机启用
  • ftp
  • free
    • free -m
    • echo 1 > /proc/sys/vm/drop_caches
      • free pagecache
    • echo 2 > /proc/sys/vm/drop_caches
      • free dentries and inodes
    • echo 3 > /proc/sys/vm/drop_caches
      • free pagecache, dentries and inodes

G

  • git
    • git工具命令
  • gradle
    • gradle命令
  • grep
    • 正则查找文件（global search regular expression(RE) and print out the line）
    • grep "text" . -r -n
      • 在当前目录下搜索text，并递归查找子目录，输出字符串所在文件行数
      • grep "redis-server" . -rn
    • grep "text" test.sh
      • 在文件test.sh中搜索text
      • grep "text" test.sh -n
        • 在文件test.sh中搜索text，输出字符串所在文件行数
  • groupadd
    • 用户组管理
  • groupdel
    • 删除用户组
  • groupmod
    • 修改用户组
  • gunzip
    • 解压缩文件
  • gzip
    • 压缩文件

H

  • hadoop
    • hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-3.3.1.jar grep input output 'dfs[a-z.]+’
  • hdfs
    • hdfs dfs
      • hdfs dfs -mkdir /user/marulin
  • history
    • 查看历史记录
  • hive
  • hostname
    • hostname orange
      • 设置机器名称为orange
      • hostnamectl set-hostname orange
  • htop
    • 增强top工具

I

  • info
    • Read documentation in Info format
    • 阅读信息格式的文档
    • info ls
  • ifconfig
    • 网络信息
  • impala-shell
  • iostat
    • 查看IO情况
  • ip addr
    • 查看ip地址
    • ip address

J

  • java

    • 执行java程序
    > java -version
openjdk version "1.8.0_362"
OpenJDK Runtime Environment (build 1.8.0_362-b08)
OpenJDK 64-Bit Server VM (build 25.362-b08, mixed mode)

  • javac

    • 编译java代码，基本使用IDE了，一般不用

  • jhat

  • jmap

  • jps

    • 查看java进程

  • jstack

    • 检查java程序问题，类似的命令很多，参考官方说明

  • jstat

  • jobs

K

  • kill

    • 删除进程

    • kill = kill -15

    • kill -2 = CTRL + C

    • kill -9 pid

    • kill -6

      • 产生dump文件

    • kill -l

      [root@apple ~]# kill -l
1) SIGHUP	 2) SIGINT	 3) SIGQUIT	 4) SIGILL	 5) SIGTRAP
2) SIGABRT	 7) SIGBUS	 8) SIGFPE	 9) SIGKILL	10) SIGUSR1
3)  SIGSEGV	12) SIGUSR2	13) SIGPIPE	14) SIGALRM	15) SIGTERM
4)  SIGSTKFLT	17) SIGCHLD	18) SIGCONT	19) SIGSTOP	20) SIGTSTP
5)  SIGTTIN	22) SIGTTOU	23) SIGURG	24) SIGXCPU	25) SIGXFSZ
6)  SIGVTALRM	27) SIGPROF	28) SIGWINCH	29) SIGIO	30) SIGPWR
7)  SIGSYS	34) SIGRTMIN	35) SIGRTMIN+1	36) SIGRTMIN+2	37) SIGRTMIN+3
8)  SIGRTMIN+4	39) SIGRTMIN+5	40) SIGRTMIN+6	41) SIGRTMIN+7	42) SIGRTMIN+8
9)  SIGRTMIN+9	44) SIGRTMIN+10	45) SIGRTMIN+11	46) SIGRTMIN+12	47) SIGRTMIN+13
10) SIGRTMIN+14	49) SIGRTMIN+15	50) SIGRTMAX-14	51) SIGRTMAX-13	52) SIGRTMAX-12
11) SIGRTMAX-11	54) SIGRTMAX-10	55) SIGRTMAX-9	56) SIGRTMAX-8	57) SIGRTMAX-7
12) SIGRTMAX-6	59) SIGRTMAX-5	60) SIGRTMAX-4	61) SIGRTMAX-3	62) SIGRTMAX-2
13) SIGRTMAX-1	64) SIGRTMAX
[root@apple ~]#

  • killall

    • 杀死所有同名进程
    • killall java
      • 所有java启动进程都会被kill

  • kubectl

    • k8s命令工具

L

  • last
  • less
  • ldd
  • ln
    • 链接
  • locate
    • 查找文件
  • logrotate
  • ls
    • 列出当前目录内容
    • 常用ls -lrt
  • lsof
    • list open files

M

  • man

    • system's manual pager
    • 系统参考手册
      • Linux manual page

        • man ls

        • man man

        • man 1 man

        • man [section] ...

          • 1 Executable programs or shell commands
          • 2 System calls (functions provided by the kernel)
          • 3 Library calls (functions within program libraries)
          • 4 Special files (usually found in /dev)
          • 5 File formats and conventions, e.g. /etc/passwd
          • 6 Games
          • 7 Miscellaneous (including macro packages and conventions), e.g. man(7), groff(7), man-pages(7)
          • 8 System administration commands (usually only for root)
          • 9 Kernel routines [Non standard]

        • man 1 printf

          PRINTF(1)                 BSD General Commands Manual                PRINTF(1)

NAME
    printf -- formatted output

SYNOPSIS
    printf format [arguments ...]

DESCRIPTION
    The printf utility formats and prints its arguments, after the first, under control of the format.  The format is a character string
    which contains three types of objects: plain characters, which are simply copied to standard output, character escape sequences which

        • man 3 printf

          
PRINTF(3)                BSD Library Functions Manual                PRINTF(3)

NAME
    printf, fprintf, sprintf, snprintf, asprintf, dprintf, vprintf, vfprintf, vsprintf, vsnprintf, vasprintf, vdprintf -- formatted out-
    put conversion

LIBRARY
    Standard C Library (libc, -lc)

SYNOPSIS
    #include <stdio.h>

  • mkdir

    • 创建目录

  • mv

    • 移动命令

  • mvn

    • mvn命令

  • mongo

    • mongodb命令工具

  • more

  • mount

    • 挂载

  • mysql

    • mysql命令工具

N

  • nc
  • netstat
    • 查看网络情况
  • nginx
    • nginx命令工具
  • node
    • node -v
      • v14.18.1
  • nohup
    • 非挂起运行程序
  • npm
  • npx
  • nslookup

    • 查看DNS记录

      > nslookup www.baidu.com
Server:		192.168.1.1
Address:	192.168.1.1#53

Non-authoritative answer:
www.baidu.com	canonical name = www.a.shifen.com.
Name:	www.a.shifen.com
Address: 36.152.44.95
Name:	www.a.shifen.com
Address: 36.152.44.96

    • ntpdate

      • yum -y install ntpdate
      • ntpdate -u pool.ntp.org
      • date

O

  • open

P

  • passwd
    • 修改密码
  • ping
    • 测试网络是否可通
  • pkill
    • pkill nginx
  • ps
    • 查看进程
  • pstree
    • 查看进程树
  • pwd
    • 返回当前目录路径

Q

  • quit

R

  • reboot
    • 重启
  • redis
    • redis-cli
    • redis-server
  • rm
    • 删除文件
  • rmdir
    • 删除目录
  • rpm
    • rpm -qa | grep java
  • rsync

S

T

  • tail
    • tail -f filename
  • tar
    • 文件压缩和解压缩
  • tcpcopy
    • 流量复制
  • tcpdump
    • 抓包解包
  • telnet
    • 远程登录工具
  • time
  • top
    • 查看当前机器情况
  • touch
    • 创建文件
  • tree

    • list contents of directories in a tree-like format.

    • 树格式查看目录

      > tree .
.
├── dir1
│   ├── test11
│   └── test12
├── dir2
├── test1.txt
└── test2.txt

2 directories, 4 files

> tree /Users/rollin/Desktop/command
/Users/rollin/Desktop/command
├── dir1
│   ├── test11
│   └── test12
├── dir2
├── test1.txt
└── test2.txt

> tree -f /Users/rollin/Desktop/command
  /Users/rollin/Desktop/command
/Users/rollin/Desktop/command
├── /Users/rollin/Desktop/command/dir1
│   ├── /Users/rollin/Desktop/command/dir1/test11
│   └── /Users/rollin/Desktop/command/dir1/test12
├── /Users/rollin/Desktop/command/dir2
├── /Users/rollin/Desktop/command/test1.txt
└── /Users/rollin/Desktop/command/test2.txt

2 directories, 4 files

> tree static -h
static
├── [4.0K]  css
│   ├── [562K]  2.f9bd1be2.chunk.css
│   ├── [1.5M]  2.f9bd1be2.chunk.css.map
│   ├── [ 51K]  main.53dbdb2c.chunk.css
│   └── [ 30K]  main.53dbdb2c.chunk.css.map
└── [4.0K]  js
    ├── [1.3M]  2.9bd7b70e.chunk.js
    ├── [4.1K]  2.9bd7b70e.chunk.js.LICENSE.txt
    ├── [5.0M]  2.9bd7b70e.chunk.js.map
    ├── [4.3K]  3.9c88c745.chunk.js
    ├── [9.7K]  3.9c88c745.chunk.js.map
    ├── [118K]  main.891b7872.chunk.js
    ├── [223K]  main.891b7872.chunk.js.map
    ├── [2.3K]  runtime-main.35471635.js
    └── [ 12K]  runtime-main.35471635.js.map

2 directories, 13 files

# 忽略md和wx_bonus.jpeg -N显示中文，否则可能乱码 
> tree -N . --prune -I '*.md|wx_bonus.jpeg' 
# 只显示md
> tree -N . --prune -P '*.md'

U

  • uname

    > uname -a
  Linux apple 3.10.0-1127.8.2.el7.x86_64 #1 SMP Tue May 12 16:57:42 UTC 2020 x86_64 x86_64 x86_64 GNU/Linux

  • unmount

    • 卸载

  • uniq

  • useradd

    • 添加用户

  • userdel

    • 删除用户

  • usermod

    • 修改账号

  • unzip

    • 解压缩文件

V

  • vi
    • 编辑器之神
  • vim
    • Vi IMproved, a programmer's text editor
  • vmstat

W

  • watch
  • who
    • 查看用户
    • w
  • whoami
    • 查看当前用户
  • wget
    • 下载工具

X

  • xargs
    • build and execute command lines from standard input
    • eXtended ARGuments
    • xargs 是一个强有力的命令，它能够捕获一个命令的输出，然后传递给另外一个命令

      • somecommand |xargs -item command

      • 示例

        > echo "hello world" | xargs
hello world
> echo "hello world" | xargs echo
hello world
> echo "hello world" | xargs mkdir
> ls -l
drwxr-xr-x  2 rollin  staff    64B  2 11 12:03 hello
drwxr-xr-x  2 rollin  staff    64B  2 11 12:03 world
# 假如你有一个文件包含了很多你希望下载的 URL，你能够使用 xargs下载所有链接
> cat url-list.txt | xargs wget -c

      • Linux xargs 命令

      • xargs 命令教程

Y

  • yarn
    • 又一个前端包管理工具
    • yarn add cross-env -D
      • npm install --save-dev webpack-merge
    • yarn add --dev [email protected]
    • yarn add --dev jest-environment-jsdom@^26.6.1
    • yarn create react-app my-app --template typescript
    • yarn add typescript @types/node @types/react @types/react-dom @types/jest
    • yarn test
    • yarn global add [email protected]
    • tyarn
      • npm install yarn tyarn -g
  • yum
    • 在 Fedora 和 RedHat 以及 SUSE 中的 Shell 前端软件包管理器
    • yum search java | grep jdk
    • yum update
    • yum install java

Z

  • zip
    • 压缩文件

常见问题

  • $0

    • 返回执行shell脚本的名称

      > cat test.sh 
#!/bin/bash

echo "$0"

> sh test.sh
test.sh

> ./test.sh
./test.sh

  • $1

    • 返回对应位置参数

      > cat test.sh 
#!/bin/bash

echo "$0"
echo "$1"
echo "$2"

> sh test.sh a b c
test.sh
a
b

  • $?

    • is used to find the return value of the last executed command.

    • 返回上次命令执行的返回值，shell中一般0表示成功。

      > cat test.sh 
#!/bin/bash

pwd
echo $?

ls test.txt
echo $?

> sh test.sh
/Users/rollin/shell
0
ls: test.txt: No such file or directory
1

  • $$(2个$)

    • 指的是脚本运行的当前进行id号。

      > cat test.sh
#!/bin/bash

echo $$
sleep 10

> sh test.sh
85525

  • $*

    • 所有参数，当有多个参数的时候，所有参数拼成一个长字符串作为一个参数

  • $@

    • 所有参数，当有多个参数的时候，每个参数占用一个数组元素

      > cat test.sh
#!/bin/bash

echo '$* ':"$*"
echo '$@ ':"$@"

echo "* show 1"
for i in $*; do
    echo "$i"
done

echo "* show 2"
for i in "$*"; do
    echo "$i"
done

echo "@ show"
for i in "$@"; do
    echo "$i"
done

> sh test.sh a b c
$* :a b c
$@ :a b c
* show 1
a
b
c
* show 2
a b c
@ show
a
b
c

  • $#

    • 参数的个数

      > cat test.sh
#!/bin/bash

echo '$# ':"$#"

> sh test.sh a b c
3

  • $!

    • 显示shell脚本中上一个后台执行命令的进程id号

      > cat test.sh
#!/bin/bash

sleep 10 &
echo '$!':$!
sleep 10

> sh test.sh &
[1] 4470
$!:4474    

> ps -ef|grep sleep
502  4474  4470   0  2:30下午 ttys001    0:00.01 sleep 10
502  4476  4470   0  2:30下午 ttys001    0:00.01 sleep 10

  • &&

    • means “AND”. And in command execution context like this, it means items to the left as well as right of && should be run in sequence in this case.
    • 表示常规的与操作。

  • &

    • means that the preceding commands—to the immediate left of the &—should simply be run in the background.
    • 表示后台执行。

  • >&

    • is the syntax to redirect a stream to another file descriptor. echo test 1>&2 To redirect stdout to stderr.

    • 重定向标准输出到标准错误。

    • 0 is stdin, 标准输入

    • 1 is stdout, 标准输出

    • 2 is stderr, 标准错误

  • /dev/null

    • is the null file. Anything written to it is discarded.
    • 表示空文件，任何输入会被丢弃。

  • dirname

    BASEPATH=$(cd `dirname $0`; pwd)

  • basename

    $(basename "$0")
    • basename(3) — Linux manual page
      • 当向basename传递一个路径名时，它会删除任何前缀，直到最后一个斜线（ '/' ）字符，然后返回结果。
      • 主要用途获取文件名称。

Shell编程

  • shell脚本调试

    • sh -x ./script.sh

      > cat test.sh
#!/bin/bash

echo "today is :"$(date +'%Y-%m-%d')

> sh -x test.sh
++ date +%Y-%m-%d
+ echo 'today is :2023-02-10'
today is :2023-02-10

    • 代码内部设置

      > cat test.sh
#!/bin/bash

echo "start"
set -x
echo "today is :"$(date +'%Y-%m-%d')
set +x
echo "end"
> sh test.sh
start
++ date +%Y-%m-%d
+ echo 'today is :2023-02-10'
today is :2023-02-10
+ set +x
end

    • 文件开始标注

      > cat test.sh
#!/bin/sh -x

echo "start"
echo "today is :"$(date +'%Y-%m-%d')
echo "end"
> ./test.sh
+ echo start
start
++ date +%Y-%m-%d
+ echo 'today is :2023-02-10'
today is :2023-02-10
+ echo end
end

  • sh -v test.sh

    • 显示输出打印命令行的原始内容

      > cat test.sh
#!/bin/sh

echo "today is :"$(date +'%Y-%m-%d')
echo "end"
> sh -v test.sh
#!/bin/sh

echo "today is :"$(date +'%Y-%m-%d')
date +'%Y-%m-%d'
today is :2023-02-10
echo "end"
end

函数调用

  • 函数调用

    > cat func.sh

#!/bin/bash

datetime=$(date "+%Y-%m-%d %H:%M:%S")

func() {
    echo "func $datetime"
}

func

function loop_print() {
    count=0
    while [ $count -lt "$1" ]; do
        echo $count
        ((count++)) || true
        sleep 1
    done
    return 0
}

loop_print 3

function func_params() {
    echo "$0"
    echo "$1"
    echo "$2"
    echo "$3"
    echo "$*"
    return 0
}

func_params 1 2 3 4 5

    > sh func.sh   
func 2023-02-11 08:57:51
0
1
2
func.sh
1
2
3
1 2 3 4 5

编程规范

Zsh

推荐资料

参考文献

  1. https://linux.die.net/man/1/bash
  2. Shell 输入/输出重定向
  3. Redirections
  4. Linux 命令大全
  5. OpenSSH Manual Pages
  6. Shell 传递参数
  7. Command Line Text Processing
  8. Linux manual page