Linux 笔记
1.服务无响应
netstat -ano|grep <PROT> | grep LISTEN
netstat -ano|grep 11008 | grep LISTEN
11007
2.链接数
netstat -n | awk '/^tcp/ {n=split($(NF-1),array,":");if(n<=2)++S[array[(1)]];else++S[array[(4)]];++s[$NF];++N} END {for(a in S){printf("%-20s %s\n", a, S[a]);++I}printf("%-20s %s\n","TOTAL_IP",I);for(a in s) printf("%-20s %s\n",a, s[a]);printf("%-20s %s\n","TOTAL_LINK",N);}'
p s znetstat -n | awk '/^tcp/ {++state[$NF]} END {for(key in state) print key,"\t",state[key]}'
netstat -n|grep TIME_WAIT|awk '{print $5}'|sort|uniq -c|sort -rn|head -n20
3.iostat(磁盘IO情况监控)
iostat -xz 1
4.free(内存使用情况)
free -m
eg:
total used free shared buffers cached
Mem: 1002 769 232 0 62 421
-/+ buffers/cache: 286 715
Swap: 1153 0 1153
第一部分Mem行:
total 内存总数: 1002M
used 已经使用的内存数: 769M
free 空闲的内存数: 232M
shared 当前已经废弃不用,总是0
buffers Buffer 缓存内存数: 62M
cached Page 缓存内存数:421M
关系：total(1002M) = used(769M) + free(232M)
第二部分(-/+ buffers/cache):
(-buffers/cache) used内存数：286M (指的第一部分Mem行中的used – buffers – cached)
(+buffers/cache) free内存数: 715M (指的第一部分Mem行中的free + buffers + cached)
可见-buffers/cache反映的是被程序实实在在吃掉的内存,而+buffers/cache反映的是可以挪用的内存总数.
第三部分是指交换分区
5.vmstat(给定时间监控CPU使用率, 内存使用, 虚拟内存交互, IO读写)
vmstat 2 1
eg:
r b swpd free buff cache si so bi bo in cs us sy id wa
1 0 0 3499840 315836 3819660 0 0 0 1 2 0 0 0 100 0
0 0 0 3499584 315836 3819660 0 0 0 0 88 158 0 0 100 0
0 0 0 3499708 315836 3819660 0 0 0 2 86 162 0 0 100 0
0 0 0 3499708 315836 3819660 0 0 0 10 81 151 0 0 100 0
1 0 0 3499732 315836 3819660 0 0 0 2 83 154 0 0 100 0
- r 表示运行队列(就是说多少个进程真的分配到CPU)，我测试的服务器目前CPU比较空闲，没什么程序在跑，当这个值超过了CPU数目，就会出现CPU瓶颈了。这个也和top的负载有关系，一般负载超过了3就比较高，超过了5就高，超过了10就不正常了，服务器的状态很危险。top的负载类似每秒的运行队列。如果运行队列过大，表示你的CPU很繁忙，一般会造成CPU使用率很高。
- b 表示阻塞的进程,这个不多说，进程阻塞，大家懂的。
- swpd 虚拟内存已使用的大小，如果大于0，表示你的机器物理内存不足了，如果不是程序内存泄露的原因，那么你该升级内存了或者把耗内存的任务迁移到其他机器。
- free 空闲的物理内存的大小，我的机器内存总共8G，剩余3415M。
- buff Linux/Unix系统是用来存储，目录里面有什么内容，权限等的缓存，我本机大概占用300多M
- cache cache直接用来记忆我们打开的文件,给文件做缓冲，我本机大概占用300多M(这里是Linux/Unix的聪明之处，把空闲的物理内存的一部分拿来做文件和目录的缓存，是为了提高 程序执行的性能，当程序使用内存时，buffer/cached会很快地被使用。)
- si 每秒从磁盘读入虚拟内存的大小，如果这个值大于0，表示物理内存不够用或者内存泄露了，要查找耗内存进程解决掉。我的机器内存充裕，一切正常。
- so 每秒虚拟内存写入磁盘的大小，如果这个值大于0，同上。
- bi 块设备每秒接收的块数量，这里的块设备是指系统上所有的磁盘和其他块设备，默认块大小是1024byte，我本机上没什么IO操作，所以一直是0，但是我曾在处理拷贝大量数据(2-3T)的机器上看过可以达到140000/s，磁盘写入速度差不多140M每秒。
- bo 块设备每秒发送的块数量，例如我们读取文件，bo就要大于0。bi和bo一般都要接近0，不然就是IO过于频繁，需要调整。
- in 每秒CPU的中断次数，包括时间中断。
- cs 每秒上下文切换次数，例如我们调用系统函数，就要进行上下文切换，线程的切换，也要进程上下文切换，这个值要越小越好，太大了，要考虑调低线程或者进程的数目,例如在apache和nginx这种web服务器中，我们一般做性能测试时会进行几千并发甚至几万并发的测试，选择web服务器的进程可以由进程或者线程的峰值一直下调，压测，直到cs到一个比较小的值，这个进程和线程数就是比较合适的值了。系统调用也是，每次调用系统函数，我们的代码就会进入内核空间，导致上下文切换，这个是很耗资源，也要尽量避免频繁调用系统函数。上下文切换次数过多表示你的CPU大部分浪费在上下文切换，导致CPU干正经事的时间少了，CPU没有充分利用，是不可取的。
- us 用户CPU时间，我曾经在一个做加密解密很频繁的服务器上，可以看到us接近100,r运行队列达到80(机器在做压力测试，性能表现不佳)。
- sy 系统CPU时间，如果太高，表示系统调用时间长，例如是IO操作频繁。
- id 空闲 CPU时间，一般来说，id + us + sy = 100,一般我认为id是空闲CPU使用率，us是用户CPU使用率，sy是系统CPU使用率。
- wt 等待IO CPU时间。
6.sar(CPU,网络,内存,I/O)
a.网络吞吐
sar -n DEV 1
sar -n TCP,ETCP 1
sar -n 2 3
b.CPU监控
sar -u 1 2
sar -p ALL 1 1
sar -P ALL -u 2 2
08:21:16 PM CPU %user %nice %system %iowait %steal %idle
08:21:18 PM all 2.25 0.00 48.25 0.00 0.00 49.50
08:21:18 PM 0 0.50 0.00 1.00 0.00 0.00 98.51
08:21:18 PM 1 4.02 0.00 95.98 0.00 0.00 0.00
c.内存
sar -r 1 2
d.I/O
sar -b 1 2
sar -d 1 2
7.perf(CPU)
sudo yum install perf
yum install sysstat
systemctl start sysstat
systemctl enable sysstat
perf record -a -e cycles -o cycle.perf -g sleep 10
perf report -i cycle.perf | more
...
75.65% cat [kernel.kallsyms] [k] __clear_user
|
--- __clear_user
|
|--99.56%-- read_zero
| vfs_read
| sys_read
| system_call_fastpath
| __GI___libc_read
--0.44%-- [...]
2.34% cat [kernel.kallsyms] [k] system_call
|
--- system_call
|
|--56.72%-- __write_nocancel
|
--43.28%-- __GI___libc_read
8.top & perf:
top -p `ps aux | grep "xxx" | grep -v grep | cut -c 9-15`
top -p：指定进程
top -d 1：指定屏幕刷新时间，1s刷新一次
top -b：表示以批处理模式操作
ps aux：列出所有进程
grep：查找指定进程
grep -v：反向查找
cut -c 9-15：选择每行指定列的字符
sudo perf record -a --call-graph dwarf -p `ps aux | grep "xxx" | grep -v grep | cut -c 9-15` -d 1 -b
perf record -g XXX 对 XXX 程序的热点和调用栈进行采样
其中，
-a：表示对所有CPU采样
--call-graph dward：表示分析调用栈的关系
-p：表示分析指定的进程
通过 Ctrl + C 结束后，会生成 perf.data 文件，然后通过 report 导出报告，即可以查看 main 函数和子函数的CPU平均占用率。
sudo perf report -i perf.data > perf.txt
lsof -p PID | grep cwd
9.高频：
磁盘：df -h
网络：netstat -nat | awk '{print $6}' | sort | uniq -c | sort -rn
查看服务器长链接：netstat -an | grep 8080 | wc -l
IO：iostat
内存：free -m
CPU：top -Hp
JVM：jstack（线程）、jmap（内存）、jstat（GC）
其他工具：JVisual、MAT、arthas
提取文件权限: sudo chmod +777 文件路径名
netstat -tln
netstat -tln | grep 9090
10.日志：
cat info.log | grep -n -B100 -A100 'test' | tail -n 300
cat info.0.log | grep -n -A2 'test' | grep -n -A2 'hello'
cat info.0.log | grep -n 'test'
tail -100f xx.logs
11.firewalld
systemctl status firewalld
systemctl stop firewalld
firewall-cmd --zone=public --list-ports
firewall-cmd --zone=public --add-port=80/tcp --permanent
firewall-cmd --reload
firewall-cmd --zone=public --remove-port=80/tcp --permanent
netstat -anp | grep 8080
netstat -tln | grep 8080
lsof -i :8080
12.cmd
netstat -aon|findstr 8080
taskkill /f /im 14416
netstat -o
netstat -ao -p udp
tasklist | findstr /i "42152"
telnet IP/域名 端口
shutdown -s -t 3600
shutdown -s -t 600
shutdown -a
13.Docker :
systemctl start docker
docker ps -a
docker images
sudo docker container ls
docker run -d --restart=always -p 27017:27017 --name mymongo -v /data/db:/data/db -d mongo
docker exec -it 0ccbb13c81ad bash
docker exec -it mymongo/bin/bash
ctrl + P + Q
-v /etc/localtime:/etc/localtime
14.Redis:
redis-cli -h 127.0.0.1 -p 6379 shutdown
redis-cli -h 127.0.0.1 -p 6379 -u 1999 shutdown
kill -9 pid
redis-server /绝对路径/redis.conf
15.mongoDB:
mongo
show dbs
16.GitHub 搜索:
in:name test
in:descripton test
in:readme test
stars:>3000 test
stars:1000..3000 test
forks:>1000 test
forks:1000..3000 test
size:>=5000 test
pushed:>2019-02-12 test
created:>2019-02-12 test
user:test
license:apache-2.0 test
language:java test
user:test in:name test
17.maven:
a.命令
mvn tomcat:run
mvn -v
mvn clean
mvn compile
mvn text
mvn package
mvn install
mvn deploy
mvn clean install -e -U
-Dmaven.wagon.http.ssl.insecure=true -Dmaven.wagon.http.ssl.allowall=true
-DarchetypeCatalog=internal
-Dfile.encoding=GBK
b.maven 上传私库：
mvn deploy:deploy-file -DgroupId=com.test -DartifactId=test-java -Dversion=0.0.1-SNAPSHOT -Dpackaging=jar -Dfile=test-java-0.0.1-SNAPSHOT.jar -Durl=http://admin:admin123@192.168.1..7:8081/nexus/content/repositories/snapshots
18.JS脚本
document.querySelector(".tab").children[1].click();
document.querySelector(".setCode").click();
document.querySelector("input").click();
document.querySelector("input").value=123456; document.querySelector(".submitBtn").children[0].click();
document.querySelector('bwp-video').playbackRate=3
19.nginx
start nginx
nginx -s stop
nginx -s quit
nginx -s reload
20.hexo
npm install -g hexo-cli
hexo -v
mkdir blog
cd blog
sudo hexo init
hexo s
http://localhost:4000/
hexo n "我的第一篇文章"
npm audit fix --force
yarn add hexo-theme-aurora
hexo clean
hexo g
cnpm install --save hexo-deployer-git
deploy:
type: git
repo: https://github.com/YourGithubName/YourGithubName.github.io.git
branch: master
hexo d
https://YourGithubName.github.io/
git clone https://github.com/litten/hexo-theme-yilia.git themes/yiliac
hexo c
hexo g
hexo d
https://YourGithubName.github.io/
npm install hexo-theme-aurora --save
cp -rf ./node_modules/hexo-theme-aurora/_config.yml ./_config.aurora.yml
21.markdown
<video src="视频链接"></video>
<iframe height=498 width=510 src="视频链接">
<audio src="mp3文件链接地址"></audio>
<iframe frameborder="no" border="0" marginwidth="0" marginheight="0" width=330 height=86 src="//music.163.com/outchain/player?type=2&id=33367876&auto=1&height=66"></iframe>
