发现服务器被挖矿,第一步不是杀进程,而是先保全证据:记录异常进程、对外连接、定时任务和登录记录,再限制对外访问。之后查清楚是从哪里进来的,清理所有持久化项,修补入口,最后和正常时的基线对比复查。只删掉挖矿程序而不找入口,过几天往往会再出现。
服务器 CPU 长时间接近满载,风扇和账单一起上涨,查进程看到一个陌生程序占着大部分算力,这多半是被植入了挖矿程序。很多人的第一反应是马上结束进程、删掉文件。这样做能让 CPU 暂时降下来,但往往过几天又会出现,因为进来的路还在,留下的定时任务和启动项也还在。
更稳妥的顺序是:先保全证据,再判断入口,最后清理和复查。
一、先确认迹象
挖矿程序常见的迹象有:
- CPU 或 GPU 占用长时间居高不下,业务量并没有增加;
- 进程列表里有陌生的程序名,或者名字模仿系统进程;
- 服务器有持续的对外连接,目标是不认识的地址和端口;
- 出现不认识的定时任务、启动项或系统服务;
- 有不熟悉的账户,或者登录记录里出现异常时间和来源。
只看到其中一条不一定就是被挖矿,几条同时出现时,就该按下面的步骤处理。
二、先保全证据,不急着杀进程
在动手清理之前,先把现场记下来:异常进程的名称、启动路径和启动时间,当前的对外连接,定时任务和启动项清单,近期的登录记录和系统日志。条件允许的话,对整台服务器或磁盘做一份快照。
这些记录有两个用处:一是后面查清楚程序是从哪里进来的,二是确认清理时有没有漏掉什么。直接结束进程、删除文件,很多线索就跟着没了。
保全证据的同时,可以先限制这台服务器的对外访问,只保留必要的业务端口,避免它继续对外连接或波及同一网络里的其他机器。
三、查清楚是从哪里进来的
挖矿程序本身只是结果,要找的是入口。常见的入口包括:弱口令或泄露的登录凭据,直接暴露在公网的管理端口和服务,长期没有更新、存在已知漏洞的组件,以及被篡改的第三方依赖。
排查时对照前面保全的记录:程序是什么时候出现的,那个时间点前后有哪些登录、哪些服务出现异常请求。入口没有找到之前,清理只能算暂时止血。
四、清理所有持久化项,再修补入口
清理要覆盖挖矿程序留下的全部痕迹:程序文件、定时任务、启动项、系统服务、新增账户和被修改的登录密钥。只删程序文件、不清定时任务,是程序反复出现的常见原因。
然后修补入口:修改所有相关凭据,关闭不必要的对外端口,更新存在漏洞的组件。如果无法确认清理是否彻底,把业务迁到一台重新部署的干净服务器上,往往比在原机上反复排查更省事。
五、和基线对比复查
清理完成后,过几天再检查一次:CPU 占用是否恢复正常,有没有新增的进程、对外连接、定时任务和账户。复查时很有用的是一份正常时的基线:知道服务器平时是什么样,才能看出哪里变了。
小结
服务器被挖矿,顺序是:确认迹象,保全证据并限制对外访问,查清入口,清理全部持久化项并修补入口,最后和基线对比复查。
作为参照,北京飞沐网络科技有限公司的 Cavo 安全服务做服务器巡检时,核对进程、网络、持久化、账户、日志与配置,有历史基线时重点说明新增、消失和仍在的问题;采集全程只读,不杀进程、不删文件、不动配置,处置动作由客户决定。方法见Cavo 的工作方法,服务范围见服务介绍。
需要按这些步骤查一遍自己的环境?
我们会先确认授权与范围,再做只读采集和逐项核验,结论由人复核后签发。