为什么邮箱服务器容易成为目标

邮箱服务器天生就要对整个互联网开放:SMTP 必须接受陌生人的连接,网页邮箱要能从任何地方访问,服务器上还存着邮件、密码和签名密钥。现在有很多一体化的邮件服务器 Docker 镜像,搭建起来很简单(我之前也写过一篇搭建教程),但它们打包了很多软件:SMTP、IMAP、网页邮箱、PHP、Web 服务器、反垃圾邮件,还有一些镜像作者自己写的处理脚本。每一个都需要持续更新。

真正的风险不是有黑客专门盯上你,而是自动化扫描器会挨个扫描整个互联网,寻找任何一个带有已知漏洞的旧版本。

这一点我是亲身体会到的。我的邮箱服务器从几年前搭好以后就一直没动过。一个周六晚上,云服务商的主机安全服务给我发来一封告警:服务器上发现了挖矿程序。

攻击是怎么发生的

先说结论,因为它和我一开始的直觉完全相反:攻击者只发了两封邮件,就让我的服务器执行了他的代码。 不需要登录,不需要我点任何链接,邮件甚至被反垃圾系统标记成了垃圾邮件,但攻击照样成功了。

被利用的功能:自动处理 DMARC 报告

DMARC 是一套防止别人冒充你的域名发邮件的机制。开启以后,Google 这类邮件服务商会定期给你发一份"报告"邮件,附件通常是一个压缩包,里面是 XML 格式的统计数据。

我用的邮件镜像有一个贴心的功能:它会提供一个专门接收这些报告的地址,收到报告后自动解压附件,把统计数据显示在管理后台里。为了能收到 Google 等服务商的报告,这个地址必须接受任何人发来的邮件,不需要登录。

问题出在旧版的解压脚本上。它的逻辑非常简单:

  1. 把邮件里的所有附件,按附件自带的文件名保存到报告目录;如果已经有同名文件,就直接覆盖。
  2. 把其中的 zip 文件全部解压到同一个目录。
  3. 删掉压缩包,只留下解压出来的内容。

它完全信任附件的文件名和压缩包里的内容。

两封邮件,一个"快捷方式"

攻击者利用的是 Linux 的符号链接(symlink),你可以把它理解成一个"快捷方式":往这个快捷方式里写东西,内容实际上会写到它指向的那个文件里。而 zip 压缩包是可以包含符号链接的。

整个攻击分三步,前后不到一分钟:

  1. 第一封邮件:附件是一个只有一百多字节的 zip,里面只有一个条目,是一个符号链接。它的名字是 xxx.php,指向网站目录里的同名文件。解压脚本照常把它解压了出来,于是报告目录里多了一个指向网站目录的"快捷方式"。
  2. 第二封邮件:附件的文件名同样是 xxx.php,内容是一个很小的 PHP 网页后门。脚本按文件名保存时,发现同名文件已经存在,就"覆盖"它。但那个同名文件是快捷方式,于是后门的内容顺着链接,落到了网站目录里。
  3. 访问后门:网站目录里的 PHP 文件会被 Web 服务器直接执行。攻击者用一个自动化脚本访问这个后门,先执行一条命令确认它能用,同一秒内就下载并启动了挖矿程序。

这次攻击能成功,是几个问题叠在一起的结果:

  • 解压脚本信任外部附件的文件名,而且会解压出符号链接;
  • 那个网站目录所有用户都能写,Web 服务器还会在里面执行 PHP;
  • 发件 IP 其实已经在反垃圾黑名单上了,系统也确实把邮件判成了垃圾邮件,但"标记为垃圾邮件"并没有阻止 DMARC 报告的自动处理。

而这一切的根源只有一个:我的邮件镜像已经好几年没更新了。 新版本早就把这个脚本删掉,重写了报告处理逻辑。

不是因为点了钓鱼链接

我的第一反应是担心自己是不是点了哪封钓鱼邮件里的链接。其实点开链接,代码是在你自己的电脑和浏览器里运行的,没法让远处的服务器执行程序。这次的攻击,"邮件"根本不是写给人看的,而是写给服务器上那个自动处理程序的。收件人不用打开,甚至不会知道收到过这封邮件。

怎么排查

上面这条攻击链,是我反过来一点点查出来的。排查的思路是:从"现在正在发生什么"出发,顺着每一条线索往回追。

第一步:先做快照,再动手

动手之前,先在云控制台给磁盘做一次快照。它既保留了现场证据,也让之后的每一步都可以回滚。

第二步:从正在运行的东西查起

  • 按 CPU 排序看进程(ps)。排在第一的是一个以网页服务账户身份运行的进程,名字伪装成了系统工具,CPU 占用很高。
  • 找到它的真实位置。 进程名可以随便改,但 /proc/<进程号>/exe 指向的是真正的程序文件,/proc/<进程号>/cwd 是它的工作目录。顺着找过去,它就藏在网站目录下一个隐藏目录里。
  • 看它在连谁(ss -tnp)。程序跑在容器里时,要先用 nsenter 进到这个进程的网络环境里才能看到。它一直连着一个外部地址,这是挖矿程序连矿池的典型表现。

后来对照云服务商的告警记录才弄清楚:攻击脚本在几秒钟内先后放出了三份挖矿程序,分别藏在不同的隐藏目录、起了不同的名字。主机安全的"自动隔离"实时拦下了前两份,第三份却没被识别出来,一直在运行。

最重要的一点:告警显示"已清理",不等于问题解决了。 恶意程序往往有好几份,或者带着后门,要自己登录上去把它们全部找出来。

第三步:顺着文件找到后门,顺着后门找到入口

  • 翻挖矿程序所在的目录,里面还藏着一个 PHP 网页后门。
  • 拿后门的文件名去搜网站访问日志,就能找到是谁、在什么时候访问了它。
  • 看后门文件的属主。 在 Linux 里,文件的属主就是创建它的账户。挖矿程序属于网页服务账户,但后门属于邮件投递服务的账户。这一点非常关键:说明后门不是从网页那边写进来的,而是来自收邮件的流程。
  • 拿后门的文件名去搜邮件日志,结果在后门出现前几十秒,找到了两封发往 DMARC 报告地址的邮件,附件名和后门一模一样。第二封邮件附件的哈希值,和网站目录里后门文件的哈希值完全一致。
  • 读处理这些邮件的插件和脚本的源码,最终确认了上面那个"符号链接 + 覆盖写入"的漏洞。

第四步:确认没有留下其他隐患

重建之前,还要确认攻击者没有在重建后还会保留下来的地方留东西:挂载出来的数据目录,以及宿主机本身(定时任务、systemd 服务、SSH 授权公钥、/etc/ld.so.preload、最近修改过的系统文件、登录记录)。我这边都是干净的,容器也不是特权模式,攻击者没有逃出容器。

怎么修复

重建容器,而不是清理

如果你的邮箱服务器跑在容器里、数据目录是单独挂载的,就不要去清理被入侵的容器,直接扔掉重建:

  1. 旧容器还在运行时,先拉取最新镜像,缩短停机时间。
  2. 停掉旧容器,改个名字保留下来作为证据(后来的源码分析全靠它)。
  3. 备份数据目录。
  4. 用同样的参数、同一个数据目录启动新容器。

邮件服务只中断了大约两分钟。挖矿程序和网页后门随旧容器一起消失,网页邮箱、Web 服务器、PHP 和容器系统也都一次性更新到了最新版本。升级后我也专门确认过:新版本已经删掉了那个解压脚本,报告文件改成由服务器自己命名,并且拒绝顺着符号链接写入。

之后检查一遍:容器状态健康,邮件端口都在监听,SMTP 能正常响应,网页邮箱能打开,自己收发一封测试邮件。

宿主机也要更新

容器只是一半。我的宿主机系统也已经过了标准支持期,而且好几年没重启过,内核一直没更新。

先再做一次快照,然后一次升一个 LTS 版本:先把当前版本的补丁打齐并重启,再用 do-release-upgrade 升一级并重启,重复到最新的 LTS。每一步之后都检查一下邮件容器。

两个小建议:

  • 把升级放在后台任务里跑(比如 systemd-run 或 tmux),这样 SSH 断开也不会让升级中途停掉。
  • 系统大版本升级会停用 Docker 官方源这类第三方软件源,升级完要按新版本重新启用,否则 Docker 会悄悄地不再收到更新。

更换所有密钥和密码

只要攻击者能在你的邮箱服务器上执行命令,就要假设服务器上的东西都已经泄露:管理员密码、所有邮箱密码、DKIM 密钥,以及服务器上存过的任何 API Key。全部更换。

以后怎么预防

  • 定期更新邮件镜像。 从不拉取的话,latest 没有任何意义。最好固定版本号,在日历里设一个每月提醒去更新。
  • 警惕"自动处理外部内容"的功能。 任何会自动解析陌生人发来的附件的功能(DMARC 报告、自动导入、附件预览),都是潜在的入口。用不到就关掉。
  • 宿主机开启自动安全更新(Ubuntu 上是 unattended-upgrades),并且时不时真的重启一下。
  • 只开放邮件需要的端口。 SSH 和管理后台用 IP 白名单或 VPN 保护起来。
  • 打开云服务商的主机安全告警和自动隔离。 正是因为有它,我一个小时内就发现了问题,它也当场拦下了两份挖矿程序。但别完全依赖它,收到告警后一定要自己登录上去查。
  • 定期备份数据目录, 这样随时都有重建这条退路。

最后

这整个过程是我和 Claude 一起完成的:它读了告警,在我的浏览器里操作云控制台和网页终端,翻日志、读源码,跑系统升级,我在旁边看着。

这次经历最让我意外的,是攻击的门槛之低:两封邮件,没有登录,没有任何人点击任何东西。自建邮箱依然值得,只要你把它当作一个需要长期维护的在线服务来对待。如果你几年前搭过一个,之后就没再管过,那就把这篇当成提醒,去检查一下吧。