anubis

收录理由

Anubis 以自托管反向代理的形式部署在站点前方，对每个进入的请求先抛出一道工作量证明题。这道题会让 AI 爬虫和批量抓取工具付出高昂的算力代价，而真实浏览器几乎感觉不到阻碍。它用 Go 编写，轻量到可以在低配硬件上跑，个人博客、小站点或社区项目都能轻松用上，不必依赖 Cloudflare 这类商业 CDN。挑战难度可以按需调整，同时支持自定义机器人策略，比如把 Internet Archive 这类已知的良性爬虫加入白名单，这样站点既能保持被正常收录，又能有效拖慢自动化抓取的速度。如果你发布的内容不想被悄悄吸走当训练数据，这个工具就是专门干这件事的，它不是一个包罗万象的安全套件，而是聚焦于拦截 AI 爬虫的实用方案。