网络服务商 Cloudflare 当地时间本月 19 日发布了一项名为 AI Labyrinth 的有趣功能：利用 AI 生成内容以非禁止的方式干扰不遵守“禁止爬取”

　　注：Labyrinth 一词的含义即“迷宫”。

　　根据 Cloudflare 的观察，直接硬性禁止恶意爬虫容易激起爬取和反爬两方无休止的“军备竞赛”，与其陷入一场漫长的对抗中不如让爬虫“以为”得到了真实的内容实际上却一无所获。

　　AI Labyrinth 的具体运作方式是在页面中设置人类使用者无法看到或点击的隐藏链接，仅有恶意爬虫才会注意到它们。而这些链接指向一系列由 AI 生成的页面，这一功能也意味仅有恶意 AI 爬虫才会陷入到 AI Labyrinth 编织的内容迷宫中，Cloudflare 表示