新型防护机制 关键字列表
Cloudflare 推出"AI 迷宫"对抗网页爬虫机器人

Cloudflare 推出"AI 迷宫"对抗网页爬虫机器人

Cloudflare 推出全新的 AI Labyrinth 工具,通过生成诱饵页面来对抗未经授权的网络爬虫。当检测到可疑爬虫行为时,系统会引导它们进入由 AI 生成的虚假页面网络中,消耗爬虫资源并降低其效率。这一创新方案为网站提供了比传统 robots.txt 更有效的数据保护机制。