Cloudflare公开指控Perplexity绕过封锁抓取内容
2025年08月05日
来源:techcrunch
人工智能
AI初创公司Perplexity被Cloudflare指控绕过网站设置的反抓取措施,通过伪装用户代理与更换网络标识持续抓取不允许被AI索引的内容。Cloudflare表示此类行为每日涉及数百万请求,并已对其爬虫下架处理。Perplexity方面否认指控,称相关爬虫非其所有。此事件揭示AI公司与网站间日益激烈的数据访问博弈,也再次引发对AI训练数据来源合规性的关注。Cloudflare近期已推出多项反AI抓取工具,并呼吁构建更可持续的互联网数据生态。