Cloudflare升级爬虫屏蔽:默认禁止AI代理和训练爬虫访问广告页面
互联网基础服务企业 Cloudflare 宣布进一步细化网络爬虫屏蔽管理,将依据爬虫行为为机器人打上搜索、代理、训练等多类标签,并计划在 2026 年 9 月 15 日起默认禁止 AI 代理与训练爬虫访问带有广告的网页。
Cloudflare 表示,绝大多数网站所有者都希望内容既能被人工智能检索发现,又不至于因此失去知识产权带来的收益。真正负责任的 AI 企业通常会明确标注自家网络爬虫的用途,但现实中仍有不少“混合型”爬虫同时承担多种功能,识别与区分难度更高。
与此同时,Cloudflare 还将向网站所有者推出新版归因业务洞察仪表板,以适配搜索优化正在经历的从 SEO 到 GEO 再到 AEO 的变化。
相关快讯
调查称OpenAI约700个AI代理“入侵”Hugging Face,部分还试图掩盖行踪
两份调查报告显示,今年7月针对美国开源平台“抱抱脸”系统的入侵,系由OpenAI创建的约700个AI代理发起。这些在极少人工监督下运行的程序中,许多还试图掩盖自身行踪。
SpaceXAI推出全天候数字同事Grok Bot
SpaceXAI当地时间8月11日推出测试中的AI代理产品Grok Bot,主打全天候在线、可接收并完成实际工作任务。其配备独立云端计算机,能登录用户现有工具,在跨应用和收件箱等场景中协同工作,完成后再汇报。马斯克表示,将先修复早期测试问题,并在本周晚些时候发布Grok 4.6后扩大测试规模。
AI冲击流量:Reddit重新评估与谷歌合作,路透社等或屏蔽爬虫
人工智能搜索正分流在线媒体流量,促使媒体重新评估与谷歌的合作。Reddit 受 AI 搜索替代论坛检索影响,正考虑不再续签每年 6000 万美元的内容授权协议;路透社、今日美国也在考虑限制谷歌爬虫,《经济学人》则讨论退出 AI 搜索。
微软或将整合消费版与企业版 AI 聊天机器人
微软计划将Copilot消费版与企业版整合为一个单一应用,并加入AI编码工具和新的AI代理功能,但相关能力需额外付费使用。据知情人士透露,升级后的Copilot预计将在8月发布。
全球首个“无人公司”来了:Matrix 把 AI 开公司赚钱这件事跑通了
近半年,AI 使用者分成两类:一类热衷 Coding Agent,写脚本、做网站、修 bug;另一类使用 AI 助理整理资料、写文档和做规划。Matrix 可视为“AI 公司操作系统”,其多 Agent 架构由团队耗时 8 个月打造,并支持灵活接入 Neo、Codex Agent、Claude Code 等协作 Agent。
Anthropic推出Claude Science AI科研工作台,科研效率再升级
Anthropic周二正式推出面向科学家的AI工作台Claude Science,目标是把分散的科研工具整合到统一环境中,支持AI代理端到端完成分析,并由专门审核代理核查引文和计算结果。这被视为其在科研领域最深布局,也是在冲刺IPO前争夺付费客户的重要商业动作。