新协议 terms.txt：为 AI 智能体访问网站设定细粒度机器访问条款

研究机构 DAIR.AI 于 2026 年 9 月 12 日在 X 平台推介了一项关于 terms.txt 协议的新研究，该协议旨在为 AI 智能体访问网站设定细粒度的机器访问条款与授权机制。

• 论文提出通过 terms.txt 文件按路径与用途设定机器访问规则，弥补传统 robots.txt 仅能粗粒度设置允许/禁止且无法说明爬取者身份与意图的局限。
• 协议结合基于 Web Bot Auth 的签名交换机制，涵盖签名意图、委托 token、HTTP 402 支付协商与签名回执，所有鉴权操作均在源服务器端执行。
• 研究团队在协议规范中明确划分了技术可强制执行、仅可审计记录以及交由法律合同约定的适用边界。
• 影响/看点：terms.txt 为内容发布方与 AI 智能体之间建立了标准化的访问与计费协商机制，意味着若获得主流服务器软件和智能体框架的广泛采纳，可能推动网络数据抓取从简单封禁转向结构化授权交易。
• 资料依据：
• X：DAIR.AI（2026-09-12）：https://x.com/dair_ai/status/2098864248197976465
• arXiv（2026-09-12）：https://arxiv.org/abs/2609.08864

本内容由 AI 生成，仅供参考，请注意甄别