你的内容,你的选择:更清晰的训练和接地偏好

你的内容,你的选择:更清晰的训练和接地偏好
2026年11月04日 18:07 看点资讯

出版商不应在必应中被发现和决定生成式模型如何使用其作品之间做出选择。Microsoft 是首家于 2023 年通过 NoArchive 和 NoCache 标签为 AI 训练和基础提供发布者控制的公司。如今,我们基于这一承诺,提供更新、更简单、更清晰的偏好,让你在保持必应搜索结果的同时,做出训练、接地或两者兼有的选择。

本公告涵盖了通过爬虫收集并用于培训或指导生成响应的网页内容的网页发布者偏好,包括Bing、Copilot和Microsoft 365中的基于网页的响应。

扩大网络出版商的选择与透明度

Microsoft正与其他行业参与者合作,为网站所有者和发布者带来共享的AI培训优先权。这一步骤推动了互联网工程工作组(IETF)人工智能偏好工作组一年多来致力于实现全球统一的人工智能偏好实践,并在互联网草案中进行了描述。这种AI训练语法为网络发布者提供了一种更简单、更通用的方式来表达robots.txt的培训偏好。其目标是减少在不同平台偏好中浏览相同内容使用时的复杂性。尽管IETF人工智能偏好工作组的工作仍在朝着最终标准努力,但我们认为当前的工作代表了值得采纳的重要进展。我们认识到还有更多工作要做,Microsoft将继续积极参与这项全球标准工作。

Microsoft 正在基于共享的 AI 训练偏好,新增独立的 AI 基础偏好,为网络发布者提供更细致、独立的训练和接地选择:

AI训练是对某个地点或路径的共享偏好robots.txt表达。 Microsoft将同样的偏好扩展到页面层级,这样你需要时可以覆盖单个页面的robots.txt设置。

AI Grounding 是 Microsoft 之外的独立页面层级偏好,允许你管理内容的使用方式,帮助生成回答。除了阻止接地使用的Disa llow,Microsoft还推出了一个新的细致偏好:DisallowExtended。这限制了接地的使用,仅限于Microsoft运营的体验,如AI模式、AI概览、Copilot和Microsoft 365,并且排除了Microsoft向第三方提供的接地服务,如Web IQ和通过Foundry中的API访问实现的接地。如果没有表达接地偏好,你的内容可能会被用来辅助生成的回答。

这些偏好设置将取代现有的 Microsoft 偏好设置 NoArchive 和 NoCache,用于培训和基础,从而实现更大的灵活性和更清晰的偏好设置。 从2027年2月1日起,Microsoft将在爬取时尊重新的偏好设置:robots.txt中的AI训练偏好设置适用于相关网站或路径,而页面级的AI训练和AI基础偏好则适用于单个页面。 新的 AI 训练偏好设置在页面层面,覆盖了 robots.txt 设置。如果我们在某个网站上检测到新的 AI 训练或 AI 基础偏好,我们将忽略 该网站上可能保留的任何 NoArchive 和 NoCache 偏好设置。

这些偏好让你能够管理内容是否能用于未来的AI生成模型训练和基础体验。

如果你选择“DisallowExtended”或“Disallow”作为接地,你会看到 AI 体验中的品牌可见度降低。 Grounding在生成回答时将生成的回答与网络内容连接起来,将相关来源和网络发布者的专业知识融入回应中。允许接地使你的内容有资格告知这些回复,链接和引用为原始内容提供路径。允许训练有助于改进未来的生成模型。无论哪种选择,都不能保证包容、流量或报酬。

2027年3月1日前实施

新的优先权将于2027年2月1日生效,随着Microsoft的爬行。 如果您的网站目前使用 NoArchive 或 NoCache,我们敦促您使用这些新偏好来管理内容是否用于培训和禁足,并在 2027 年 3 月 1 日前采取相应步骤:

AI训练:在robots.txt或单独页面发布您的AI培训偏好。

AI接地:在单独页面发布你的AI接地偏好,并在Bing网站管理员工具中记录你的临时过渡接地偏好。对于每个页面,临时优先权适用于重新抓取或2027年9月30日,以较早者为准。

为了确定您所选的偏好,请在2027年3月1日前完成上述步骤; 过了那个日期,NoArchive和NoCache将不再被视为训练或接地的优先级。

以下指南将解释相关设置、过渡保障及重要限制。必应网站管理员工具帮助文档中发布了配套常见问题解答。

实施指南:重要细节及下一步

上述公告解释了变化。本指南介绍了如何选择和发布设置,以及过渡过程的运作方式。

1. 独立选择你的训练和接地偏好

训练和接地是独立的偏好。在下面选择每种用途的设置;你的训练设置不会改变接地设置,反之亦然。当没有发布适用的优先选项时,两者默认为允许。

AI训练——设定在robots.txt或页面层面

如果你的目标是......

人工智能训练偏好

允许你的内容用于训练生成模型

允许——无需采取任何行动。当没有发布适用的培训偏好时,该程序是默认的。你也可以明确设置允许。

防止你的内容被用来训练生成模型

禁止

AI 接地——仅限页面层级设置

如果你的目标是......

AI接地偏好

让你的内容帮助生成回复

允许——无需采取任何行动。当没有公布适用的接地偏好时,这就是默认设置。你也可以明确设置允许。

只允许在Microsoft运营的体验中接地,但不允许通过Microsoft为第三方提供的接地服务

禁止扩展

防止你的内容被用来辅助生成的回复

禁止

图1。独立培训和基于网络出版商目标的基础偏好。

例如,你可以将 AI 训练设置为不允许,AI 基础设置为允许,以保持内容符合生成回答的资格,而不允许它训练生成模型。这些使用偏好不会影响传统必应搜索结果的资格,但需遵守正常的爬取和索引要求。他们不制定许可或付款安排。

2. 了解每个偏好涵盖的内容

AI训练涵盖使用资产修改生成式AI模型中已学习到的参数。 根据IETF对生成式AI模型的工作定义,专门用于执行非生成任务的模型训练不属于该类别,即使该模型具备生成式任务的能力。

AI基础知识涵盖使用内容作为输入,帮助AI生成的回答提供信息。在传统搜索结果中索引和排序页面并不是固定的。逐页设置接地偏好,使用以下选项之一:

允许:无需采取任何行动。这是默认的。这意味着内容可以用来辅助生成的回答。 如果你愿意,可以明确设置。

禁止扩展:仅限Microsoft运营的产品使用接地 :内容可为体验(如AI模式、AI)提供反馈概述、Copilot 和 Microsoft 365,但不包括 Microsoft 为第三方提供的接地服务,比如 Web IQ 和 Foundry 中的接地 API。

禁止:内容不用于辅助生成的回复。

当前的必应搜索联合API返回传统搜索场景的链接,且不适用于AI生成的摘要,因此不受基础偏好影响。

3. 在2027年3月1日前发布你的设置

为某个地点或路径进行培训。 使用共享robots.txt偏好。 以下示例分别展示了可用的robots.txt模式:全站点不允许、路径层面不允许,以及可选的显式全站点允许。

# Allow is default. No action needed to allow ai training

# Disallow ai training for whole site

User-Agent: __usage_ai-training

Disallow: /

# Disallow ai training at a path-level

User-Agent: __usage_ai-training

Disallow: /example-path/

允许是默认设置,因此不需要robots.txt AI 训练设置即可允许训练。以下是一个可选的明确允许示例:

# Allow is default. No action needed to allow ai training. To specify explicity use

User-Agent: __usage_ai-training

Allow: /

为一页工作做培训。 添加元标签或HTTP响应头。 以下示例明确禁止对该页面进行训练:

X-Robots-Tag: Bingbot: ai-training:disallow

禁足一页。 添加元标签或HTTP响应头。以下示例明确禁止页面接地:

X-Robots-Tag: Bingbot: ai-grounding:disallow

其他接地偏好使用ai-grounding:disallowextended。没有全场的接地偏好,robots.txt。

注意:选择 DisallowExtended 或 Disallow 会显著降低你内容在 AI 生成体验中的可见度,但不会影响 Bing 搜索结果的资格。

重要的配置限制:

当没有设置偏好设置时,两个偏好设置默认都是允许。现有的 NoArchive 和 NoCache 用户应遵循以下过渡步骤,而非假设旧的限制会自动延续。

这些设置控制内容的使用,而非爬取访问。允许设置不会覆盖阻止Bingbot爬行的robots.txt规则。

发布一个设定并不等同于激活它。Microsoft必须爬取页面才能发现该设置。IndexNow 可以提示页面发生变化并增加被抓取的概率,但它并不保证一定有重新抓取的日期。

4. 规划过渡——适用于使用 NoArchive 或 NoCache

2026年12月15日—— Bing网站管理员工具中临时接地过渡偏好打开:此过渡仅适用于且仅适用于截至该日期使用NoArchive或NoCache的网站。其他所有地点都不需要过渡行动。

2027年2月1日——新偏好设置开始生效:Microsoft开始在页面爬取时尊重AI训练和AI基础偏好设置。

2027年3月1日——维持禁区限制的截止日期:如果您使用NoArchive或NoCache并希望阻止内容禁区,您必须在2027年3月1日前采取以下步骤:(1) 在你的页面上发布你的AI接地偏好;以及(2)在必应网站管理员工具(BWT)中记录临时接地偏好。我们请求您在BWT中记录您的偏好,因为我们可能在重新抓取您的网站后才能获取您的新偏好;而这项活动可能不会在2月至3月1日期间举行。

2027年9月30日——临时优先设置到期:临时接地优先级将持续有效,直到该日期或Microsoft重新爬取页面并发现其新的AI接地优先级,以先发生者为准。

培训:请在2027年3月1日前以robots.txt或单独页面发布您的AI培训偏好。 过了那个日期,NoArchive和NoCache将不再被认可用于培训。 新偏好设置在Microsoft爬取时生效,自2027年2月1日起;Bing网站管理员工具中没有临时训练设置。

接地:发布页面偏好设置,并在 2026年12月15日起使用NoArchive/NoCache时使用临时优先设置。临时的必应网站管理员工具偏好设置会保留您选择的接地处理,供等待重新抓取的页面使用。每页,当Microsoft通过重新爬取发现该临时偏好时,页面上都会有一个新的AI接地偏好。任何仍然有效的临时优先权将于2027年9月30日到期。

如果你在3月1日前未在必应网站管理员工具中记录临时接地偏好,使用NoArchive或NoCache的页面默认为允许接地,直到Microsoft重新爬取并发现你的新的AI接地功能偏好。

2027年3月1日之后发布的页面层级 S 补贴仍可在重新爬取时生效,但不保证在临时优先权到期前重新抓取。

财经自媒体联盟更多自媒体作者

新浪首页 语音播报 相关新闻 返回顶部