游戏介绍

Robots Exclusion Checker是一款专为Chrome浏览器和Microsoft Edge浏览器设计的扩展插件，在帮助用户直观地了解是否有任何机器人排除规则阻止其页面被搜索引擎抓取或索引。对于希望优化网站SEO性能的用户来说，这款插件无疑是一个不可或缺的工具。

软件教程

安装说明

1、在打开的谷歌浏览器的扩展管理器

就是点击最左侧的三个点，在弹出的菜单中选择【更多工具】——【扩展程序】

或者你可以在地址栏中直接输入chrome://extensions/

2、进入扩展程序页面后将开发者模式打勾

3、最后将解压出来的crx文件拖入到浏览器中即可安装添加

4、如果出现无法添加到个人目录中的情况，可以将crx文件右键，然后选择【管理员取得所有权】，再尝试重新安装

5、安装好后即可使用

常见问题

注意事项

更新时间：2024/12/18

兼容性：请确保插件与您的Chrome浏览器版本兼容，以免出现无法正常使用的情况。

安全性：下载插件时请选择可信的来源，以避免下载到恶意软件或病毒。

更新与维护：插件可能会定期更新以修复bug或添加新功能，请用户及时关注并更新到最新版本。

软件功能

1.机器人.txt

2. 元机器人标签

3. X-机器人标签

4. 相对=规范

5. UGC、Sponsored 和 Nofollow 属性值

- 机器人.txt

如果您正在访问的 URL 受到 robots.txt 中“允许”或“禁止”的影响，则扩展程序将向您显示扩展程序中的特定规则，从而可以轻松复制或访问实时 robots.txt。您将还会显示完整的 robots.txt，并突出显示特定规则(如果适用)。太酷了!

- 元机器人标签

任何将机器人引导至“index”、“noindex”、“follow”或“nofollow”的机器人元标记都会标记相应的红色、琥珀色或绿色图标。将显示不会影响搜索引擎索引的指令，例如“nosnippet”或“noodp”，但不会被纳入警报。该扩展使您可以轻松查看所有指令，并完整显示源代码中出现的任何 HTML 元机器人标签。

- X-机器人标签

在过去，在 HTTP 标头中发现任何机器人指令有点痛苦，但现在不再使用此扩展程序了。任何特定的排除项以及完整的 HTTP 标头都将非常明显 - 特定的排除项也会突出显示!

- 规范标签

尽管规范标签不会直接影响索引，但它仍然会影响您的 URL 在 SERPS(搜索引擎结果页面)中的行为方式。如果您正在查看的页面允许机器人使用，但检测到规范不匹配(当前 URL 与规范 URL 不同)，则扩展程序将标记一个琥珀色图标。从 HTML 和 HTTP 标头响应中的每个页面上收集规范信息。

- UGC，赞助和Nofollow

扩展的新增功能使您可以选择突出显示使用“nofollow”、“ugc”或“赞助”rel 属性值的任何可见链接。您可以控制突出显示哪些链接并为每个链接设置首选颜色。我希望您将其禁用，您可以完全关闭。

用户代理

在设置中，您可以选择以下用户代理之一来模拟每个搜索引擎可以访问的内容：

1.谷歌机器人

2. Googlebot 新闻

3.必应

4.雅虎

更新日志

更新时间：2024/12/18

1.0.2：修复了阻止元机器人在 URL 更新后更新的错误。

1.0.3：各种错误修复，包括更好地处理带有编码字符的 URL。 Robots.txt 扩展功能允许查看超长规则。现在 JavaScript history.pushState() 兼容。

1.0.4：各种升级。添加了带有琥珀色图标警报的规范标签检测(HTML 和 HTTP 标头)。 Robots.txt 现在完整显示，并突出显示了相应的规则。 X-robots-tag 现在在完整的 HTTP 标头信息中突出显示。各种 UX 改进，例如“复制到剪贴板”和“查看源代码”链接。添加了社交分享图标。

1.0.5：当扩展检测到 URL 更改但没有新的 HTTP 标头信息时强制后台 HTTP 标头调用 - 主要用于严重依赖 JavaScript 的站点。

1.0.6：修复了在进行规范检查时 URL 的哈希部分的问题。

1.0.7：除了 HTTP 标头之外，还强制执行后台正文响应调用，以确保 JavaScript 重站点的 URL 的非缓存视图。

1.0.8：修复了在 robots.txt 文件中检测到对同一用户代理的多个引用时发生的错误。

1.0.9：修复了规范不匹配警报的问题。

1.1.0：各种 UI 更新，包括当扩展检测到没有新 HTTP 请求的 URL 更改时的 JavaScript 警报。

1.1.1：添加了额外的逻辑元机器人用户代理规则冲突。

1.1.2：添加了德语用户界面。

1.1.3：添加了 UGC、Sponsored 和 Nofollow 链接突出显示。

1.1.4：在新安装时默认关闭 nofollow 链接突出显示，并修复了与 HTTP 标头规范不匹配相关的错误。

1.1.5：修复了改进 robots.txt 解析器的错误。

1.1.6：扩展现在将 404 错误标记为红色。

1.1.7：在发出后台请求以获取使用 pushstate 导航到的页面时不发送 cookie。

1.1.8：改进了相对与绝对规范 URL 和未编码 URL 消息的处理。