阻止 GPTBot
Posted: Mon Feb 17, 2025 5:16 am
在上个月的SEO 更新中，我们讨论了新的 GPTBot 以及它如何抓取网站以通过 ChatGPT 提供答案。现在，随着我们 10 月的更新，我们有一项来自 Originality.ai 的研究，该研究表明，全球排名前 100 的网站中有 26% 实际上正在阻止 GPTBot。与上个月相比，这一数字大幅上升，当时排名前 1000 的网站中只有 69 个阻止了该抓取工具。
随着这种戏剧性的上涨，您可能会考虑是否需要做同样的事情。让我们重申一下它的一些优点和缺点。如果您担心隐私问题或不希望它抓取您的内容，您可能希望阻止 GPTBot 收集数据。其他网站担心 GPTBot 被用于生成垃圾邮件或恶意内容，如假新闻、垃圾邮件或其他内容。
但对于那些希望扩大网站覆盖范围或获得更多反向链接（因为其他人引用了他们的内容）的人来说，这可能是有益的。对于任何拥有网站的人来说，这绝对是值得考虑的事情！如果您想了解相关信息，我们在2023 年 8 月的 SEO 更新中提供了如何阻止 GPTBot 的信息。
25周年
谷歌 25 周年纪念日
2023 年 9 月 27 日，谷歌迎来了成立 25 周年。对于我们大多数人来说，当我们告诉孙子孙女我们比谷歌还老时，他们可能会难以置信地看着我们。但他们用一些有趣的小东西庆祝了 25 周年，比如一个特别的谷歌涂鸦、一篇突出该公司过去 25 年最大搜索突破的博客文章，以及许多其他举措。
Google Doodle 展示了公司徽标的时间轴，以及庆祝 Google 众多产品和服务的各种互动元素。博客文章重点介绍了过去 25 年来一些最大的搜索突破，包括：
PageRank 的引入彻底改变了搜索引擎的工作方式。
谷歌搜索的推出，迅速成为全球最受欢迎的搜索引擎。
Hummingbird 和 BERT 等新搜索算法的开发使得 Google 搜索比以往更加准确、信息量更大。
知识图谱和本地搜索等新功能的推出，使得 Google 搜索更加实用，并且更易于世界各地的人们使用。
谷歌发布搜索改进公告
在 25 周年之际，谷歌还发布了一篇博客，介绍了他们改变我们搜索体验的 5 种方式。以下只是其中的一些亮点。
1. 提供高质量的成果
要想让您的内容获得排名，您需要考虑很多因素。而且，排名不能只取决于好的内容，好的内容最终取决于对用户有用且可靠的内容。谷歌引用了其 PageRank 算法，指出它如何适应虚假信息的兴起，以及他们如何更新算法以了解什么是虚假信息或旨在传播虚假信息的不良内容。该帖子讨论了算法的演变，以便为每个特定查询提供最佳内容。
例如，已发生改变或演变的信息。例如，与今天发布的有关病毒如何演变的研究相比，2020 年初疫情初期有关新冠病毒的信息可能已经过时。此外，有关某个主题的新信息可能没有质量信任投票，因此 Google 不会将其排名太高。
2. 解读含义
下一步，谷歌谈到了如何进行调整，以便更好地解读内容背后的含义，就像人类阅读内容一样。许多像“改变”这样的词可以有多重含义。它可以表示日常生活的变化，也可以表示货币，也可以表示调整之类的东西。该算法已经从简单地匹配一个单词演变为 塞内加尔电报号码数据 能够理解查询背后的上下文，从而提供最佳搜索结果。像 BERT 这样的大型语言模型确实在这个领域占据了领先地位，近年来大幅调整了搜索结果。
3. 理解图像、视频等
近年来，搜索的另一项重大更新是，搜索范围已超越了文本。图片、视频和整页内容，而不仅仅是特定的单词和句子。现在，我们可以通过图片或文本搜索图片结果，这在几年前还是无法想象的。谷歌表示，每月有超过 120 亿次视觉搜索。
这还包括语音搜索。这曾经是科幻小说中的东西，现在我们可以大声询问我们的 Google 设备我们的查询，它就会给出答案。这彻底改变了 SEO 专家处理内容的方式，这样不仅有人可以阅读，而且内容也可以被阅读。
随着这种戏剧性的上涨，您可能会考虑是否需要做同样的事情。让我们重申一下它的一些优点和缺点。如果您担心隐私问题或不希望它抓取您的内容，您可能希望阻止 GPTBot 收集数据。其他网站担心 GPTBot 被用于生成垃圾邮件或恶意内容，如假新闻、垃圾邮件或其他内容。
但对于那些希望扩大网站覆盖范围或获得更多反向链接（因为其他人引用了他们的内容）的人来说，这可能是有益的。对于任何拥有网站的人来说，这绝对是值得考虑的事情！如果您想了解相关信息，我们在2023 年 8 月的 SEO 更新中提供了如何阻止 GPTBot 的信息。
25周年
谷歌 25 周年纪念日
2023 年 9 月 27 日，谷歌迎来了成立 25 周年。对于我们大多数人来说，当我们告诉孙子孙女我们比谷歌还老时，他们可能会难以置信地看着我们。但他们用一些有趣的小东西庆祝了 25 周年，比如一个特别的谷歌涂鸦、一篇突出该公司过去 25 年最大搜索突破的博客文章，以及许多其他举措。
Google Doodle 展示了公司徽标的时间轴，以及庆祝 Google 众多产品和服务的各种互动元素。博客文章重点介绍了过去 25 年来一些最大的搜索突破，包括：
PageRank 的引入彻底改变了搜索引擎的工作方式。
谷歌搜索的推出，迅速成为全球最受欢迎的搜索引擎。
Hummingbird 和 BERT 等新搜索算法的开发使得 Google 搜索比以往更加准确、信息量更大。
知识图谱和本地搜索等新功能的推出，使得 Google 搜索更加实用，并且更易于世界各地的人们使用。
谷歌发布搜索改进公告
在 25 周年之际，谷歌还发布了一篇博客，介绍了他们改变我们搜索体验的 5 种方式。以下只是其中的一些亮点。
1. 提供高质量的成果
要想让您的内容获得排名，您需要考虑很多因素。而且，排名不能只取决于好的内容，好的内容最终取决于对用户有用且可靠的内容。谷歌引用了其 PageRank 算法，指出它如何适应虚假信息的兴起，以及他们如何更新算法以了解什么是虚假信息或旨在传播虚假信息的不良内容。该帖子讨论了算法的演变，以便为每个特定查询提供最佳内容。
例如，已发生改变或演变的信息。例如，与今天发布的有关病毒如何演变的研究相比，2020 年初疫情初期有关新冠病毒的信息可能已经过时。此外，有关某个主题的新信息可能没有质量信任投票，因此 Google 不会将其排名太高。
2. 解读含义
下一步，谷歌谈到了如何进行调整，以便更好地解读内容背后的含义，就像人类阅读内容一样。许多像“改变”这样的词可以有多重含义。它可以表示日常生活的变化，也可以表示货币，也可以表示调整之类的东西。该算法已经从简单地匹配一个单词演变为 塞内加尔电报号码数据 能够理解查询背后的上下文，从而提供最佳搜索结果。像 BERT 这样的大型语言模型确实在这个领域占据了领先地位，近年来大幅调整了搜索结果。
3. 理解图像、视频等
近年来，搜索的另一项重大更新是，搜索范围已超越了文本。图片、视频和整页内容，而不仅仅是特定的单词和句子。现在，我们可以通过图片或文本搜索图片结果，这在几年前还是无法想象的。谷歌表示，每月有超过 120 亿次视觉搜索。
这还包括语音搜索。这曾经是科幻小说中的东西，现在我们可以大声询问我们的 Google 设备我们的查询，它就会给出答案。这彻底改变了 SEO 专家处理内容的方式，这样不仅有人可以阅读，而且内容也可以被阅读。