幸运的是，情况已不再如此。或者说，上周我们收到了一条来自 Bing 的令人惊讶的消息，该消息现在将返回到早期的 URL 注册。 是的，说实话，感觉有点像意外陷入时间扭曲…… 提交 URL 必应 在过去，搜索引擎网络爬虫并不像今天那么好。当时，他们非常依赖您向他们注册新网站和页面，以便他们能够发现它们。 但随着时间的推移，搜索引擎的网络爬虫变得越来越好。搜索引擎可能也认识到，仅以注册为基础来构建索引是不够的。 因此，在过去几年中，您无需向搜索引擎注册您的网站。否则，如果他们可以找到您的链接，他们将自动对其进行抓取和索引。
年代中期开始流行以来
人们进行了许多尝试，通过让网站管理员以某种方式行事来改进它们。 例如，许多年前，搜索引擎使用 META 关键字来试图更好地理解它们索引的页 意大利数据 面的内容。 但痛苦的经历是，大多数人根本没有用过，而用过的人，大多是有意或无意地填错了。因此 META 关键字数据实际上毫无用处。这就是搜索引擎很久以前就停止使用它的原因。没有主要的搜索引擎不再使用 META 关键字数据。 当第一个基于爬虫的搜索引擎出现时，最大的搜索引擎是手动构建的目录，例如丹麦的 Yahoo、ODP 和 Jubii。
在这您必须注册您的网站
以便对其进行手动评估并将其包含在搜索中。 许多基于爬虫的搜索引擎随后使用最大的目录作为爬行的起点，并在某种程度上验证它们包含在索引挪威电话号码列表 中 的网站的质量。 然而，随着时间的推移，爬虫变得如此优秀和快速，以至于它们不再需要目录。基于爬虫的搜索质量超过了目录，它们慢慢消失了。他们一一屈服了。 雅虎还投身于基于爬虫的搜索领域，并收购了例如来自 AltaVista、Fast Search & Transfer 和 Inktomi 的技术。但也许他们仍然对旧的目录工作有一点太多的热爱——无论如何，他们一度启动了一项“付费提交”计划，只要付费，你就可以获得包含在他们基于爬虫的索引中的选定 URL。
