1399
1399我们为您提供专业的解决方案，拥有20年的成功经验，帮助无数企业实现的梦想。
本页面介绍不同的 HTTP 状态码如何影响 Google 抓取您的网页内容。我们涵盖了 Google 在网络上遇到的最常见的 20 个状态码。一些较为特殊的状态码，例如 418 (I'm a teapot)0 ...
HTTP 状态码由托管网站的服务器在响应客户端（例如浏览器或爬虫）的请求时生成。每个 HTTP 状态码都有不同的含义，但请求的结果通常相同。例如，有多个状态码表示重定向，但它们的结果都相同。
Search Console 会针对特定4xx—5xx范围内的状态代码以及重定向失败的情况生成错误消息3xx。如果服务器返回了 2xx状态代码，则可能会考虑对响应中收到的内容进行索引。
下表列出了 Google 最常遇到的 HTTP 状态代码，并解释了 Google 如何处理每个状态代码。
| HTTP 状态码 | |
|---|---|
2xx (success) | Google 会审核内容以进行处理（例如，在 Google 搜索中，用于建立索引）。如果内容对 Google 搜索而言存在错误，例如显示空白页面或错误消息，则 Search Console 将显示 soft 404错误信息。 200 (success)谷歌会将接收到的数据传递给下一个处理步骤（具体步骤因产品而异）。对于谷歌搜索而言，下一个系统是索引管道。索引系统可能会索引内容，但这并不能保证。201 (created)202 (accepted)Google 会等待一段时间，然后将接收到的内容传递给下一个处理步骤（具体步骤因产品而异）。超时时间取决于用户代理，例如，Googlebot Smartphone 的超时时间可能与 Googlebot Image 的超时时间不同。204 (no content)谷歌无法接收任何内容，因此无法处理。 |
3xx (redirection) | 默认情况下，Google 的爬虫程序最多会跟踪 10 次重定向。但是，不同产品的爬虫程序可能有不同的限制。例如，Googlebot 在抓取一般网页内容时通常会跟踪 10 次重定向，但 Google 检查工具则不会跟踪重定向。 Google 会忽略从重定向 URL 收到的任何内容，转而处理最终目标 URL 的内容。对于 robots.txt 文件，请了解 Google 如何处理返回3xx状态码的 robots.txt 文件。 301 (moved permanently)Google 会跟踪重定向，Google 系统会将重定向视为一个 强烈的信号，表明应该处理重定向目标。302 (found)默认情况下，Google 的爬虫会跟随重定向，Google 系统会将重定向视为一个 弱信号，表明应该处理重定向目标。其他产品可能以不同的方式处理重定向。303 (see other)304 (not modified)Google 爬虫会向下一个处理系统发出信号，表明当前内容与上次抓取时相同。对于 Google 搜索，索引流程可能会重新计算 URL 的信号，但除此之外，状态码对索引没有影响。307 (temporary redirect)相当于302。308 (moved permanently)相当于301。 |
4xx (client errors) | Google 不会使用返回4xx状态码的 URL 中的内容。如果某个 URL 之前被使用过，但现在返回4xx状态码，Google 系统会逐渐停止使用该 URL。对于 Google 搜索，Google 不会索引返回4xx状态码的 URL，而已经索引但返回4xx状态码的 URL 则会从索引中移除。 4xxGoogle会忽略 从返回状态码的 URL 接收到的任何内容。 400 (bad request)除了 之外的所有4xx错误，429处理方式都相同：Google 爬虫会通知下一个处理系统该内容不存在。以谷歌搜索为例，索引流程会将之前已被索引的网址从索引中移除。新遇到的404页面将不会被处理。抓取频率也会逐渐降低。请勿使用401状态403码来限制抓取速率。除 4xx` --recap ... 429401 (unauthorized)403 (forbidden)404 (not found)410 (gone)411 (length required)429 (too many requests)Google 的爬虫程序会将此429状态码视为服务器过载的信号，并将其视为服务器错误。 |
5xx (server errors) | 5xx服务器429错误会导致谷歌爬虫暂时减慢抓取速度。对于谷歌搜索而言，已编入索引的网址会保留在索引中，但最终会被删除。 5xxGoogle会忽略 从返回状态码的 URL 收到的任何内容。对于 robots.txt 文件，请了解Google 如何处理返回5xx状态码的 robots.txt 文件。 一旦服务器开始响应2xx状态码，谷歌就会逐步提高该网站的抓取频率。 500 (internal server error)Google 会降低网站的抓取频率。抓取频率的降低幅度与返回服务器错误的 URL 数量成正比。对于 Google 搜索，Google 的索引流程会将持续返回服务器错误的 URL 从索引中移除。502 (bad gateway)503 (service unavailable) |
HTTP 状态码如何影响 Google 的爬虫由“聚企互联“为您提供！
