收录对于GoogleSEO至关重要。

如果谷歌没有收录你的网页，你所做的一切SEO工作都会变得毫无价值，哪怕你已经针对一个页面进行了臻于完美的优化，并能确保它将带来绝佳的用户体验。残酷的现实是：未被收录的页面不会进入搜索结果页（SERP），也不会带来任何流量和转化。

同样，如果谷歌偶然收录了一个本不应该被收录的页面，那么你就有可能面临私人信息泄露、收到谷歌对低质量内容的惩罚等其他严重的后果。

▊ 在本指南中，我们将探索Google收录的常见问题，以及如何解决它们。但首先，让我们来看看如何检查你的网站是否存在收录问题。

01 如何发现收录问题？

Google SearchConsole可以帮助你发现你的网站存在哪些收录问题，请点击收“收录”（Index）>“页面”（Page）以查看，如下图所示。

只要是未被Google收录的页面，不管是因为什么原因，都会统一显示在“未收录”（NotIndexed）部分。被Google收录，但是存在其他问题等待你解决的页面将会显示在底部的“改善页面外观”（Improvepage appearance）部分。

Google SearchConsole将提供更多细节，帮助你确定页面的问题所在，如下图：

在了解如何发现网站存在的收录问题后，我们可以探讨解决方案啦。当然，本文探讨的所有解决方案，都是针对需要收录的网页。如果你的页面不需要被Google收录，你可以采用noindex标签，或者通过robots.txt指令的限制Google访问相关页面。此外，确保将这些网页从你的网站地图（sitemap）中删除。当然，如果这些页面本就未被收录，那么你无需采取任何行动。

02 如何解决Google收录问题？

1️⃣404错误：网页未找到（Not found 404）

404网页未找到（Notfound404），或者失效URL，应该是最常见的收录问题之一。很多原因都可能导致HTTP状态码出现404，比如，你已经删除了URL，但没有从网站地图（sitemap）中或站内其它页面中删除该失效URL，URL有误，等等。

Google曾提示404本身并不损害网站性能，除非这些URL是主动提交给Google收录的URL。那么，如果你在收录报告中看到404网址，应该如何修复呢？我们提供以下解决方案：

● 更新你的网站地图（sitemap），检查受影响的URL是否有误。

● 如果该页面已经迁移到一个新的地址，设置一个301重定向。

● 如果该页面已经被删除，也没有任何替换网页，那么将其保留为404，但从网站地图（sitemap）中删除，假如站内其它页面有链接到该页面，该内链也需要同步删除或更新。这样，Google就不会再试图找到并抓取这个页面了。

● 如果你需要保留404，那就创建一个用户友好型404页面–你可以在那里添加一些有用的链接，使用户继续停留在你的网站上，而不是直接关闭页面。但有一点需要记住，404页面的性质并不会因此改变，你依旧应该禁止Google收录它。

● 请注意，Google Search Console现在并不区分404（Not found，未找到）和410（gone，已消失），而是将它们都分类进404报告中。这两个代码曾经是不同类型的响应代码。404意味着 “没有找到，但以后也许可以找到”，而410代表 “现在没有找到，未来也不会找到，因为它已经永远消失了”。现在，Google对404和410页面采取的措施是一样的。

所以，如果你在404报告中发现一个410的页面，不要感到奇怪。我们建议你不要保留空的410页面，而是设置一个自定义的404页面，降低用户跳出率。许多SEO从业者和站长有一个习惯，就是把404重定向到网站主页，但事实上，这并不是最好的做法。它会让Google觉得混乱，并导致“软404”（Soft 404）。

2️⃣软404错误（Soft 404）

当一个网页，HTTP状态码出现200（服务器成功返回网页），但Google无法找到它的内容并认为它是一个404错误的时候，就会出现软404（Soft404）问题。软404的出现通常是由以下原因造成的：

① 服务器端文件丢失

② 与数据库的连接中断

③ 网站的内部搜索页结果为空

④ 未加载或丢失JavaScript文件

⑤ 页面内容太少

⑥ 页面隐蔽

这些问题实际上并不难解决，下面是一些常见的解决方案：

● 如果网页内容已经迁移，该页面内容为空，且HTTP状态码显示200 OK，那么设置一个301重定向到新的地址。

● 如果被删除的内容页没有替代页，请将其标记为404并从网站地图（sitemap）中删除。

● 如果该页面应该存在，请丰富该页面内容，并检查该页面上的所有脚本是否被正确渲染和显示（例如被robots.txt禁止，浏览器不支持，等等）。

● 如果错误发生的原因是Google bot试图获取该页面时，服务器出现故障，请检查服务器是否正常工作，然后要求Google重新收录该网页。

3️⃣401错误：网页未授权

HTTP401错误代表Googlebot没有网页访问权限，需要进行身份认证。如果你希望该页面被收录，请授予Googlebot相关的权限，或者删除网页的授权要求。

4️⃣403错误：访问被禁止

这种类型的错误发生在用户代理提供了进入该页面的凭证（登录、密码），但“执行”访问被禁止。所以服务器返回403，而不是预期的页面。

如果一个页面被错误地禁止访问了，而你又确实需要Google收录它，那么你应该允许未登录的用户访问该页面，或者允许Googlebot进入该页面，以阅读和收录它。

5️⃣网址已提交，但带有“noindex”标记

当你明确要求谷歌收录一个页面（即把它添加到网站地图或手动请求Google收录），但该页面有一个noindex标签时，这个错误就会发生。解决方案很简单–删除noindex标签，谷歌就可以访问并收录该页面。

6️⃣robots.txt设置了不可被抓取

如果你通过robots.txt屏蔽了某个页面，那么谷歌将不会抓取收录它。只要移除这些限制，Google就会收录这个页面。

⚠注意：Robots.txt并不能确保一个网页不被收录。有时，GoogleSearch Console可能会显示：“已收录，尽管遭遇robots.txt阻止（Indexed，though blockedby robots.txt）”

这种情况比未被Google收录要麻烦得多。因为Google可能会访问一些私密信息（比如购物车、私人数据等），并将其展示在搜索结果页。

如果遇见这种情况，请先确认是否需要Google收录该页面。如果是，从robots.txt文件中删除该网页URL。如果不是，也需要把这个URL从robots.txt中删除，但同时应用noindex标签，或限制非授权用户的访问。在采取限制措施后，你也可以通过GoogleSearch Console选择“收录（index）”>“移除（Removals）”>“新请求（Newrequest）”要求谷歌从收录中移除该网页。

如何解决Google收录问题？

7️⃣无内容收录（Indexed without content）

和上期提到的其他常见问题性质不同，无内容收录是另一种类型的问题。和未收录相比，无内容收录对网站排名的负面影响更为严重。

▊ Google讨厌空页面，并认为空页面代表垃圾网站和低质量内容，很可能会因此降低你的网站排名。

如果你发现网站存在无内容收录网页，请手动检查URL以排查原因。一般来说，无内容收录可能是由于以下原因导致的：

● 该页面内容太少。

● 该页面存在错误的限制导致页面样式和内容无法正常渲染加载。

● 该页面存在伪装（Cloaked）内容，给搜索引擎看的内容与给用户看的内容不一致。

我们推荐根据实际情况采取相对应的措施。

✔例如，如果页面内容太少，就丰富页面内容。同时，我们可以查看搜索结果页中的竞争对手，分析那些排名靠前的竞品网站，参考哪类型内容是用户感兴趣的，并部署到页面中。

✔如果你的页面存在阻碍渲染的内容，请检查基于第三方脚本的弹窗，确保它们都能正常运行，并能被Google读取。总而言之，Google能读取的页面内容，应当与用户浏览的页面内容一致。

✔如果你的页面存在Cloaked内容，请检查所有的脚本或图像是否都允许Google访问。

8️⃣重定向错误

URL重定向是SEO最常讨论的话题之一。然而，大家还是经常遇见重定向错误造成的Google收录问题。以下是Google无法正确读取重定向的一些常见原因。

● 重定向链路（redirect chain）太长

● 重定向死循环

● 重定向URL超过了最大的URL长度（Google浏览器上限为2MB）。

● 重定向链路中包含一个失效URL或空URL

所有重定向错误都适用的解决方案是：正确设置重定向。我们需要避免过长的重定向链，这只会浪费搜索引擎分配给网站的抓取配额（Crawl budget）和链接权重；确保重定向链路中没有404死链或410错误的URL，并将URL始终重定向到相关页面。

9️⃣服务器错误（5xx系列错误）

服务器错误通常是由服务器崩溃、超时或在Google bot工作时停机引发的。

出现服务器错误时，当务之急是检查受影响的URL。我们推荐通过Google Search Console中的检查URL工具（Inspect URL），看看它是否仍然提示错误。如果未提示错误，请要求Google重新收录。

如果依旧提示错误，我们应该根据错误的性质，采取相对应的措施：

● 减少动态页面请求的过度页面加载

● 确保你的网站的托管服务器没有停机、超载或配置错误

● 检查你是否不小心屏蔽了谷歌爬虫

● 精准把控网站的抓取和收录

在你完成修复后，请求重新收录，以使谷歌更快地获取页面。

1️⃣0️⃣重复内容，页面未设置Canonical标签

（Duplicate without user-selected canonical）

多语言网站和电商网站常常会遇见这个问题。如果你的网站有一些主题相同或者内容相似的页面，你应该将其中一个页面标记为canonical来规避重复内容问题。

1️⃣1️⃣重复内容，Google将其他页面标记为Canonical 

（Duplicate, Google chose different canonical than user）

这个问题的出现通常是因为你已经将某个页面标记为canonical，但是Google却选择将该页面的另一个版本作为canonical并收录。

解决这类问题的最简单的方法是：将canonical标签页面调整为Google选择的页面，以防止混淆。如果你希望继续使用自己选择的页面作为canonical，可以将Google选择的页面重定向到你自己选择的URL。

1️⃣2️⃣带有正确canonical标签的备用页面

(Alternate page with proper canonical tag)

⚠注意：接下来我们将要讨论的几个常见问题通常并不需要我们采取任何措施，但它们会显示在Google Search Console中。

Google不会因为一个页面与canonical页面重复而对其进行收录，就让它保持原样吧。

1️⃣3️⃣已发现，但目前未收录

如果一个页面的状态显示为已发现（discovered），那么Google已经意识到了它的存在，但还没有抓取和收录它。你可以检查这个页面的收录指令（indexing instructions），如果一切正常，符合你的预期，那就静静等待Google来收录吧！

1️⃣4️⃣已抓取，但目前未收录

从逻辑上讲，这种描述意味着Google已经抓取了你的页面，但还没有完成收录。只要收录指令并没有要求此页面不被收录，该网页就会被收录。无需请求重新收录-，因为Google bot知道该页面正在等待收录。

以上就是Google收录的常见问题及其解决方案。小编温馨提示：定期检查你的网页是否被收录，因为错误随时可能发生。服务商出错、Google自身错误、Google更新都可能影响Google收录算法。