SEO私馆
问题咨询、疑难诊断、代工优化、培训教学

搜索引擎抓取诊断错误原因及解决方法

如果搜索引擎不收录网站内容页面、下降掉索引和排名、蜘蛛来访少,那就要检查一下抓取的状态是否正常了,尤其是网站运营大多数用的是免费的环境和条件就更要注意了。

一、域名DNS解析

大部分网站为了节省开支,用的域名DNS解析是免费版的,虽然大问题没有,但是存在解析不稳定和异常的情况,导致搜索引擎抓取网站页面出现DNS错误的问题。

解决方法:使用几十百把块钱的收费版DNS解析服务,从源头上避免搜索引擎抓取网站时出现间断性的不稳定和异常的情况。

二、CDN缓存没有回源

网站实用CDN缓存是常态化的部署,但是CDN缓存的IP是随机的,如果没有做回源处理,就会导致搜索引擎蜘蛛每次抓取的IP是不同的,而且有时候CDN的IP节点因为负载过大而不稳定。

解放方法:开启CDN缓存回源网站IP,也可以在域名DNS解析中单独设置搜索引擎指向IP,也就是网站源IP地址。

三、网站更换了IP地址

这就是说网站更换了运营的服务器,那么IP很大可能也是更换了,但是搜索引擎并不知道,还是抓取了原有的IP地址,这就会导致异常和错误的问题。

解决方法:向搜索引擎提交最新的网站源IP地址,通常都在搜索引擎管理后台的抓取诊断功能中有更新的按钮提示,如下图所示:

搜索引擎抓取诊断错误原因及解决方法

四、多服务器IP运营没有唯一指向性

大型网站会用多台服务器运营,就会有多个IP的情况,这个时候如果没有针对搜索引擎指向唯一的IP抓取的话,是有可能导致很多不准确的错误问题。

解决方法:在域名DNS解析中设置搜索引擎唯一性的指向IP地址。

五。域名URL暗跳转链接

这个很多站长朋友不知道,有时候网站的程序原因,导致网站被搜索引擎蜘蛛抓取时不是真实的URL地址,但显示是的,实际是暗跳转了其他链接,比如是同域名URL其他路径。

解决方法:这个需要懂程序技术,最简单的方法就是把页面的URL设置唯一性的路径,就算是有多种URL方式,也要向搜索引擎标注唯一性路径是多少。

"SEO私馆"结尾段:我们常态的观念中,搜索引擎抓取和诊断的错误问题主要是IP有误,但是大多数问题都是设置不当和未及时更新导致的,必须让搜索引擎有指定的抓取IP,确保稳定性。

诊断网站SEO优化常见的问题