新内容发出去一两天没动静还算正常,但要是过了一个星期、半个月,甚至连蜘蛛的影子都没见到,那就说明收录环节卡住了。想解决这个问题,不能光靠等,得把抓取、索引、提交、维护这几个链条逐一捋顺。下面这套思路,都是从实际操作中总结出来的,照着做能少走不少弯路。
做优化最忌讳一上来就瞎折腾。你首先要搞清楚百度蜘蛛到底来没来过你的站、多久来一次、来了主要逛哪些页面。打开服务器日志,筛出Baiduspider的访问记录,这个问题很快就有答案。
如果一个月下来日志里几乎找不到蜘蛛的痕迹,那问题多半出在站点的整体健康度上,而不是某篇新文章。这时候可以从两个地方下手:
还有个小细节值得注意:robots.txt文件里一个多余的Disallow,可能就把整类页面给屏蔽了。建议每隔一段时间用百度搜索资源平台的抓取诊断,把首页和几个核心栏目页挨个查一遍,确认返回状态正常。
抓取只是第一步,真正决定收录与否的是索引审核。百度对内容的评估,核心就看一件事:这篇东西有没有别人给不了的独特价值。换句话说,如果你的文章是把别人的文章换个顺序重新说一遍,那它大概率会被挡在索引池外面。
想让内容具备差异化,可以参考下面几个方向:
常见误区是觉得“发得够多,总有中奖的”。但实际上,低质量内容堆积得越多,越容易拉低整站的信任度。与其批量产出,不如一篇一个主题,把一个点讲透,把该给的细节给到,这才对得起蜘蛛每一次的来访。
对大多数中小站点来说,干等着蜘蛛自然发现新页面太被动了。主动提交的意义,就是把“有新东西了”这句话直接告诉百度,让它有机会优先安排抓取。目前试下来比较靠谱的方式有这么几种:
就算页面被收录了,也不能掉以轻心——很多站长都遇到过排名刚有点起色、内容又突然掉出索引的情况。导致这种反复的原因,往往是下面几个细节没做好:
没有绝对标准,但如果站内基础没问题、抓取正常,一般新页面在几天内能被蜘蛛抓到,快的话当天或次日就能进入索引。超过半个月完全没动静,就要检查内容质量或站内可访问性了。
提交本身只解决“让蜘蛛知道”这一步,不解决“让百度喜欢”的问题。如果提交后迟迟没反应,优先自查页面有没有实质性内容、是不是大量重复了别处的信息,以及站点整体有没有被降权。
先别急着改。用抓取诊断看看这条URL当前返回什么状态码。如果是404,说明链接失效,可以做301到新地址重新建立索引关系;如果是200但不在索引,那更可能是内容过期或价值下降,这时补强内容比重新提交更有效。
百度收录提速没有一招鲜的办法,但它是一条有规律的路径:先摸清蜘蛛习性、把站内基础做扎实,再靠有信息增量的内容通过索引审核,配合主动提交缩短等待时间,最后用谨慎的更新和维护稳住已有成果。建议你现在就去跑一遍抓取诊断、翻翻服务器日志,把最明显的那块短板先补上。