玛德,越想越气,抽完这包烟必须发出来。新站上线整整30天,文章吭哧吭哧更新了快50篇,我连内容发布频率黄金法则都研究透了,结果百度站长后台的抓取频次那栏就跟死了一样,永远是零点几,偶尔来个蜘蛛都像是来我家参观的稀客,看完首页拍拍屁股就走了,内页看都不看一眼!我每天像个神经病一样刷新日志,看到个Baiduspider的user-agent能激动半天,结果一看,抓的还是我上周已经提交过一百遍的首页!
真的,那段时间我每天的状态就是:更新文章 -> 去站长平台手动提交 -> 盯着抓取频次曲线图 -> 焦虑 -> 重复。最破防的是,我眼睁睁看着一个同期上线、内容全是采集缝合的垃圾站,人家收录哗哗的,没几天就权重1了,我特么原地踏步。 气得我差点想把服务器格式化了。
后来才懂,对于新站,尤其是没备过案或者用的海外的服务器,蜘蛛爬过来本身就慢,要是你再头铁,啥外链基础都没有,网站结构再乱七八糟,蜘蛛凭啥来啊?它又不欠你的!我甚至怀疑我的站在蜘蛛眼里就是个无人区。 核心问题就那几个:1. 服务器响应慢或者不稳定,蜘蛛一来就502,人家下次还敢来? 2. 内容入口太深,内部链接跟盘丝洞一样乱,蜘蛛进来迷路了。 3. 最重要的,没任何外部链接指向你,互联网上压根没你这个节点的信息,蜘蛛从哪个门进来找你?
我是怎么解决的?说出来都是泪。首先,别TM傻等了,去百度资源平台把sitemap和网站收录里该提交的链接全提交一遍,就当是给蜘蛛发请帖。然后,咬牙花了点小钱,找了几个靠谱的(注意是靠谱的!)老站做了几条纯文本外链,不求权重多高,只求是个正常的、能被蜘蛛爬的页面。接着,把网站内部链接结构彻底重做,保证任何一个页面距离首页点击不超过三次,在文章里疯狂做相关推荐的内链。最后,也是最重要的一点,保持稳定更新,哪怕一天一篇,也让蜘蛛每次来都有“新菜”可以尝。大概又熬了俩星期,某天凌晨四点突然收到收录增长的邮件,那一刻真的,比中彩票还爽。
所以兄弟们,蜘蛛不来,别干等着,也千万别去搞什么快排引蜘蛛,那玩意跟吸毒没区别,死得更快。检查服务器日志,优化站内结构,哪怕去相关论坛正经回个贴留个链接,都比守着强。这行,耐心有时候比技术更重要,虽然大部分时间都他娘的在焦虑中度过。共勉吧。
