哎，别提了，说起这个我就来气。现在的搜索引擎，尤其是百度，那蜘蛛爬虫跟个老干部似的，你不把路铺好、饭端到嘴边，它压根懒得理你。我那个新站，整整两个月，site命令查了一下，收录？不存在的，首页都像个失踪人口。我那段时间啊，每天凌晨四点像个神经病一样刷新日志分析工具，就为了找那个“Baiduspider”的UA，看得眼睛都花了，结果全是空的，那种感觉就像你精心准备了一桌满汉全席，结果一个客人都没来，连狗都不来闻一下。
后来把我逼急了，我琢磨是不是服务器IP在百度那边有黑历史啊（对，老域名香，但服务器环境也得干净），赶紧换了家靠谱的服务商。然后第一件事，就是去百度搜索资源平台（原站长平台）验证站点，提交sitemap.xml。这东西就相当于你家的地图和门牌号，你得主动递给快递员（蜘蛛）看。
但光递地图没用，你家门口是悬崖峭壁它也进不来啊。所以TDK优化，特别是标题和描述，得让它一眼就知道你这“店铺”卖什么的，别整些玄乎的。页面打开速度是命门，你要是三秒还打不开，蜘蛛扭头就走，这跟用户体验一毛一样，蜘蛛也是用户！
最关键的，是内容。你得让它有东西可抓啊！我一开始傻乎乎地采集了几篇，结果屁用没有。后来硬着头皮自己写，哪怕一周一篇，保证原创度。然后，想办法让站内看起来“很热闹”。我在自己别的老站（稍微有点权重的那种）上，加了几个链接指向这个新站，这叫内链推荐。甚至，我还去几个友链交换群里，低声下气地求人家给我的新站文章页一个单方面的链接（别直接链首页，太刻意）。
你猜怎么着？做完这些大概一周后，我在日志里终于看到了那个熟悉的UA！当时我盯着屏幕，抽了三根烟才敢确认那不是幻觉。虽然一开始抓取频次很低，但总算是开张了。所以，想让蜘蛛来，你得：1.把门打开（服务器、robots.txt别屏蔽）；2.主动邀请（提交后台）；3.家里得有货（原创内容）；4.找熟人带路（内外链）。这里有个更野的路子，有人用蜘蛛池去“勾引”，效果猛但风险也大，新手慎碰。总之，别干等，等不来的。
