我真特么服了，就为了追求那点所谓的“用户体验”，给站里加了个全站搜索，结果你知道发生了什么吗？百度谷歌那帮蜘蛛跟疯了似的，顺着搜索链接往里钻，动态参数生成无数个看起来不一样的URL，它们就挨个爬啊爬啊，我那天凌晨四点被服务器报警邮件吵醒一看，CPU直接飙到99%，数据库连接池爆满，整个站白屏，跟被人DDOS了似的。我盯着那监控曲线，手都是抖的。
你以为加个框框就完事了？坑全在后头！
首先，千万！千万！要给你的搜索页面加上“noindex”的meta标签，或者直接在robots.txt里disallow掉你的搜索路径（比如 /search/ 或者 ?s= 这种）。不然，你就等着看搜索引擎收录几万甚至几十万个毫无意义的搜索结果页吧，这玩意在搜索引擎眼里就是典型的低质量重复内容，严重稀释你站点真正有料的文章页的权重，一觉醒来收录暴涨，但全是垃圾，核心页面排名反而跌了，这找谁说理去？我当初就是忘了这步，被算法教做人之后才在这篇救命文档里看到。
然后，对搜索频率做限制。别让用户或者恶意爬虫一秒狂点几十下，不然你服务器就是下一个火山口。加个验证码或者频率限制，虽然可能被用户骂，但总比网站宕机强。
还有，搜索结果页的TDK（标题、描述、关键词）一定要是统一的、静态的。别傻乎乎地用动态关键词当标题，比如“关于XXX的搜索结果”，这每一个都是新页面，对SEO是剧毒。就固定成“站内搜索 - 你的网站名”。
最后，服务器性能。如果你的站内容多了，搜索就是个吃资源的大户，尤其是那种直接like %%查数据库的，数据量一大就能要你命。要么上专业的搜索引擎方案（比如Elasticsearch），要么做好缓存，别用最原始的方式硬刚。
总结就是：搜索功能，对用户是蜜糖，对不懂设置的站长就是砒霜。 我现在回头看我那晚手忙脚乱重启服务、修改配置、屏蔽爬虫的经历，抽了半包烟才缓过来。这东西，要么从一开始就按规范做好防护，要么就干脆别加，用站内标签和分类导航代替。真的，别等到跟我一样，流量没等来，先等来了服务器账单和一片空白的统计后台，那才叫绝望。
