你刚上线的新网站,百度搜公司名连首页都翻不到?Google Search Console 里索引数还是零?别慌——不是你的内容不行,是蜘蛛压根没认真看过你。

我帮过二十多个新站从零起步,踩过的坑比收录的页面还多。下面这些步骤,没有玄学,不靠运气,每一步今天就能动手改。

为什么你的网站提交了 sitemap 还是不被收录?

很多人交完 sitemap 就去刷手机等结果。现实是:蜘蛛来你家串门,发现门开得慢、屋里黑灯瞎火,转身就走。

服务器响应太慢,是第一个拦路虎。首字节时间(TTFB)超过 1.5 秒,爬虫很可能中途放弃。我之前优化一个本地烘焙工作室的网站,首页加载要 3 秒多,图片全是未压缩的 JPG,提交后一个月只收了首页和“关于我们”。后来把图片转成 WebP,CDN 开起来,TTFB 压到 0.7 秒,一周内收录涨到 12 个页面。

再检查一遍 robots.txt。别直接抄模板。常见错误是写了一行 Disallow: /css/Disallow: /js/——这等于告诉搜索引擎:“别看我的样式,也别读我的脚本”,页面渲染出来一片空白,它当然不收。只屏蔽真不该被抓的路径,比如 /admin//backup//test/

3 个让蜘蛛快速发现你的外部渠道

别等它自己找。你要主动递名片,还得递得有分量。

1. 社交媒体短链
把新文章链接发到微博、知乎想法、LinkedIn。用 t.cn 或 bit.ly 缩一下,加个相关话题,比如 #SEO实操 #建站避坑。社交平台上的新链接,蜘蛛盯得特别紧。一个做独立开发工具的朋友,每次更新博客就在 V2EX 和 Twitter 发一条带短链的笔记,基本 2–3 天内 Google 和 Bing 就会抓进去。

2. 行业论坛签名档
找 3 个你真正会逛、同行也在活跃的论坛,比如「人人都是产品经理」、「电鸭社区」、「吾爱破解」(看行业选)。注册账号,签名档写上你的网址。然后挑几条半年内还有人回复的老帖,认真回帖——不是打广告,是真解决问题。蜘蛛爬这些高权重页面时,会顺着你的签名跳过去。

3. 免费目录提交
别碰泛流量目录。专找垂直类:做本地服务的,填百度地图商户中心、高德商户后台;做 SaaS 工具的,去「小众软件」「异次元软件」提交;做设计资源的,试试「优设网」的资源投稿入口。每条提交后,通常 1 周左右能带来一次有效抓取。

首页权重起不来?试试这个“偷懒”的结构技巧

首页塞满链接,不是展示丰富,是给蜘蛛出难题。它点开一看:50 个栏目、200 个产品、8 个下载入口……干脆不爬了。

新站首页,只放 5–7 个最核心的栏目链接,比如「产品」「案例」「博客」「定价」「联系」。每个链接指向一个干净的列表页,而不是直接罗列所有内容。蜘蛛的路径就变成:首页 → 产品列表页 → 单个产品页。权重一级一级往下传,不散光。

我帮一个做企业培训的网站调过结构。原来首页堆了 15 个课程分类+30 个讲师头像+滚动 banner,调整后只留「公开课」「内训方案」「客户案例」三个入口,其他全挪到二级页。两周后,首页稳了,案例页和公开课列表页也陆续被收。

记住:第一批被收录的,一定是首页 + 2–3 个栏目页。先立住骨架,再长肉。

内容发布的“黄金 72 小时”怎么用?

新文章发布后,前 3 天是蜘蛛决定“要不要理你”的关键期。错过,它可能下次才想起来翻你。

第 1 小时:内部链接补位
文章一发布,立刻打开 2–3 篇老内容,在正文里自然插一句,带超链接。比如新写了《微信公众号排版避坑指南》,就去旧文《运营人必备的 5 个编辑器》里加一句:“图文排版细节可参考这篇《微信公众号排版避坑指南》”。锚文本就用标题里的关键词,别写“点击这里”。

第 24 小时:甩出去,但别乱甩
把新链接发到你前面选好的渠道:微博发一条带图短评,知乎想法写个观点引子,V2EX 回个相关讨论。同一平台,一篇内容只发一次。重复发,蜘蛛会觉得你在刷屏。

第 72 小时:手动点一下“提醒它”
如果还没动静,去百度搜索资源平台点「链接提交」,或进 Google Search Console 用「网址检查」→「请求索引」。只点一次。点了没用?说明前面几步没到位,回头检查服务器、robots.txt、内链。

为什么你的内页永远不被收录?问题出在链接结构

首页被收了,文章页却像失踪人口?大概率是你没给蜘蛛铺路。

它从首页进来,点进“博客”列表页,再点开第一篇文章,看完——页面底部只有返回按钮,没有“下一篇”,没有“你也可能想看”,也没有侧边栏推荐。对它来说,这就是死胡同。

解决办法很简单:每篇内容页底部,加一个「相关文章」模块,至少放 3 篇真实有关联的旧文。标题做链接,锚文本就用原标题。不用算法,人工选就行。旅游博主写完“云南雨崩徒步攻略”,就在文末推“川西贡嘎路线”“西藏林芝轻徒步”,而不是随便挂三篇热门文。

有个知识付费网站原来只用“上一篇/下一篇”,收录长期卡在 10 篇上下。加上手选的相关推荐后,两周内内页收录涨到 40+,而且全是真实内容页,不是标签页或归档页。

今天就能执行的 1 个操作

关掉这篇文章,现在就打开你的网站首页,右键 → “查看网页源代码”,搜 <a href=,粗略数一下有多少个外链(不含导航栏和页脚固定链接)。如果超过 50 个,马上删减到 10 个以内——只留核心栏目、联系页、隐私政策这种必须入口。
然后新建一个页面,叫 /sitemap.html,把删掉的链接按类别整理进去,再确认 robots.txt 里没屏蔽它。
做完这一步,你已经清掉了最堵的那块石头。