收录慢，问题多半出在“三件事”上
搜索引擎收录一个页面，要经过三步：先由爬虫把页面抓下来（抓取），再判断内容是否值得存进索引库（索引），最后才可能在用户搜索时被排出来（排序）。很多人只盯着“为什么搜不到”，其实卡点通常在前两步。抓取不到，后面全都无从谈起。
下面按顺序自查，每一步都能排除掉一类原因。
第一步：确认爬虫能顺利爬到你的页面
爬虫和普通访客一样，需要一个入口。入口被堵住，页面内容再好也进不去。
- 打开网站的 robots.txt（通常在域名后面直接加 /robots.txt），看是否写了禁止抓取全站的规则，这一条等于告诉爬虫别来。
- 检查页面是否需要登录才能访问。需要登录的内容，爬虫基本看不到。
- 检查页面是否必须等脚本执行完才显示正文。如果文字依赖前端渲染才出现，部分爬虫可能抓不到。
- 检查重要页面是否能从首页一路点得到。没有任何链接指向的孤立页面，被发现的机会很低。
判断标准很简单：用浏览器的无痕模式打开，看不到内容或者要求登录，就是有问题。
第二步：给爬虫一份“目录”——sitemap
sitemap 就是一份列出网站重要页面网址的清单文件，相当于递给爬虫一张地图。
- 把所有需要被收录的页面网址整理成一份文件，习惯上命名为 sitemap.xml。
- 把文件放到网站根目录，确保用浏览器能直接打开它。
- 在 robots.txt 里加一行指向这个文件的地址，方便爬虫发现。
- 内容更新后同步更新这份清单，别让它长期停留在旧版本。
注意只放需要收录的页面，后台、测试页、内容重复的页面不要放进去，否则等于把噪音也一起递给了爬虫。
第三步：主动提交，比等爬虫上门快得多
主流搜索引擎都为站长准备了提交入口，一般在“站长平台”一类的地方，注册账号并验证网站归属后即可使用。验证方式通常是往网站根目录放一个指定文件，或在首页加一行特定标记。
- 进入对应的站长平台，添加你的网站，完成归属验证。
- 提交 sitemap 地址，让系统定期来读取。
- 新发布的页面可以用“提交网址”的功能单独推送，适合更新量不大的情况。
- 提交后留意平台给出的抓取反馈，有报错就按提示逐条修。
提交不等于收录，它只是提高被发现的概率。内容重复、质量偏低、明显是拼凑采集的页面，即便被抓到也可能不进索引。
第四步：自查收录情况，找到真正的卡点
查收录最直接的办法，是在搜索引擎的搜索框里输入 site:你的域名，返回的结果数量能大致反映已被收录的规模。这个数字并不精确，只适合看趋势。
- site 查询结果为 0：多半是抓取被拦，回到第一步查 robots.txt 和访问权限。
- 首页有收录、内页几乎没有：通常是内部链接太少，或者内页之间内容重复度高。
- 提交很久仍没动静：检查服务器是否稳定，频繁打不开会让爬虫降低来访频率。
- 已收录但搜不到：说明进了索引但排名靠后，这属于内容与竞争问题，不是收录问题。
最后提醒一句：收录是一个逐步积累的过程，新站从提交到稳定收录，慢的话几周都算正常。与其天天刷新查询结果，不如把每个页面的标题、正文和内部链接做扎实，这才是长期有效的办法。