先分清三个词:抓取、收录、排名
很多企业主会问:网站上线好几个月了,为什么在搜索引擎里搜公司全称都找不到?要回答这个问题,先要分清三个经常被混在一起的概念。
- 抓取:搜索引擎派出的“蜘蛛”程序(自动爬取网页的机器人)顺着链接访问你的网页,把内容读走。
- 收录:搜索引擎把读到的内容存进自己的数据库,之后用户搜索相关内容时,它才有东西可以拿出来。收录也叫“建索引”。
- 排名:用户搜索某个词时,被收录的页面按先后顺序排出来,越靠前越容易被点开。
三者的关系是层层递进:先被抓取,才可能被收录;先被收录,才谈得上排名。所以“搜不到”的原因,可能卡在任何一个环节。
搜索引擎是怎么找到你的网站的
搜索引擎不会凭空知道世界上多了一个新网站,它发现新页面主要有两个途径。
- 顺着别的网站上的链接爬过来。如果没有任何外部链接指向你的网站,蜘蛛很难发现你。
- 你自己主动告诉它。各大搜索引擎都提供“提交网址”的入口,也有网站管理后台,可以查看自己网站的抓取和收录情况。
此外,网站根目录下的 sitemap 文件(一份列出站内所有重要页面地址的清单)也能帮上忙。把它提交给搜索引擎,相当于递上一张地图,蜘蛛不用瞎摸。
页面迟迟不被收录的常见原因
- 网站禁止被抓取。robots.txt 文件(放在网站根目录、用来告诉蜘蛛哪些页面可以爬、哪些不可以的说明文件)里如果误写了禁止全部抓取,页面就等于对搜索引擎关上了门。
- 内容太少或重复。只有几行字的页面,或者大量内容抄自别处,搜索引擎往往判定价值不高,直接跳过。
- 页面进不去。链接打不开、必须登录才能看、整页都是图片没有文字,蜘蛛都读不到有用信息。
- 新站没有积累。刚上线的网站没有历史记录,蜘蛛访问频率低,收录慢是正常现象。
遇到收录慢,可以先检查这几项,多数问题出在前两项。
想加快收录,能做的几件事
- 保持更新。定期发布对目标读者有用的原创内容,蜘蛛会逐渐提高访问频率。
- 站内链接理顺。页面之间用文字链接互相串起来,帮助蜘蛛从一个页面走到另一个页面。
- 主动提交。新页面发布后,及时通过搜索引擎提供的入口提交。
- 检查 robots.txt 和 sitemap 设置是否正确,别把门关上了还在等客人。
需要说明的是,这些做法只能提高概率、缩短时间,没有人能保证某个页面几天内一定被收录。遇到声称“包收录”的说法,要多留个心眼。
收录了,不等于有排名
有些企业主看到页面被收录就松了口气,结果一搜还是排在好几页之后。收录只是拿到了入场券,排名还要看内容与用户搜索词的匹配程度、页面质量、其他网站对你的引用等多方面因素。如果目标是让更多潜在客户找到你,收录是第一步,内容能否真正解决问题才是后面长期的功课。
一句话总结:抓取靠链接和主动提交,收录靠内容质量,排名靠长期积累。搞清楚这三步,再遇到“搜不到”就知道该从哪儿查起了。
