如何解决网站不被收录等问题?
最近刚接手一个就职类网站项目,再次遇到建站之初常见的收录问题。如果说网站收录慢是因谷歌搜索引擎的审查期有关。但这套理论,似乎也不太准确。因为其他项目站在建站之后几个小时内,就有大量谷歌蜘蛛前来抓取,并在第二天就有了索引收录。那该如何解释A和B不同抓取的问题呢?
当然有的人会说是和网站架构有关系,又有的人会说是和其他因素有关系。我认为没有必要纠结这件事的,首先你要先确认网站是否能够被正常抓取!你可以访问https://www.xxxx.com/robots.txt ,当中显示出来的数据如果并无其他异常,可以肯定文件设置指定没问题的。*关于robots文件我改天会写篇文章专门讲一下!
User-agent: * Allow: / Disallow: /ad* Disallow: /static/* Disallow: /api/* Disallow: /?* Disallow: /app*/ Disallow: /app Disallow: /team/* Disallow: /case/* Disallow: /baoming/* Disallow: /contact/* Disallow: /lm2/*
然后再利用模拟蜘蛛,看看是否文件能够被正常抓取,返回的code码是否是200?显示结果也是200ok值
如果设置没问题、抓取也依然没问题。那么可以通过谷歌网站管理员递交网站地图。 等待期间不妨思考这个问题,第一文章质量到底如何?文中段落在谷歌是否有重复出现的现象?
如果文章阅读通顺,不涉嫌关键字堆砌。大可放心的关上电脑去做些其他有意义的事情, 正常情况下sitemap提交后一天之后,通过网站日志就能看出蜘蛛是否过来抓取。 如果蜘蛛出现并抓取了首页,耐心等上1-2天,网站就会出现在谷歌落地页中了。
通常不收录的原因
1:文章内容整体照抄复制,通常情况下抓取了也不会收录。即便收录一段周期也会删除!
2:蜘蛛无法正常抓取
3:网站域名曾被谷歌官方K过
以上是最为常见的几个原因,一般情况下三四天不来抓取也是正常的。超过十五天之后可以尝试以建立外部链接的方式吸引蜘蛛,如果过后几天还不收录那就要检查一下网站域名的建站历史了!