网站改版不收录
爬虫抓取 12412
网站改版之后,就不收录了,一条文章都不收录,有什么解决办法吗?蜘蛛抓取之前有几百,现在也只有七八十次抓取了。
-
基于改版造成的网站不收录,因素有很多。例如:
1、网站URL的更改,没做301。导致大量404就很不好;
2、改版的同时,更换了服务器,且目前不收录的情况发生也就几天,这样再等等就好了;
3、改版上整体是换了行业,或页面内容相关度严重下降。解决办法我无法具体给出。
可以给你一个思路。
1、URL发生变化,导致之前的内容无法访问了,设置404,提交百度死链解决问题;
2、网站主题变更,会当做新站评估,你可以理解你又从新开始了;
3、改版后,不收录情况在2周以内 基本正常;
4、抓取的URL不是你目标的URL,那应该重点县解决抓取问题;
4年前
目前是不抓取改版之后的新链接了,每天的所有抓取都是抓取改版之前的链接,抓取也是存在问题的,请问这个怎么解决呢