快推365SEO问答正文

网站主体内容过长为什么会影响蜘蛛抓取?

2020/12/17 16:40:46

911浏览量

回答

2020/12/17 16:42:02

举个例子:某网站主体内容都是JS生成,针对用户访问,没有做优化;但是网站特针对爬虫抓取做了优化,直接将图片进行base64编码推送给百度,然而优化后发现内容没有被百度展示出来;页面质量很好,还特意针对爬虫做了优化,为什么内容反而无法出现在百度搜索中;


主体内容过长影响蜘蛛抓取原因如下:

1、站点优化后将主体内容放于最后,图片却放于前面;

2、网站针对爬虫爬取做的优化,是直接将图片base64编码后放到HTML中,导致页面长度过长,网站页面长度达164k;

3、爬虫抓取内容后,页面内容过长被截断,已抓取部分无法识别到主体内容,最终导致页面被认定为空短而不建索引。





转载来源:

此教程来源于《搜外网-夫唯SEO培训》,网址:https://www.seowhy.com/

本教程连接:https://www.seowhy.com/a/1112.html     为原创表示感谢!



0+1

0+1