网页长度大于128k会影响甚至百度不收录

网络推广 2018-10-28 14:36www.dzhlxh.cn网络推广竞价

  网页长度大于128k会影响甚至百度不收录

  网站如果针爬虫做,那么网页的长度最要在128K以内,不要过长。不然爬虫抓取内容后,页面内容过长被截断,已抓取部分无法识别到主体内容,最终导致页面被认定为空短而不收录。

  言下之意,这可能是百度技术缺陷导致,如果网页在128K以上,爬虫无法抓取就无法收录。如果各位站长的网站内容过长,尽量删除一部分不太重要的信息,以保证内容收录。

  百度工程师建议:

  1、不建议站点使用js生成主体内容,如js渲染出错,很可能导致页面内容读取错误,页面无法抓取

  2、 如站点针对爬虫爬取做优化,建议页面长度在128k之内,不要过长

  3、针对爬虫爬取做优化,请将主题内容放于前方,避免抓取截断造成的内容抓取不全

Copyright © 2016-2025 www.dzhlxh.cn 金源码 版权所有 Power by

网站模板下载|网络推广|微博营销|seo优化|视频营销|网络营销|微信营销|网站建设|织梦模板|小程序模板