少妇午夜啪爽嗷嗷叫视频-久久精品欧美伊人婷婷1024-泰国大鸡吧猛操日日本大骚逼-国产精品高清一区二区不卡-熟女少妇一区二区三区四区-中文字幕午夜人妻久久一区-天美传媒麻豆蜜桃飘香-国产做a爰片久久毛片95-欧美亚洲另类在线日韩国产

思億歐觀點

頁面長度過長,也會導致不收錄?

發(fā)布時間:2017-06-21

網站主體內容都是js生成,針對用戶訪問,沒有做優(yōu)化;但是網站特針對爬蟲抓取做了優(yōu)化,且將圖片也直接做了base64轉化;然而優(yōu)化后發(fā)現內容卻不被百度收錄。

頁面質量很好,還特意針對爬蟲做了優(yōu)化,為什么內容反而不收錄了呢?


站點反饋:

網站主體內容都是js生成,針對用戶訪問,沒有做優(yōu)化;但是網站特針對爬蟲抓取做了優(yōu)化,且將圖片也直接做了base64轉化;然而優(yōu)化后發(fā)現內容卻不被百度收錄。

頁面質量很好,還特意針對爬蟲做了優(yōu)化,為什么內容反而不收錄了呢?

工程師分析:

1、網站針對爬蟲爬取做的優(yōu)化,直接將圖片二進制內容放到了html中導致頁面長度過長,網站頁面長度達164k;

2、 站點優(yōu)化后將主體內容放于最后,圖片卻放于前面;

3、爬蟲抓取內容后,頁面內容過長被截斷,已抓取部分無法識別到主體內容,最終導致頁面被認定為空短而不收錄。

工程師建議:

1、不建議站點使用js生成主體內容,如js渲染出錯,很可能導致頁面內容讀取錯誤,頁面無法抓取

2、 如站點針對爬蟲爬取做優(yōu)化,建議頁面長度在128k之內,不要過長

3、針對爬蟲爬取做優(yōu)化,請將主題內容放于前方,避免抓取截斷造成的內容抓取不全


分享至share
  • pin
  • weibo
  • wechat
email

tel 24小時免費服務咨詢熱線:400-080-3010

立即咨詢立即咨詢 聯系我們聯系我們