網(wǎng)頁(yè)長(zhǎng)度也會(huì)影響網(wǎng)站收錄嗎?百度站長(zhǎng)學(xué)院前幾天公布了一個(gè)案例,里面提到一些細(xì)節(jié),特別值得站長(zhǎng)重視。它這個(gè)頁(yè)面對(duì)爬蟲(chóng)爬取做的優(yōu)化,直接將圖片二進(jìn)制內(nèi)容放到了html中導(dǎo)致頁(yè)面長(zhǎng)度過(guò)長(zhǎng),大小164K,導(dǎo)致內(nèi)容不被百度收錄。
網(wǎng)站如果針爬蟲(chóng)做優(yōu)化,那么網(wǎng)頁(yè)的長(zhǎng)度最要在128K以?xún)?nèi),不要過(guò)長(zhǎng)。不然爬蟲(chóng)抓取內(nèi)容后,頁(yè)面內(nèi)容過(guò)長(zhǎng)被截?cái)啵炎ト〔糠譄o(wú)法識(shí)別到主體內(nèi)容,最終導(dǎo)致頁(yè)面被認(rèn)定為空短而不收錄。
言下之意,這可能是百度技術(shù)缺陷導(dǎo)致,如果網(wǎng)頁(yè)在128K以上,爬蟲(chóng)無(wú)法抓取就無(wú)法收錄。如果各位站長(zhǎng)的網(wǎng)站內(nèi)容過(guò)長(zhǎng),盡量刪除一部分不太重要的信息,以保證內(nèi)容收錄。
百度工程師建議:
1、不建議站點(diǎn)使用js生成主體內(nèi)容,如js渲染出錯(cuò),很可能導(dǎo)致頁(yè)面內(nèi)容讀取錯(cuò)誤,頁(yè)面無(wú)法抓取
2、 如站點(diǎn)針對(duì)爬蟲(chóng)爬取做優(yōu)化,建議頁(yè)面長(zhǎng)度在128k之內(nèi),不要過(guò)長(zhǎng)
3、針對(duì)爬蟲(chóng)爬取做優(yōu)化,請(qǐng)將主題內(nèi)容放于前方,避免抓取截?cái)嘣斐傻膬?nèi)容抓取不全