8月份百度Spider升級(jí)了對(duì)HTTPS數(shù)據(jù)的抓取力度,HTTPS數(shù)據(jù)將更快被Spider抓取到。如網(wǎng)站還在做HTTPS的改造,且網(wǎng)站數(shù)據(jù)未搭建好,建議網(wǎng)站采取以下措施,避免Spider抓取,以免造成網(wǎng)站流量損失
1、把HTTPS的協(xié)議封掉,可把443端口關(guān)掉
2、做HTTPS到HTTP的301&302
3、建議站點(diǎn)在改HTTPS沒改造好之前,不要提供超鏈接指向,以免被Spider抓到HTTPS
4、針對(duì)一個(gè)服務(wù)器下有多個(gè)域名的情況,建議未做HTTPS的網(wǎng)站,設(shè)置HTTPS抓取返回失敗碼,或?qū)TTPS站點(diǎn)301/302到HTTP,避免抓取出現(xiàn)問題
2、設(shè)置HTTPS的抓取返回失敗碼,或者做HTTPS到HTTP的301&302
3、使用鏈接提交工具,把HTTP頁(yè)面提交,便于百度更快識(shí)別頁(yè)面
4、一般24小時(shí)內(nèi),線上可以實(shí)現(xiàn)HTTPS到HTTP的退回效果
本文經(jīng)授權(quán)發(fā)布,不代表增長(zhǎng)黑客立場(chǎng),如若轉(zhuǎn)載,請(qǐng)注明出處:http://allfloridahomeinspectors.com/cgo/3148.html