
8月份百度Spider升級了對HTTPS數(shù)據(jù)的抓取力度,HTTPS數(shù)據(jù)將更快被Spider抓取到。如網(wǎng)站還在做HTTPS的改造,且網(wǎng)站數(shù)據(jù)未搭建好,建議網(wǎng)站采取以下措施,避免Spider抓取,以免造成網(wǎng)站流量損失
1、把HTTPS的協(xié)議封掉,可把443端口關掉
2、做HTTPS到HTTP的301&302
3、建議站點在改HTTPS沒改造好之前,不要提供超鏈接指向,以免被Spider抓到HTTPS
4、針對一個服務器下有多個域名的情況,建議未做HTTPS的網(wǎng)站,設置HTTPS抓取返回失敗碼,或?qū)TTPS站點301/302到HTTP,避免抓取出現(xiàn)問題
2、設置HTTPS的抓取返回失敗碼,或者做HTTPS到HTTP的301&302
3、使用鏈接提交工具,把HTTP頁面提交,便于百度更快識別頁面
4、一般24小時內(nèi),線上可以實現(xiàn)HTTPS到HTTP的退回效果
本文經(jīng)授權發(fā)布,不代表增長黑客立場,如若轉(zhuǎn)載,請注明出處:http://m.gptmaths.com/cgo/3148.html