蜘蛛池

百度Spider升级HTTPS抓取公告

蜘蛛池qq25496334    2021-12-08 22:00:26    473
8月份百度Spider升级了对HTTPS数据的抓取力度,HTTPS数据将更快被Spider抓取到。如网站还在做HTTPS的改造,且网站数据未搭建好,建议网站采取以下措施,避免Spider抓取,以免造成网站流量损失 1、把HTTPS的协议封掉,可把443端口关掉; 2、做HTTPS到http的301; 3、建议站点在改HTTPS没改造好之前,不要提供超链接指向,以免被Spider抓到HTTPS。 4、针对一个服务器下有多个域名的情况,建议未做HTTPS的网站,设置HTTPS抓取返回失败码,或将HTTPS站点301/302到HTTP,避免抓取出现问题。

本文链接:https://zzc.vikiseo.com/s/64.html

转载声明:本站发布文章及版权归原作者所有,转载本站文章请注明文章来源!

上一篇   下一篇

相关文章