8月份百度Spider升級了對HTTPS數據的抓取力度，HTTPS數據將更快被Spider抓取到。如網站還在做HTTPS的改造，且網站數據未搭建好，建議網站采取以下措施，避免Spider抓取，以免造成網站流量損失
1、把HTTPS的協議封掉，可把443端口關掉；
2、做HTTPS到http的301；
3、建議站點在改HTTPS沒改造好之前，不要提供超鏈接指向，以免被Spider抓到HTTPS。
4、針對一個服務器下有多個域名的情況，建議未做HTTPS的網站，設置HTTPS抓取返回失敗碼，或將HTTPS站點301/302到HTTP，避免抓取出現問題。
來源：百度搜索資源平臺
目前百度Spider抓取新鏈接的途徑有兩個，一是主動出擊發現抓取，二就是從搜索資源平臺的鏈接提交工具中獲取數據，其中通過主動推送功能“收”上來的數據最受百度Spider的歡迎。對于站長來說，如果鏈接很長時間不被收錄，建議嘗試使用主動推送功能，尤其是新網站，主動推送首頁數據，有利于內頁數據的抓取。那么同學們要問了，為什么我提交了數據還是遲遲在線上看不到展現呢？那涉及的因素可就多了，在Spider抓取
建議您使用DNS反查方式來確定抓取來源的ip是否屬于百度，根據平臺不同驗證方法不同，如linux/windows/os三種平臺下的驗證方法分別如下：5.1 在linux平臺下，您可以使用host ip命令反解ip來判斷是否來自Baiduspider的抓取。Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名，非 *.baidu.com 或 *.b
百度各個產品使用不同的user-agent：產品名稱對應user-agent網頁搜索Baiduspider無線搜索Baiduspider圖片搜索Baiduspider-image視頻搜索Baiduspider-video新聞搜索Baiduspider-news百度搜藏Baiduspider-favo百度聯盟Baiduspider-cpro商務搜索Baiduspider-ads來源：百度搜索資源平臺
8月份百度Spider升級了對HTTPS數據的抓取力度，HTTPS數據將更快被Spider抓取到。如網站還在做HTTPS的改造，且網站數據未搭建好，建議網站采取以下措施，避免Spider抓取，以免造成網站流量損失1、把HTTPS的協議封掉，可把443端口關掉；2、做HTTPS到http的301；3、建議站點在改HTTPS沒改造好之前，不要提供超鏈接指向，以免被Spider抓到HTTPS。4、針對一
