百度搜索資源平臺-Robots
- 威海百度搜索資源平臺 威海百度搜索資源平臺
- 1116
使用說明
1. robots.txt可以告訴百度您網站的哪些頁面可以被抓取,哪些頁面不可以被抓取。
2. 您可以通過Robots工具來創建、校驗、更新您的robots.txt文件,或查看您網站robots.txt文件在百度生效的情況。
3. Robots工具目前支持48k的文件內容檢測,請保證您的robots.txt文件不要過大,目錄最長不超過250個字符。
4. 如需檢測未驗證站點的robots設置,請點擊此處進行檢測。
來源:百度搜索資源平臺