我希望我的網站內容被百度索引但不被保存快照，我該怎么做？
Baiduspider遵守互聯網meta robots協議。您可以利用網頁meta的設置，使百度顯示只對該網頁建索引，但并不在搜索結果中顯示該網頁的快照。
和robots的更新一樣，因為搜索引擎索引數據庫的更新需要時間，所以雖然您已經在網頁中通過meta禁止了百度在搜索結果中顯示該網頁的快照，但百度搜索引擎數據庫中如果已經建立了網頁索引信息，可能需要二至四周才會在線上生效。
來源：百度搜索資源平臺 百度搜索學堂
是的，必須完整的指定Sitemap 中的網址，包括完整的協議（HTTP 或 HTTPS）和主機名（主機名或IP），并以“/”開始。
robots.txt 是一個標準，它通過提供一些規則，告訴搜索引擎爬蟲哪些網頁可以被爬取，哪些網頁不應該被爬取。但是，一些搜索引擎爬蟲可能會忽略這些規則，直接抓取它們想要的網頁。 此外， robots.txt 文件的存在只是一個建議而不是命令。在一些情況下，搜索引擎爬蟲可能會收錄被 robots.txt 文件所屏蔽的網頁，這有可能是因為發布這個網頁的人想要讓它被收錄，也有可能是因為機器人誤解了
robots.txt文件放在哪里?robots.txt文件應該放置在網站根目錄下。舉例來說，當spider訪問一個網站（比如 http://www.abc.com）時，首先會檢查該網站中是否存在http://www.abc.com/robots.txt這個文件，如果 Spider找到這個文件，它就會根據這個文件的內容，來確定它訪問權限的范圍。網站 URL相應的 robots.txt的 URLhtt
