更新 robots.txt 檔案
如要更新現有 robots.txt 檔案中的規則,請從您的網站下載 robots.txt 檔案副本,並進行必要編輯。然後將更新過的檔案上傳到網站。
下載 robots.txt 檔案
您可以透過多種方式下載 robots.txt 檔案,例如:
-
前往 robots.txt 檔案 (例如
https://example.com/robots.txt),並將其中內容複製到電腦上的新文字檔中。建立新的本機檔案時,請務必遵循檔案格式相關規範。 -
使用 curl 等工具下載 robots.txt 檔案的實際副本,例如:
curl https://example.com/robots.txt -o robots.txt
- 請使用 Search Console 中的 robots.txt 報表,以便複製 robots.txt 檔案的內容,然後再貼到電腦上的檔案中。
編輯 robots.txt 檔案
使用文字編輯器開啟您從網站下載的 robots.txt 檔案,並對規則進行所需編輯。請務必使用正確的語法,並以 UTF-8 編碼儲存檔案。
上傳 robots.txt 檔案
將新的 robots.txt 檔案上傳到網站根目錄,該檔案必須是名為 robots.txt 的文字檔。視平台和伺服器種類,上傳檔案到網站的方式各有不同。如需相關協助,請參閱「將 robots.txt 檔案上傳到網站」的提示說明。
重新整理 Google 的 robots.txt 快取
在自動檢索程序中,Google 檢索器會注意到您對 robots.txt 檔案所做的變更,且每 24 小時就會更新快取版本。如果您需要盡早更新快取,請使用 robots.txt 報表的「要求重新檢索」功能。