從重複的網站中刪除包含鏈接

Question

有一個重複的開發網站，因爲遺留原因存在並且正在等待完全刪除，它始終有一條規則來保留所有搜索引擎的robots.txt文件，但是在某一時刻，機器人.txt被意外刪除，並且在某個時間點，有兩個跨域重複項目，並且Google將整個重複網站編入索引，並且導致數千個到生產網站的傳入鏈接出現在Google網站站長工具中（您的站點位於網站>鏈接到您的網站）。

robots.txt得到恢復，整個開發站點受密碼保護，但來自重複站點的傳入鏈接保留在生產網站站長工具中，即使開發站點robots.txt是由Google下載的19小時前。

我花了幾個小時閱讀了這個，看到很多網絡上的矛盾，所以想從stackoverflow得到一個更新的共識如何執行一個完整的網站刪除並刪除指向開發網站的鏈接從谷歌到生產網站。

Answer 1

沒有人能夠告訴你究竟需要多長時間才能從索引中刪除「不良」鏈接，但這可能需要幾天而不是幾小時。還有一點需要注意的是，只有「好的」抓取工具纔會實際遵守robots.txt文件，因此如果您不希望這些鏈接出現在別處，只需在robots.txt文件中使用disallow即可足夠。