阻止被抓取的特定地址Robots.txt

Question

我已經被問到（爲了改進SEO結果）從Robots.txt中刪除某個網址。

我正在努力（搜索引擎優化不是我的長處）弄清楚如何阻止某個域名，即使這兩個地址指向同一個網站。

例如：

http://foo.example.com - 網址我需要被索引
http://www.examplefoo.com停止 - 網址我不想被索引

從我可以告訴，使用不允許/將只從兩個塊（因爲他們是相同的網站）

任何幫助？對不起，如果這是一個愚蠢的問題..

Answer 1

步驟1： 如果你的第一個域在上，你應該重定向到你的第二個域。

樣品（寬度htaccess的）：

RewriteCond %{HTTP_HOST} ^www.xxx.ir$ [NC,OR] 

RewriteCond %{HTTP_HOST} ^xxx.ir$ [NC,OR] 

RewriteCond %{HTTP_HOST} ^yyy.com$ [NC] 

RewriteRule ^(.*)$ http://www.yyy.com/$1 [R=301,L] 

第2步： 您應該刪除的刪除在網站管理員工具的網址（目錄全部）

好運

所有URL（從第一個域）