1
甚至禁止索引整個網站？如何禁止搜索引擎通過robot.txt對子目錄/ CRM進行索引？
A
回答
1
創建robots.txt文件，並添加適當的Disallow指令，如：
User-agent: *
Disallow: /CRM
相關問題
- 1. 搜索引擎的robot.txt
- 2. 阻止搜索引擎索引網頁
- 3. 搜索引擎在Django項目中進行全文搜索
- 4. 改進搜索引擎
- 5. 搜索引擎的終止索引過程
- 6. 搜索引擎優化 - 目錄索引重複內容
- 7. 如何通過自引用子主題進行遞歸搜索？
- 8. 如何有被搜索引擎收錄
- 9. EJB - 如何通過非索引字段進行搜索？
- 10. 如何應用索引進行搜索
- 11. 這個robot.txt代碼會拒絕每個搜索引擎嗎？
- 12. Filshts搜索引擎
- 13. ASP.NET搜索引擎
- 14. Mysql搜索引擎
- 15. php搜索引擎
- 16. SQL搜索引擎
- 17. php搜索引擎
- 18. Django：搜索引擎
- 19. 搜索引擎索引JSON結果嗎？
- 20. 搜索引擎索引Flash網站？
- 21. 搜索引擎中的倒排索引
- 22. Typo3搜索索引引擎Html表格
- 23. 帶搜索引擎的PHP搜索引擎
- 24. 停止部分頁面被搜索引擎索引？
- 25. 阻止某些html元素被搜索引擎索引
- 26. 2sxc：如何禁用搜索索引
- 27. 如何構建搜索引擎優化的圖像目錄？
- 28. 建築搜索引擎產品搜索
- 29. 搜索引擎優化：燈箱圖片對於搜索引擎不可見
- 30. 如何在noe4j子圖上進行基於索引的搜索？
怎麼寫'Disallow' S' – user198729 2010-05-17 14:46:52
@ user198729：我已經更新了我的答案。 – 2010-05-17 14:47:45
所以我可以使用'不允許：/'來禁止索引整個網站，對吧？ – user198729 2010-05-17 14:49:39