2017-02-15 126 views
0

我需要perevent Alexa和類似的網站訪問我的網站完全。 我知道這可以通過robots.txt完成,但據我所知這還不夠,它們是通過簡單擴展或類似的方式收集數據。如何阻止Alexa和類似的網站訪問網站

任何想法或解決方案?

預先感謝您。

回答

0

你需要阻止theire機器人使用robots.txt

  • Alexa的機器人:ia_archiver

這是你如何阻止它:

User-agent: ia_archiver 
Disallow:/

你需要找到的名字所有你想阻止的機器人。這很簡單,只需使用Google搜索