Google Cloud IP是否可供普通用戶使用？

Question

經過幾天的巨大攻擊後，來自中國的大多數人，今天我開始從Google雲端IP獲得很多點擊量（他們甚至沒有關注robots.txt文件）我知道這是Google Bots抓取工具還是使用Google Cloud IP來抓取網站的用戶？如果我阻止他們可以影響我的谷歌排名？

Ips的列表：

August 3, 2017, 12:00 am - 107.178.194.117 - 6 
August 3, 2017, 12:00 am - 107.178.194.96 - 6 
August 3, 2017, 12:00 am - 107.178.194.115 - 6 
August 3, 2017, 12:00 am - 107.178.194.115 - 5 
August 3, 2017, 12:00 am - 107.178.194.96 - 5 
August 3, 2017, 12:00 am - 107.178.194.96 - 4 
August 3, 2017, 12:00 am - 107.178.194.113 - 12 
August 3, 2017, 12:00 am - 107.178.194.113 - 11 
August 3, 2017, 12:00 am - 107.178.194.99 - 4 
August 3, 2017, 12:00 am - 107.178.194.127 - 5 
August 3, 2017, 12:00 am - 107.178.194.117 - 5 
August 3, 2017, 12:00 am - 107.178.194.127 - 4 
August 3, 2017, 12:00 am - 107.178.194.115 - 4 
August 3, 2017, 12:00 am - 107.178.194.127 - 3 

Answer 1

我建議進入谷歌的網站管理員工具： https://www.google.com/webmasters/tools

的「爬網」部分中，您可以看到正是谷歌爬蟲在你的網站做的事情。

Google抓取工具只能沿着您已經在robots.txt中設置的路徑google link。這裏有一個例子：

#all crawlers 
User-agent: * 
Disallow:/
User-agent: Googlebot 
Allow:/
Disallow: /[dont-crawl-this-pad]/ 

#yahoo 
User-agent: Slurp 
Allow:/
User-Agent: msnbot 
Disallow:/

如果你懷疑一個IP被掃描的網站robots.txt文件中定義的路徑之外，你可以阻止它毫不猶豫地，以任何方式，你可以知道爬蟲與網站管理員工具中的地位，以便您的網站保持位置

希望此信息有幫助。