googlebot

0熱度

2回答

我有WordPress站點和一個iframe，其中src爲「http://my-website.com/www.downloadedwebsite.com/index.html」裏面。我不得不下載iframed網站，因爲我正在修改其中的一些內容，並且需要同源。沒有反向鏈接到這個URL - 只是單個iframe src'ing，但是，我看到谷歌索引它（壞！）。我如何阻止索引或之後任何在裏面「htt

0熱度

1回答

防止googlebot在同一個主機帳戶上索引其他域名

我有一個託管帳戶，用於託管3個網站。所有3個網站是互相獨立的。主機帳戶與主域名.lets聯繫www.maindomain.com，本網站的文件位於主機的根目錄。另外兩個域www.domainA.com和www.domainB.com分別鏈接到子文件夾domainA和domainB。谷歌顯示www.maindomain.com/domainA和www.maindomain.com/domai

0熱度

1回答

Googlebot 404在網站更改後抓取錯誤

我有一箇舊的asp.net網站（aspx），並使用SSL重新設計了它與asp.net MVC。無論如何，在我推廣新網站後，我看到了很多錯誤，這些錯誤是由機器人尋找舊頁面產生的;錯誤看起來像這樣：路徑'/blablabla/moreBlalbalba/page.aspx'的控制器沒有找到或沒有實現IController。所以，我更新了錯誤處理以返回301響應並重定向到主頁並添加了站點地圖。谷歌404

1熱度

1回答

正確nginx的配置，以防止某些文件夾

我試圖阻止的內容索引中的某些文件夾與x-robots tag和Nginx使用以下配置的索引： location ~ .*/(?:archive|filter|topic)/.* { add_header X-Robots-Tag "noindex, follow"; } 內容保持索引，我不能調試Nginx配置。我的問題：我使用的配置是否正確，我應該等到googlebot重新抓取內容並取

11熱度

2回答

Angular2應用程序：抓取谷歌不會加載頁面內容

我工作的基礎Angular2 web應用程序。我使用Angular CLI生成應用程序，然後構建應用程序。我已在AWS S3 & Cloudfront上託管網站。當我使用網站管理員的「Google抓取方式」工具時，它僅顯示Loading...。是不是能的Googlebot抓取我的網站？

0熱度

1回答

如何製作一個js腳本從未執行谷歌機器人

我有一個小腳本，其中的工作是動態地改變網頁標題中的一些字母。（這是爲圖形目的完成的，這些字母設置爲「圖標」字體，這是非常不錯的^^）。問題是，Google使用修改過的字母對頁面進行索引，並且我的內容充滿了帶有錯誤字母的單詞即ie。 HELLO WFRLD 有什麼辦法讓一個js腳本不能被谷歌機器人執行嗎？我在想這樣的事情; if(!window.googlebot && navigator.u

0熱度

1回答

谷歌搜索結果顯示奇怪的日期

我工作的網站，並在該網站我顯示搜索結果中的奇怪日期。我搜索了很多。顯示我的日期與頁面發佈日期，上次更新日期或索引日期不符。鏈接頁面：http://www.bariatric-surgery-source.com/gastric-sleeve-surgery.html 搜索關鍵詞是：胃套下面是谷歌搜索的屏幕截圖：網頁最後更新日期爲：2017年5月30日頁面發佈日期爲：2016年11月29日

0熱度

1回答

universal.angular.io vs prerender.io從googlebot的角度來看

我有一個Angular 1.4.x和prerender.io網站的設置，它將呈現的靜態緩存頁面提供給googlebot。 Googlebot每次抓取每頁兩次。一個抓取命中URL，第二個抓取正在追加？_escaped_fragment_到url以從prerender.io獲取緩存靜態頁面我在考慮轉移到universal.angular.io，它將呈現服務器端的頁面。兩者之間有什麼不同的方法？un

-1熱度

1回答

如何在不驗證Javascript代碼的情況下向Googlebot提交網址代碼

有沒有在Google上註冊網址的方法或API？例如，在項目中創建頁面時，其地址將自動提交至Googlebot。

-1熱度

1回答

使用robots.txt阻止搜索引擎的url 100s

我在我的網站上有大約100頁的內容，我不想在google中被索引...有什麼方法可以用robots.txt來阻止它。 .It'd很煩人編輯每個頁面，添加noindex元標記.... 所有這一切我想阻止是這樣的URL ... www.example.com/index-01 html的 www.example.com/index-02.html www.example.com/index-03.ht