1
我已經安裝了一些錯誤日誌到我的ASP.NET MVC網站，當谷歌爬行我的網站時，我得到了很多NullReferenceException錯誤。爲什麼google bot在抓取我的網站時收到NullReferenceException？
但是當我去到生成錯誤的網址時，沒有什麼不對嗎？
爲什麼會這樣發生？爲什麼google bot會導致錯誤？
A
回答
4
需要cookies或會話或Google不支持的其他內容？你能從事件日誌中獲得關於錯誤的更多信息嗎？
1
也許缺少cookie或referrer？檢查對可選HTTP標頭的任何依賴。
0
機器人不包含瀏覽器所做的大量事情。例如，您可能正在檢查不存在的會話變量。
相關問題
- 1. 爲什麼我的ASP網站內容沒有被Google抓取？
- 2. 如果存在重定向，Google bot會抓取整個網站
- 3. 爲什麼我在asp.net網站啓動時收到ThreadAbortException
- 4. Google何時重新抓取網站？
- 5. 爲什麼搜索引擎不能抓取我的網站？
- 6. 爲什麼我得到NullReferenceException？
- 7. 爲什麼在創建System.Net.Http.HttpClient（）的實例時收到NullReferenceException？
- 8. 爲什麼在測試null時收到此NullReferenceException錯誤？
- 9. Facebook不抓取我的網站圖片
- 10. PHP獲取網站的Google排名沒有抓取Google
- 11. 爲什麼我得到這個NullReferenceException？
- 12. 爲什麼我得到一個NullReferenceException
- 13. Google網頁抓取機器人會遇到什麼HTTP簽名？
- 14. 爲什麼我在使用google maps API獲取座標時收到NULL？
- 15. 爲什麼Google字體無法顯示在我的網站上？
- 16. 如何從抓取工具獲取數據到我的網站？
- 17. Facebook不抓取我的網站
- 18. Google找到我的備份網站。我能做些什麼呢？
- 19. 如何抓取我自己的網站？
- 20. scrapy抓取網站
- 21. 網站抓取器每隔幾秒就抓取一次網站
- 22. 爲什麼我收到％7Busername％7D在我的網址的結尾
- 23. NodeJS Xray無法抓取到多個網站來抓取數據
- 24. 爲什麼我每隔一天就會收到「太多的抓取失敗」
- 25. 爲什麼我在laravel網站的圖片上總是收到404錯誤？
- 26. 我如何從Python網站抓取網站上的pdf鏈接
- 27. 爲什麼我無法在我的網站上看到圖標？
- 28. apache nutch不抓取網站
- 29. 抓取整個網站python
- 30. 爲什麼Google不緩存我網站上的一些圖片
感謝這實際上是我想我需要更多關注我的代碼的原因，我正在檢查一個cookie，顯然谷歌機器人不會有...... doh！ – dswatik 2009-04-21 13:39:35