您現在的位置: 网站首頁 / 業界資訊 / 正文

谷歌站長指南:不建議用robots.txt屏蔽js文件,現在通過執行JavaScript來了解網頁

作者: admin 发布: 2014-7-28 9:14:56 分类: 業界資訊 閱讀: 次 查看評論

  谷歌站長指南:不建議用robots.txt?屏蔽js文件,因为现在Google已经开始通过执行JavaScript来了解网页了。我们的索引系统一直在像普通用户启用了javaScript 的浏览器一样呈现大量网页。

  這是來自谷歌站長博客的一篇博文,原文如下:

  原文開始------------------------

  原文:Understanding web pages better

  作者:Erik Hendriks and Michael Xu, 软件工程师; Kazushi Nagayama, 网站趋势分析师

  1998年,当我们的服务器在苏珊·沃西基(Susan Wojcicki)的车库中运行时,我们完全没必要担心JavaScript或CSS的问题。当时,它们还没有得到广泛应用,JavaScript也只是用于开发网页元素。但眨眼间,情况便发生了翻天覆地的变化。现在,网络中随处可见大量地运用了JavaScript的丰富多彩、美轮美奂的动态网站。今天,我们将讨论Google在呈现更丰富多彩的网站方面的能力(这意味着我们在您的网站上看到的内容更像是现代网络浏览器呈现的内容),其中包括外部资源、执行JavaScript和应用CSS。

  以往,我們只關注在HTTP響應主體中獲取的原始文本內容,並不會實際解譯運行JavaScript的標准浏覽器會看到的內容。如果網頁中包含由JavaScript呈現的高價值內容,那麽當該網頁開始顯示時,我們無法讓搜索者知道,這對于搜索者和網站站長來說都不是想要的結果。

  爲了解決這個問題,我們決定嘗試通過執行JavaScript來了解網頁。在當前網絡規模下這一點很難做到,但我們認爲這非常值得一試。一段時間以來,我們一直在逐步改善這一問題的處理方式。在過去的幾個月中,我們的索引系統一直在像普通用戶啓用了JavaScript的浏覽器一樣呈現大量網頁。

  有時,呈現過程並非盡善盡美,這會給與您網站有關的搜索結果帶來負面影響。下面,我們列出了一些潛在的問題,以及在可能的情況下如何避免這些問題的發生:

  如果單獨文件中的JavaScript或CSS等資源被屏蔽(例如通過robots.txt),從而導致Googlebot無法檢索這些資源,那麽我們的索引系統將無法像普通用戶那樣看到您的網站。我們建議您允許Googlebot檢索JavaScript和CSS,以便我們可以更好地將您的內容編入索引。這一點對于移動網站來說尤爲重要,因爲CSS和JavaScript等外部資源有助于我們的算法了解相應網頁已針對移動設備進行優化。

  如果您的網絡服務器無法處理資源抓取請求,則可能會妨礙我們呈現您的網頁。如果您想要確保Google可以呈現您的網頁,請確保您的服務器能夠處理資源抓取請求。

  適當地將網站降級通常不失爲一種非常好的方法。即使用戶的浏覽器沒有兼容的JavaScript實現功能,這也有助于用戶暢享您提供的內容。此外,這種方法還有利于停用或關閉了JavaScript的訪問者以及尚無法執行JavaScript的搜索引擎。

  有時,JavaScript可能會因爲對于我們來說過于複雜或難以理解而無法執行,在這種情況下,我們將無法完整、准確地呈現相應網頁。

  有些JavaScript會移除網頁中的內容(而非添加內容),這會導致我們無法將相應內容編入索引。

  爲了使問題更易于調試,目前我們正在開發一種工具,以便幫助網站站長更好地了解Google如何呈現其網站。我們非常期待不久後在網站站長工具中爲您提供此工具。

  如有任何疑問,請隨時訪問我們的幫助論壇。

  ------------------------原文結束

  通俗的說:假如你用robots.txt屏蔽了js文件,Googlebot就無法檢索這些資源,就無法像普通用戶那樣看到網站。另外如果JS中包含移動站元素文件,也會導致Google無法判斷移動版。

  作者:盧松松

  原文來源:谷歌站長博客

  站長推薦:

  robots.txt是什麽?

  robots.txt主要作用

  robots.txt使用技巧

  來源:SEO搜尋引擎優化 - SEO自學網 轉載注明出處!

? 上一篇下一篇 ?   本文關鍵詞: 谷歌優化  robots.txt  

評論列表:

站長SEO學院
第一節:百度搜索引擎工作原理
第二節:建設對搜索引擎友好的站點
第三節:如何進行網站內容建設
第四節:整體優化、結構優化、網頁優化
第五節:移動搜索-明確移動搜索優化標准
百度SEO資料文檔
百度搜索引擎優化指南2.0
百度移動搜索優化指南2.0
網站分析白皮書(站長版)
移動站點該如何優化
建設對百度友好的站點
百度搜索引擎網頁質量白皮書
石榴算法-綠蘿算法-冰桶算法
新搜索時代下的優化策略
更多百度SEO資料文檔
站長推薦
DIV+CSS布局實例教程-Web標准
网站SEO優化常见问题汇总
SEO優化推广方案该如何写
SEO優化方案步骤
影響網站關鍵詞排名因素總結
影響谷歌搜索引擎排名的因素調查
手機移動端站點適配優化
最近發表