|
|||||||||
 |
 |
 |
 |
 |
 |
 |
 |
 |
|
(發佈時間:2013-09-10 14:27:53)
外部JavaScript / CSS 值得做的您的網站訪問者（頁面加載時間和瀏覽器緩存）和網站維護的好處，
但搜索引擎爬蟲的利益將很容易地讀過去，這些，如果他們在頁面中嵌入的Robots.txt，
這個文件可以被用來阻止抓取某些網頁和文件夾在您的網站上。
確保你不小心阻止他們你想索引的網頁。
我個人並不真正指望的robots.txt文件，作為對搜索引擎優化的一部分，因為它不是直接促成了你的排名（你實際上並不需要使用robots.txt文件）。
記住，如果你阻斷網頁的robots.txt你不會阻止連結流向，此類頁面連結指向他們所給出的信息在搜索結果的基礎上仍然出現在理論上是可能的。