1、SEO 怎麼禁止百度蜘蛛爬某個文件夾？
經常有站長咨詢說百度蜘蛛頻繁抓取網頁的js文件和css文件，想屏蔽百度蜘蛛不讓百度蜘蛛抓取這些文件，但是很多站長有擔心如何屏蔽了百度蜘蛛抓取css文件和js文件是否會對網站排名產生不利影響，於是這些站長很糾結。
從百度站長優化指南我們就可以指定，百度排名不會考慮js文件或者css文件，也就是說js文件和css文件不參與百度排名，但是大量站長反饋，雖然禁止百度抓取js和css文件，但是百度蜘蛛還是照樣抓取不誤，毫無疑問，它們是用來支撐網站整體上的功能性和美觀性，任何網站都需要js和css。
禁止百度收錄和抓取css文件的方法
通過robots.txt文件實現禁止百度收錄
我們看看其他站長對禁止百度蜘蛛收錄js和css的看法。
1、谷歌管理員指南說明
阻止你的CSS和js文件可能會影響你在谷歌的搜索排名，所以建議robots.txt不要禁止JS和CSS文件訪問。
谷歌索引的建議：
網頁載入速度對用戶和索引依然非常重要。
屏蔽JS和CSS，谷歌索引將無法向普通用戶那樣讀取頁面。
如果JS太復雜，渲染頁面可能不正確。
2、夫唯 - SEOWHY創始人
我認為「蜘蛛抓取一個網站的時間是一定的，限制了某文件被抓取，則它又更多時間去抓取別的網頁」
如果不成立，則完全沒必要屏蔽CSS和JS了。
如果成立，那要屏蔽的就不止CSS和JS了，很多沒實質意義的文件都值得屏蔽。
3、站長：小小馬
順其自然最好，該出現的還是讓它出現，該讓蜘蛛抓取還是要抓取的，沒有必要去限制太多，這樣反而不好。
4、站長：張立博
我覺得沒必要屏蔽，因為搜索引擎會知道哪些是JS、CSS，哪些是網頁文件。抓取js和css的蜘蛛應該不會影響網頁的抓取頻率。
至於搜索引擎抓取js和css，可能跟快照有關，因為現在網站的頁面大多是用div+css來建設的，如果沒有css的頁面會慘不忍睹的。
所以不排除搜索引擎在試圖解釋JS和CSS文件，來豐富網頁的內容，讓搜索更精確。
5、站長：馮涵
經過試驗和跟蹤數據表明：
1>被屏蔽掉的js/css文件依然會被baidu和google大量crawl
2>屏蔽後跟蹤觀察其他page
type
蜘蛛crawl量，發現並未增加
3>如果網站大部分js/css文件里包含較多URL可以不屏蔽，蜘蛛爬取js/css文件的同時可以爬取裡面的link
4>如果網站大部分js/css文件里基本上都是代碼之類的，屏蔽也可，沒發現明顯的好處也沒發現壞處
。
沖浪網站優化網：我們不建議禁止百度收錄js或者css文件，畢竟百度抓取這些文件對網站整體性能影響微乎其微，如果禁止百度抓取js或者css，可能會影響百度快照js特效和css樣式得不償失，建議不要這樣做。
2、網站如何做SEO優化啊？怎麼能讓百度收錄？
1、關鍵詞
對於seo的優化，首先分析關鍵詞很重要，有必要分析關鍵詞的關注度、競爭對手、關鍵詞和網站的關聯性、關鍵詞的排名效果等。
2、網站架構
只有建立合適的網站，才能被搜索引擎爬蟲類喜歡，有加速網站SEO優化收錄的效果。我們在學習建設別人的網站的時候，要學會去掉缺點，學習好的地方。接下來建設自己的網站就會得心應手了。
3、網站目錄和頁面
為什麼要進行SEO的優化，就是想吸引很多客人。好的SEO優化，讓我們的網站會有一個不錯的排名，排名高了，流量自然而然也就來了。做好我們網站的目錄和頁面，你會取得意想不到的效果。
4、內容發布和鏈接布置
內容的發送需要盡可能的原創，但實際上，偽原創也有效果，會表現出不同的東西，顧客感興趣的東西。同時，我們也應該學會用鏈接把我們網站的每一頁鏈接起來。我們不應該讓每一頁都無關緊要。一旦我們完成了每一頁，整個網站都會有效果。
5、友情鏈接
我們在進行網站SEO優化時，也需要友情鏈接。在做之前，需要考慮兩者的關聯性和是否受到處罰。坦率地說，如果你不能通過建立一個有問題或質量差的友誼鏈接來獲得結果，甚至我們自己的網站也會受到影響。建立友誼的鏈接，可以提高我們網站的更新頻率，更有利於蜘蛛的步行。
3、我的網站做了seo優化為什麼百度收錄低
一般來說 新站剛上線 起碼要一兩個月才會開始收錄 前期一般只是收錄一個首頁而已，對於這個情況，沒有別的辦法，因為百度為了防止垃圾站的泛濫，特地把新站的審核時間拉長，所以，如果你操作的是新站，那麼收錄量少，不用緊張，老老實實的提供優質內容。如果你的是新站，如果你不會SEO，如果你想成為一個SEO技術大牛，你可以加這個裙 : 425，五七一，206。這里每天都有SEO大牛免費分享網站優化技術，也有很多一起學習SEO的小夥伴跟你一起學習進步，並不需要你付出什麼，只要你是真心想學習的就可以加入。
網站收錄後不一定有排名，但是沒有收錄就肯定沒有排名。影響關鍵詞排名的因素有100多種，而絕對不是收錄後多長時間就可以有排名的問題。而如果在其他條件都可以的情況下還有必要討論排名的時間嗎？
所以結果是：網站關鍵詞排名不是被收錄的時間長短決定的，這甚至不能算在100多個因素中的任何一個。決定關鍵詞排名的因素是：網頁內容的質量、URL設置、站內設置、內鏈、外鏈、推廣、關鍵詞競爭度、空間穩定因素、標題關鍵詞描述設置是否合理、網站的權重等等。
新站收錄周期一般在一周以內，也有半個月沒有收錄的。要快速收錄有三個方面需要做到：站內設置合理、高質量的內容、站外推廣。能做到這三點新站必定能快速收錄，並且排名可能非常不錯。
一、站內設置
網站被快速收錄的基礎是站內優化，比如網站架構、URL設置、404設置、robots設置等等。
（1）包含關鍵詞的URL置或偽靜態設置。如果是動態路徑一定要在三個參數以內，超過三個參數做偽靜態處理。
（2）robots設置和404頁面。就算不屏蔽任何內容，也應該有robots.txt文件，網站404頁面是網站友好度的體現。
（3）扁平化的欄目設置。不相關欄目之間不要做內鏈鏈接
（4）網站地圖設置。網站地圖是梳理整個網站的導航頁，不僅是給搜索引擎看的，也是給用戶看的。
（5）無作弊行為。有任何作弊行為都會導致新站不收錄
二、高質量內容
高質量的內容不一定是原創的內容，原創的內容也不一定是高質量的內容。高質量的內容一定是可以解決用戶需求，並且有別人網站所沒有的內容。
（1）整理綜合其他網站質量比較好的內容，編輯並加上利於閱讀的元素，例如：圖片、表格、視頻
（2）整理百度知道、百度貼吧、QQ群的即時內容
（3）經驗原創內容
三、站外推廣
推廣是最後一步，也是非常重要的一步，推廣包含外鏈和推廣。新站的權重非常低，信用度非常低，但是外鏈能傳遞權重給網站。同時推廣能帶來網站的用戶，搜索引擎會有限把具有大量粉絲的網雜很難提前收錄和排名。
（1）軟文推廣。用軟文投稿的方式在行業站提交帶網站鏈接的高質量軟文
（2）分類信息平台推廣。大量的高質量分類信息平台商鋪也是高質量的外鏈
（3）論壇文章推廣。論壇熱門帖子也是一條高質量的外鏈，即便是個性簽名的鏈接
（4）QQ群推廣。QQ群推廣能在短時間內帶來大量的用戶
（5）QQ空間和郵件推廣。跟QQ群一樣能帶來大量的網站用戶
（6）博客鏈接
（7）友情鏈接
4、網頁禁止復制 對百度seo優化有影響嗎
1、沒什麼卵用，在行業里這樣基本上你的代碼赤裸裸的
2、建議網站不要禁 選中復版制 還有什麼右鍵等等，這權些對抓取有一定的影響
3、如果用戶真感興趣你的網站內容需要復制內容，這個時候就會給用戶帶來不好的體驗，很多用戶會直接關掉！
5、SEO教程：網站百度收錄停止怎麼辦
網址不收錄的情況，一般先要冷靜分析問題，丁光輝博客一般是從以下幾點著手分析：
1、網站不抓取
網站不抓取頁面，新站可能是考察期，老站可能是因為過度優化或者被黑導致進入沙盒，或者拔毛。
2、網站抓取不收錄
網站抓取不收錄頁面，你得考慮是不是存在低質量友鏈、外鏈，站內外更新頻率數量幅度，是否合理。站內是否存在致命的seo問題，比如說同一個頁面多處使用h1標簽，動態鏈接過多，層級太深超過5級等因素。
丁光輝博客分析頁面收錄，大體是結合這兩個方面來做，純手打如有幫助麻煩採納謝謝！
6、關於SEO的robots.txt,眾所周知robots可以禁止或允許百度蜘蛛訪問網站哪些文件夾;
蜘蛛在訪問網站時，最先訪問的是該網站robots.txt文件
如果網站有robots.txt文件並且裡面有禁止蜘蛛訪問的代碼的話蜘蛛就不會訪問了
例如：robots.txt文件中的代碼為：
User-agent：*
Disallow：/
上面這個robot.txt文件禁止所有搜索引擎爬取任何內容
7、求SEO大神指點，為什麼百度突然不給收錄了？
一種情況，百度想敲你一筆，你們同意，然後對你小小的懲罰。
一種情況內，別家網站做容SEO做的比你好，超過你啦。
一種情況，你自身網站沒有原創文章更新，沒有新的內容。
建議優化好自身網站，在等一等，擔心是第一種情況。
8、SEO(百度搜索引擎收錄問題)
僅僅只是伺服器不穩定的原因嗎？伺服器不穩定最多導致搜索蜘蛛無法正常抓取，一般情況下不會影響收錄情況。
我猜測一下幾種可能，一是你站點有沒有改版？二是在伺服器不穩定的過程中是否有大量數據生成？三是你站點是否有過多的重復數據？
如果你的站點性質上沒問題，搜索引擎蜘蛛在一段時間後仍會正常抓取。（這個過程你可以增加一些反向鏈接或友情鏈接，不一定要再此提交。）
如果是你的站點性質上的問題，那麼百度刪了也是正常的。最近幾個月百度的演算法與收錄情況變化頻繁。（當然，包括以上問題正常站點也有可能被波及到。）
9、seo求禁止百度收錄根目錄里的一個文件夾的代碼
在做SEO網站優化的時候，如果不想讓搜索引擎的蜘蛛抓取收錄站內的某個文件夾內容，可以在robots文件中書寫相關規范。
例如，不想讓搜索引擎收錄根目錄里的一個文件夾yang，那麼相關robots文件的寫法如下：
User-agent: *把這段協議放在txt文件夾中，重命名為robots.txt，然後上傳到網站根目錄即可！