1、SEO 怎么禁止百度蜘蛛爬某个文件夹？
经常有站长咨询说百度蜘蛛频繁抓取网页的js文件和css文件，想屏蔽百度蜘蛛不让百度蜘蛛抓取这些文件，但是很多站长有担心如何屏蔽了百度蜘蛛抓取css文件和js文件是否会对网站排名产生不利影响，于是这些站长很纠结。
从百度站长优化指南我们就可以指定，百度排名不会考虑js文件或者css文件，也就是说js文件和css文件不参与百度排名，但是大量站长反馈，虽然禁止百度抓取js和css文件，但是百度蜘蛛还是照样抓取不误，毫无疑问，它们是用来支撑网站整体上的功能性和美观性，任何网站都需要js和css。
禁止百度收录和抓取css文件的方法
通过robots.txt文件实现禁止百度收录
我们看看其他站长对禁止百度蜘蛛收录js和css的看法。
1、谷歌管理员指南说明
阻止你的CSS和js文件可能会影响你在谷歌的搜索排名，所以建议robots.txt不要禁止JS和CSS文件访问。
谷歌索引的建议：
网页加载速度对用户和索引依然非常重要。
屏蔽JS和CSS，谷歌索引将无法向普通用户那样读取页面。
如果JS太复杂，渲染页面可能不正确。
2、夫唯 - SEOWHY创始人
我认为“蜘蛛抓取一个网站的时间是一定的，限制了某文件被抓取，则它又更多时间去抓取别的网页”
如果不成立，则完全没必要屏蔽CSS和JS了。
如果成立，那要屏蔽的就不止CSS和JS了，很多没实质意义的文件都值得屏蔽。
3、站长：小小马
顺其自然最好，该出现的还是让它出现，该让蜘蛛抓取还是要抓取的，没有必要去限制太多，这样反而不好。
4、站长：张立博
我觉得没必要屏蔽，因为搜索引擎会知道哪些是JS、CSS，哪些是网页文件。抓取js和css的蜘蛛应该不会影响网页的抓取频率。
至于搜索引擎抓取js和css，可能跟快照有关，因为现在网站的页面大多是用div+css来建设的，如果没有css的页面会惨不忍睹的。
所以不排除搜索引擎在试图解释JS和CSS文件，来丰富网页的内容，让搜索更精确。
5、站长：冯涵
经过试验和跟踪数据表明：
1>被屏蔽掉的js/css文件依然会被baidu和google大量crawl
2>屏蔽后跟踪观察其他page
type
蜘蛛crawl量，发现并未增加
3>如果网站大部分js/css文件里包含较多URL可以不屏蔽，蜘蛛爬取js/css文件的同时可以爬取里面的link
4>如果网站大部分js/css文件里基本上都是代码之类的，屏蔽也可，没发现明显的好处也没发现坏处
。
冲浪网站优化网：我们不建议禁止百度收录js或者css文件，毕竟百度抓取这些文件对网站整体性能影响微乎其微，如果禁止百度抓取js或者css，可能会影响百度快照js特效和css样式得不偿失，建议不要这样做。
2、网站如何做SEO优化啊？怎么能让百度收录？
1、关键词
对于seo的优化，首先分析关键词很重要，有必要分析关键词的关注度、竞争对手、关键词和网站的关联性、关键词的排名效果等。
2、网站架构
只有建立合适的网站，才能被搜索引擎爬虫类喜欢，有加速网站SEO优化收录的效果。我们在学习建设别人的网站的时候，要学会去掉缺点，学习好的地方。接下来建设自己的网站就会得心应手了。
3、网站目录和页面
为什么要进行SEO的优化，就是想吸引很多客人。好的SEO优化，让我们的网站会有一个不错的排名，排名高了，流量自然而然也就来了。做好我们网站的目录和页面，你会取得意想不到的效果。
4、内容发布和链接布置
内容的发送需要尽可能的原创，但实际上，伪原创也有效果，会表现出不同的东西，顾客感兴趣的东西。同时，我们也应该学会用链接把我们网站的每一页链接起来。我们不应该让每一页都无关紧要。一旦我们完成了每一页，整个网站都会有效果。
5、友情链接
我们在进行网站SEO优化时，也需要友情链接。在做之前，需要考虑两者的关联性和是否受到处罚。坦率地说，如果你不能通过建立一个有问题或质量差的友谊链接来获得结果，甚至我们自己的网站也会受到影响。建立友谊的链接，可以提高我们网站的更新频率，更有利于蜘蛛的步行。
3、我的网站做了seo优化为什么百度收录低
一般来说 新站刚上线 起码要一两个月才会开始收录 前期一般只是收录一个首页而已，对于这个情况，没有别的办法，因为百度为了防止垃圾站的泛滥，特地把新站的审核时间拉长，所以，如果你操作的是新站，那么收录量少，不用紧张，老老实实的提供优质内容。如果你的是新站，如果你不会SEO，如果你想成为一个SEO技术大牛，你可以加这个裙 : 425，五七一，206。这里每天都有SEO大牛免费分享网站优化技术，也有很多一起学习SEO的小伙伴跟你一起学习进步，并不需要你付出什么，只要你是真心想学习的就可以加入。
网站收录后不一定有排名，但是没有收录就肯定没有排名。影响关键词排名的因素有100多种，而绝对不是收录后多长时间就可以有排名的问题。而如果在其他条件都可以的情况下还有必要讨论排名的时间吗？
所以结果是：网站关键词排名不是被收录的时间长短决定的，这甚至不能算在100多个因素中的任何一个。决定关键词排名的因素是：网页内容的质量、URL设置、站内设置、内链、外链、推广、关键词竞争度、空间稳定因素、标题关键词描述设置是否合理、网站的权重等等。
新站收录周期一般在一周以内，也有半个月没有收录的。要快速收录有三个方面需要做到：站内设置合理、高质量的内容、站外推广。能做到这三点新站必定能快速收录，并且排名可能非常不错。
一、站内设置
网站被快速收录的基础是站内优化，比如网站架构、URL设置、404设置、robots设置等等。
（1）包含关键词的URL置或伪静态设置。如果是动态路径一定要在三个参数以内，超过三个参数做伪静态处理。
（2）robots设置和404页面。就算不屏蔽任何内容，也应该有robots.txt文件，网站404页面是网站友好度的体现。
（3）扁平化的栏目设置。不相关栏目之间不要做内链链接
（4）网站地图设置。网站地图是梳理整个网站的导航页，不仅是给搜索引擎看的，也是给用户看的。
（5）无作弊行为。有任何作弊行为都会导致新站不收录
二、高质量内容
高质量的内容不一定是原创的内容，原创的内容也不一定是高质量的内容。高质量的内容一定是可以解决用户需求，并且有别人网站所没有的内容。
（1）整理综合其他网站质量比较好的内容，编辑并加上利于阅读的元素，例如：图片、表格、视频
（2）整理百度知道、百度贴吧、QQ群的即时内容
（3）经验原创内容
三、站外推广
推广是最后一步，也是非常重要的一步，推广包含外链和推广。新站的权重非常低，信用度非常低，但是外链能传递权重给网站。同时推广能带来网站的用户，搜索引擎会有限把具有大量粉丝的网杂很难提前收录和排名。
（1）软文推广。用软文投稿的方式在行业站提交带网站链接的高质量软文
（2）分类信息平台推广。大量的高质量分类信息平台商铺也是高质量的外链
（3）论坛文章推广。论坛热门帖子也是一条高质量的外链，即便是个性签名的链接
（4）QQ群推广。QQ群推广能在短时间内带来大量的用户
（5）QQ空间和邮件推广。跟QQ群一样能带来大量的网站用户
（6）博客链接
（7）友情链接
4、网页禁止复制 对百度seo优化有影响吗
1、没什么卵用，在行业里这样基本上你的代码赤裸裸的
2、建议网站不要禁 选中复版制 还有什么右键等等，这权些对抓取有一定的影响
3、如果用户真感兴趣你的网站内容需要复制内容，这个时候就会给用户带来不好的体验，很多用户会直接关掉！
5、SEO教程：网站百度收录停止怎么办
网址不收录的情况，一般先要冷静分析问题，丁光辉博客一般是从以下几点着手分析：
1、网站不抓取
网站不抓取页面，新站可能是考察期，老站可能是因为过度优化或者被黑导致进入沙盒，或者拔毛。
2、网站抓取不收录
网站抓取不收录页面，你得考虑是不是存在低质量友链、外链，站内外更新频率数量幅度，是否合理。站内是否存在致命的seo问题，比如说同一个页面多处使用h1标签，动态链接过多，层级太深超过5级等因素。
丁光辉博客分析页面收录，大体是结合这两个方面来做，纯手打如有帮助麻烦采纳谢谢！
6、关于SEO的robots.txt,众所周知robots可以禁止或允许百度蜘蛛访问网站哪些文件夹;
蜘蛛在访问网站时，最先访问的是该网站robots.txt文件
如果网站有robots.txt文件并且里面有禁止蜘蛛访问的代码的话蜘蛛就不会访问了
例如：robots.txt文件中的代码为：
User-agent：*
Disallow：/
上面这个robot.txt文件禁止所有搜索引擎爬取任何内容
7、求SEO大神指点，为什么百度突然不给收录了？
一种情况，百度想敲你一笔，你们同意，然后对你小小的惩罚。
一种情况内，别家网站做容SEO做的比你好，超过你啦。
一种情况，你自身网站没有原创文章更新，没有新的内容。
建议优化好自身网站，在等一等，担心是第一种情况。
8、SEO(百度搜索引擎收录问题)
仅仅只是服务器不稳定的原因吗？服务器不稳定最多导致搜索蜘蛛无法正常抓取，一般情况下不会影响收录情况。
我猜测一下几种可能，一是你站点有没有改版？二是在服务器不稳定的过程中是否有大量数据生成？三是你站点是否有过多的重复数据？
如果你的站点性质上没问题，搜索引擎蜘蛛在一段时间后仍会正常抓取。（这个过程你可以增加一些反向链接或友情链接，不一定要再此提交。）
如果是你的站点性质上的问题，那么百度删了也是正常的。最近几个月百度的算法与收录情况变化频繁。（当然，包括以上问题正常站点也有可能被波及到。）
9、seo求禁止百度收录根目录里的一个文件夹的代码
在做SEO网站优化的时候，如果不想让搜索引擎的蜘蛛抓取收录站内的某个文件夹内容，可以在robots文件中书写相关规范。
例如，不想让搜索引擎收录根目录里的一个文件夹yang，那么相关robots文件的写法如下：
User-agent: *把这段协议放在txt文件夹中，重命名为robots.txt，然后上传到网站根目录即可！