seorobot

1、网站不设置robot 对seo有影响吗

robot 只是搜索引擎优化之中的一个得分点 ，影响不是很大，但是都比较容易操作，为什么不顺手就做了呢

2、网站seo具体怎么做？

夫唯老师讲过seo具体做这些：
Robot.txt文件设置，告诉搜索引擎哪些内容需要被收录，哪些内容不需要被收录。
网站代码精简，典型的如合并css，div与css分离，尽量少用JavaScript等。
权重标签不可或缺，典型的有H1标签，alt标签，strong标签，B标签等。
网站TKD标签的完善，具体有TITLE，DESCRIPTION，KEYWORDS。
Canonical标签的引入。
nofollow标签的使用。
网站sitemap地图的制作，并在合适的地方放置地图链接。
网站面包屑导航的添加。
百度搜索资源平台网站验证，主动推送和自动推送代码的添加。
网站统计类代码如百度统计，或CNZZ的添加。
百度熊掌号引入以及相应的页面制作规范。
网站首页链接使用绝对地址。
其他诸如防止页面被转码代码引入。
作为新手seoer，有可能对以上部分代码陌生，一般要求即使自己不会，但要看得懂，知道怎么用。如果是有经验的seoer，则建议以上影响seo结果的代码能使用的全部使用上。
另外，以上是部分代码优化内容而不是全部，仅仅适用于小型企业站。大型网站对代码有着更高的优化需求。
二：网站关键词seo做法。
新网站上线怎么做seo
做seo，很大程度上就是做关键词排名，这个点显得尤为重要，将合适的关键词做到合适的位置，seo就成功了一大半，细化的关键词类优化点有很多，具体如下：
拓展关键词，利用相关工具如下拉框，底部推荐、工具，尽量拓展与自己行业相关的，有人搜索的，有指数的关键词，并做好关键词库表。
关键词布局，原则是有以下具体操作点，如重要的位置放置重要的关键词，每一个页面的关键词设置应不尽相同，网站首页用强相关的思想调用与目标关键词相关的长尾词。
规律性更新，有规律的更新网站内容是必要且必须的。
收录工作，将未收录的页面通过推送，提交，ping等方式，促进收录。
网站内链建设，合适的调用方式将增加页面的价值。

3、关于SEO的robots.txt,众所周知robots可以禁止或允许百度蜘蛛访问网站哪些文件夹;

蜘蛛在访问网站时，最先访问的是该网站robots.txt文件
如果网站有robots.txt文件并且里面有禁止蜘蛛访问的代码的话蜘蛛就不会访问了
例如：robots.txt文件中的代码为：
User-agent：*
Disallow：/
上面这个robot.txt文件禁止所有搜索引擎爬取任何内容

4、Robot.txt对SEO有什么影响？

很多人认为只有防止搜索引擎技术抓取的时候才有用。但是实际上正确使用Robot.txt对 SEO很有好处，比如重复内容用不同形式表现是经常需要的，而这种情况很容易被搜索引擎判定为重复内容堆砌。正确利用Robot可以引导搜索引擎只收录首 选内容这样就不会有作弊嫌疑了。（参见：google网站管理员blog的文章
巧妙地处理内容重复）除了处理重复外，Yahoo允许你在Robot.txt文件里面用Crawl-delay:参数设定抓取频率（参看：
）。

5、SEO:这个robot.txt 文件哪里写错了？

6、SEO 的 robot.txt 文件是怎么写的，怎样屏蔽一些他们已经收录了的网页。 求指点，不说明白是不给分的。

如果是谷歌的话，反应很快的；如果是百度，就算你加上也有可能收录，而且去掉速度也很慢，我的情侣seo博客就是很好的例子。
•要拦截整个网站，请使用正斜线。
Disallow: /•要拦截某一目录以及其中的所有内容，请在目录名后添加正斜线。
Disallow: /无用目录/ •要拦截某个网页，请列出该网页。
Disallow: /私人文件.html•要从 Google 图片中删除特定图片，请添加以下内容：
User-agent: Googlebot-Image
Disallow: /images/狗.jpg •要从 Goo le 图片中 除您网站上的所有图片，请执行以下指令：
User-agent: Googlebot-Image
Disallow: / •要拦截某一特定文件类型的文件（例如 .gif），请使用以下内容：
User-agent: Googlebot
Disallow: /*.gif$•要阻止抓取您网站上的网页，而同时又能在这些网页上显示 Adsense 广告，请禁止除 Mediapartners-Google 以外的所有漫游器。这样可使网页不出现在搜索结果中，同时又能让 Mediapartners-Google 漫游器分析网页，从而确定要展示的广告。Mediapartners-Google 漫游器不与其他 Google User-agent 共享网页。例如：
User-agent: *
Disallow: /

User-agent: Mediapartners-Google
Allow: /
Googlebot（但并非所有搜索引擎）遵循某些模式匹配原则。

•要匹配连续字符，请使用星号 (*)。例如，要拦截对所有以 private 开头的子目录的访问，请使用以下内容：
User-agent: Googlebot
Disallow: /private*/•要拦截对所有包含问号 (?) 的网址的访问（具体地说，这种网址以您的域名开头、后接任意字符串，然后接问号，而后又接任意字符串），请使用以下内容：
User-agent: Googlebot
Disallow: /*?•要指定与某个网址的结尾字符相匹配，请使用 $。例如，要拦截以 .xls 结尾的所有网址，请使用以下内容：
User-agent: Googlebot
Disallow: /*.xls$您可将此模式匹配与 Allow 指令配合使用。例如，如果 ? 代表一个会话 ID，那么您可能希望排除包含 ? 的所有网址，以确保 Googlebot 不会抓取重复网页。但是以 ? 结尾的网址可能是您希望包含在内的网页的版本。在此情况下，您可以对您的 robots.txt 文件进行如下设置：

User-agent: *
Allow: /*?$
Disallow: /*?Disallow: /*? 指令会阻止包含 ? 的所有网址（具体地说，它将拦截所有以您的域名开头、后接任意字符串，然后接问号，而后又接任意字符串的网址）。

Allow: /*?$ 指令将允许以 ? 结尾的任何网址（具体地说，它将允许所有以您的域名开头、后接任意字符串，然后接 ?，? 之后不接任何字符的网址）。

7、seo怎么优化网站

1、网站优化首选看数据，通过站长工具，百度统计，百度搜索引擎显示量查询来产看网站数据，根据数据分析并作出优化方案，在进行优化；
2、优化主要有网站标题，网站内容优化，网站链接优化，网站收录优化，网站代码后台优化等多种优化方式；
3、首选title优化，需要选择标题中关键词，优化方式为主，选对关键词为主要的优化；
4、其次选择网站内容页面关键词和网站页面排版优化；
5、接着做网站内容更新，通过不断更新网站内容提高网站收录，通过收录更快的达到部分质量低的关键词有排名；
6、然后代码优化，程序优化和图片优化连接优化为主，其中连接优化是指连接层次优化，如果页面连接层达到5层或者5层以上的可以通过修改连接重新生成连接的方式进行优化，图片优化需要关注图片属性图片属性关键词优化，图片大小，图片内容等多方面内容进行优化；
7、外链优化，通过微博、博客、微信、论坛等平台发布外链，反链，然后提升网站外部链接的引导；
8、提升网站外链，和友情链接，通过购买和交换的方式添加友情链接增加网站权重。

8、【答得上才算SEO高手】织梦设置robot的时候，具体有哪些功能需要禁止抓取(Disallow)，哪些功能需要开放？

robots.txt文件

搜索引擎使用sphider程序自动访问互联网上的网页并获取网页信息。sphider在访问一个网站时，会首先检查该网站的根目录下是否有一
个叫做robots.txt的纯文本文件，这个文件用于指定sphider在您的网站上的抓取范围。您可以在您的网站上创建一个robots.txt，在
文件中声明该网站中不想被搜索引擎收录的部分或者指定搜索引擎只收录特定的部分

robots.txt文件格式

“robots.txt”文件包含一条或更多的记录，这些记录通过空行分开（以CR,CR/NL，or NL作为结束符），每一条记录的格式如下所示：

“<field>:<optional space><value><optional space>”

在该文件中可以使用#进行注解，具体使用方法和UNIX中的惯例一样。该文件中的记录通常以一行或多行User-agent开始，后面加上若干Disallow和Allow行。

User-agent

该项的值用于描述搜索引擎robot的名字。在“robots.txt”文件中，如果有多条User-agent记录说明有多个robot会受到
“robots.txt”的限制，对该文件来说，至少要有一条User-agent记录。如果该值的值为*,则对任何robot均有效

Disallow

该项的值用于描述不希望被访问的一组URL，这个值可以是一条完整的路径，也可以是路径的非空前缀，以Disallow项的值开头的URL不会被robot访问

Allow

该项的值用于描述希望被访问的一组URL，与Disallow项相似，这个值可以是一条完整的路径，也可以是路径的前缀，以Allow项的值开头的URL是允许被robot访问的

通配符

sphider支持使用“*”和“$”来模糊匹配URL

shell脚本禁止搜索引擎抓取

禁止搜索引擎抓取网站的网址可以在每个网站的根目录下放置如下的robots.txt文件：

User-agent: *
Disallow: /

一键部署的shell脚本：

#!/bin/bash

#网站根目录定义
root_dir=("/var/www/")

#构建爬虫规则
for dir in ${root_dir[*]}
do
#删除过期的robots.txt文件
if [ -f $dir/robots.txt ]; then
rm -r $dir/robots.txt
fi

#增加新的爬虫规则
echo "User-agent: *" >$dir/robots.txt
echo "Disallow: /" >>$dir/robots.txt

#修改权限
chown www-data.www-data $dir/robots.txt
done