1、基于网络爬虫工作原理，该如何优化SEO
网络爬虫工作原理的简单理解：
爬取
索引
筛选
展示
可以根据蜘蛛的“爬取”日志，分析网站的seo状态：主要看http状态码为404的，还有是否有黑链。“索引”是排名的前提，有索引才会有排名。“筛选”可以看出哪些页面是低质量的，需要优化。“展示”可以看到网站排名的位置，分析比我们排名好的网站，借鉴对方好的地方。
总结：seo贵在坚持，建议到搜外学习SEO获得人脉和技术提升。
2、如何seo优化
SEO优化其实是很简单的……要看你怎么看待这个事情了……SEO优化的一般流程是：
一、网站诊断
1、网站的历史：域名注册时间、域名到期时间、域名注册机构、域名注册人、建站的时间等
2、服务器数据：IP、服务器所在地、服务器稳定性、同IP的网站、DNS服务器、服务器的访问速度等
3、网站的具体数据：网站的定位、网站代码的准确性和合理性、网站模板、网站功能等
二、网站总体评价
1、域名：简短、易记、富有意义
2、网站名：鲜明、个性、符合网站定位
3、网站Logo：简单、鲜明、直接、印象深刻
4、网站口号：符合网站的长期发展以及客户群体
5、整体色调：个性、友好、舒适
三、当前网站的搜索引擎友好度分析
1、网站结构是否实现良好的树状结构
2、网站是否能实现静态化，URL标准化
3、网站的标题、关键词、描述是否规范准确
4、网站的内容是否丰富、原创，并且与主题息息相关
5、是否有明确的目标，目标关键词与长尾关键词是否已经确定好
四、网站业务分析
1、网站的类型：门户网站、电子商务、企业网站、内容网站、社交、论坛等
2、网站主要业务是卖产品还是卖服务
3、网站目标客户群：客户群体的年龄、职业、薪酬等，以及这一群体未来的动向预测
4、网站使用流程：是否能为用户带来最大的便利
五、关键词分析
1、目标客户的常用关键词分析
2、网站长尾关键词的分析
3、竞争对手的关键词分析，包括对手的市场份额、产品特色、提供的服务等
六、定位目标关键词
1、目标关键词的选择
2、长尾关键词的选择
3、关键词的分布规划
七、优化方案执行报告
将计划从时间上具体到天，从人员上具体到个人。详细计划好优化方案的操作内容、时间、完成度、对困难的应变措施。
八、SEO心得和成功分享
与伙伴互相分享自己操作过程中的心得体会、成功经验、失败教训
如何还是不明白的话，可以到www.seo114.com/tieba 中去跟其他站长一起讨论，而且平台上还有专业的团队为您解答问题
3、论SEO的重要性 如何快速被爬虫抓取
首先做好网站内链，制作网站地图，然后发布高质量外链到高权重网站上。有资源可以制作站群蜘蛛池。
4、如何才能做好SEO优化
企业网站seo优化到底该怎么做？
首先我们先思考SEO到底从哪几个方面入手。其实征帆网络在交付网站给客户的时候，已经做过最基础的SEO工作，比如META标签的编辑，这是一项最基础也是非常重要的SEO工作。征帆网络项目团队在上传产品、上传文档的时候，就会把这些关键词SEO布局做到位。
·网站SEO的布局
第一步：淘取SEO核心关键词
SEO核心关键词是指能给网站带来80%流量的关键词。一个企业的核心关键词要达到50-100个之间。怎么去挑选呢？方法很多，比如通过联想方式，或者是下拉方式，还有通过百度指数的方式等。还有一个最直接最接地气的关键词的淘取方法:
1.挑选50个核心关键词
比如公司有10个人，每个人写出50个客户问到最多的关键词，就有500个。把这500个关键词按照出现的次数排序：比如湖南四星环保公司在选择关键词时， “垃圾桶”有10个人写，“湖南垃圾桶”有8个人写。那么“垃圾桶”就排第一，“湖南垃圾桶”排第二，以此类推，挑出50个左右重复最多的关键词，这些就 是核心关键词。
2.拓展长尾关键词
然后这50个词拓展成长尾词。拓展长尾词有两种常用的维度：一种是地区，可以拓展为“湖南垃圾桶”、“江西垃圾桶”等；另一种是盈利模式。例如“垃圾桶批发”、“垃圾桶生产厂家”等。这样大概拓展出100多个关键词，这些关键词就是以后在站内站外SEO要用到的关键词。
第二步：网站关键词布局
1.网站结构优化、品牌词优化
把拓展出来的最核心的关键词分配到网站主导航每个栏目中去，一个网站的主导航一般有10个栏目，每个栏目分配3-5个关键词，这样就消耗了50个关键词。剩 下的词放到网站的二级列表页面，或者三级详情页面。每个页面用1个关键词，这个关键词一定要是长尾关键词。这就是网站的结构优化。在网站结构优化过程中， 把品牌词加进去，就完成了网站的品牌词优化。
2.编辑META标签
每一个页面都应该用不同的关键词去编辑META标签，网站的每个页面都有它的身份，META标签就像他的身份证证号码。要赋予不同的页面以不同的身份，这样才容易被百度识别和抓取。如果说你的身份证号码是一个，百度就只抓一个，所以每个页面的META标签都应该不同。上面仅仅是做好了最基础的SEO布局，接下来教大家站内SEO到底该怎么做？其实站内SEO优化的重点在站内文章的编辑上。
·站内文章编辑：
站内文章编辑如何写？很多人更新网站的文章就是在写公司的新闻，请问谁会去看你的新闻呢？另外，如果漫无目的去写文章，也是白费功夫一场。
一、站内文章长尾关键词布局技巧：
1.文章的标题当中应有含有长尾关键词；
2.文章的第一段，即文章头200-300个字内，出现相应长尾的关键词；
3.文章的内容段，即300-500字段内，出现2-3次相应长尾的关键词。
二、站内文章优化技巧：
1.在做文章优化的时候，内页只优化1个关键词，不能优化多个关键词。除非是包含多个关键词的长尾关键词，比如上面提到的“湖南垃圾桶厂家”包含3个关键词。
2.在关键词优化的时候一定要加内链。并且要链接到网站首页，提高首页权重。但是需要注意的是：很多企业的网站卖多种产品。比如说“四星环保”是卖垃圾桶的，但 是网站上也有其他的配套产品，比如说卖休闲椅、花草牌。如果优化“休闲椅”这个关键词，内链接就不能链接到首页，而是链接到休闲椅的列表页。
3.给文章内的图片加ALT标签，给图片一个属性。因为搜索引擎无法直接读取图片信息，只能读取ALT标签的内容。
4.文章内还有一个“相关推荐”。“相关推荐”和内链来组成网站内部的优化网。
三、值得注意的是：
不管站内SEO还是站外SEO，绝对不要选择核心关键词，一定要选择长尾词去做优化。比方说“湖南垃圾桶”、“湖南垃圾桶厂家”。比如优化“湖南垃圾桶厂 家”，也就同时优化了“垃圾桶厂家”、“湖南垃圾桶厂家”、“湖南垃圾桶”。相当于做1个关键词的优化工作，达到优化3个关键词的效果。
·SEO的优化工作总体的计划和考量
比如要优化“湖南垃圾桶”这个关键词。可以专门给“湖南垃圾桶”做个专题页面，写的关于湖南垃圾桶的文章都链接到这个专题上来。这样就提升了这些专题页面的权重，那么它的自然排名就会很好。
一、有计划的做SEO
首先挑出这个阶段（1-3个月内）要优化的地区，然后指定要优化的关键词。然后在这段时间内就围绕这些地区和关键词去优化。建议每个人挑选5个地区、10个关键词去做。进行1-3个月的优化之后，挑出做的比较好的省份，重新排序。进行第二轮优化，然后根据结果再进行第三轮的优化，以此类推。坚持不懈地去做，被优化的长尾词页面排名一定会有明显提升。
二、做SEO为了什么
当文章都被收录，排到了百度、360、搜狗首页以后，就证明SEO就做的很好吗？不一定！因为这些被推上首页的文章可能没有一点销售力，访客打开网页看完以后直接跳走，根本就不会询盘、也不会成交。所以就必须要清楚，写文章，一方面要满足搜索引擎，符合seo标准；另一方面是要写给访客看，必须有销售力。
三、需不需要一个专职SEO
一个专职SEO一年需要5-7万块钱的费用，核算一年，SEOer带来多少免费流量。就会明白投入产出太不成比例。SEO看上去是免费的，但是获得流量的人力成本和时间成本，却比SEM多的多。那么这样我们该怎么办呢？并不是不做SEO，而是要坚持每天做一点点。在企业里面，不要一个专职人员，而是每个人都要会做SEO。每写一篇文章，都要符合SEO的标准，这是关键。其实没有必要请SEO高手，我们只要按照操作班上所讲到的内容。编好META标签，写好描述，写好文章；有计划的坚持去做SEO,一定会有效果。
四、SEO是一个漫长的工作
很多人耐不住性子，总觉得今天写文章，明天就被收录，然后就排到首页，那是不可能的。因为网站刚上线，没有权重,你的收录会很慢。站内SEO优化是一个漫长的工作，但是我们相信，坚持下去，总有一天你写的文章就被收录、排到首页。
5、网站如何做SEO优化啊？怎么能让百度收录？
1、关键词
对于seo的优化，首先分析关键词很重要，有必要分析关键词的关注度、竞争对手、关键词和网站的关联性、关键词的排名效果等。
2、网站架构
只有建立合适的网站，才能被搜索引擎爬虫类喜欢，有加速网站SEO优化收录的效果。我们在学习建设别人的网站的时候，要学会去掉缺点，学习好的地方。接下来建设自己的网站就会得心应手了。
3、网站目录和页面
为什么要进行SEO的优化，就是想吸引很多客人。好的SEO优化，让我们的网站会有一个不错的排名，排名高了，流量自然而然也就来了。做好我们网站的目录和页面，你会取得意想不到的效果。
4、内容发布和链接布置
内容的发送需要尽可能的原创，但实际上，伪原创也有效果，会表现出不同的东西，顾客感兴趣的东西。同时，我们也应该学会用链接把我们网站的每一页链接起来。我们不应该让每一页都无关紧要。一旦我们完成了每一页，整个网站都会有效果。
5、友情链接
我们在进行网站SEO优化时，也需要友情链接。在做之前，需要考虑两者的关联性和是否受到处罚。坦率地说，如果你不能通过建立一个有问题或质量差的友谊链接来获得结果，甚至我们自己的网站也会受到影响。建立友谊的链接，可以提高我们网站的更新频率，更有利于蜘蛛的步行。
6、那么新手如何做好seo优化呢？
SEO优化完整的操作流程：
1、前期竞争对手研究及自身网站分析
2、SEO计划的制定，网站诊断、编写SEO优化方案，站内SEO+站外SEO
3、站内SEO优化-网站结构优化和网站页面优化
4、站外SEO优化-外部链接建设
5、网站SEO效果监测流量分析，便于后期策略的修改
总的来说，SEO优化是一个长期的活，切不可半途而废。
作为新手，也需要明白SEO优化的整个操作的流程，如何引流方式有新媒体运营、贴吧、论坛、博客、新浪微博、微信等。
7、seo入门教程：爬虫与seo的关系
爬虫是否爬行你网站的数据网络是SEO的重要因素，首先让爬虫你的网站，这是SEO最基本的原则；
爬虫爬行：你的网站就有优化的前提；
爬虫不爬行：优化就是多此一举；
8、如何做好SEO优化？
综合来说就是让SE（搜索引擎）正确地认识我们的站点，优化站点相关关键词的排名、站内页面的优化和链接的优化。
值得注意的是我把关键词的排名是作为三要素之一，也就是说在我看来关键词的排名并不是SEO的最终目标，搜索引擎优化的最终目标是让搜索引擎认识到站点真实的一面。
这会涉及到很多的东西，例如大家现在可以看到在很多电影或者连续剧的关键词视频网站都排在前面，这就说明他们的SEO到达了一定的水准，搜索引擎能够正确地辨识出他们提供的是关于哪些内容的资源，从而给他们带去他们想要的用户。
网站内容是搜索引擎优化的第一要素
1. 大量的原创内容能够帮助你在客户的心里建立良好的信誉和权威的地位。
2. 其他的站长会自动的链接到你的网站。
SEO判断文章原始出处的方法
1. 网页PR值。
2. 网页第一次被收录的时间。
3. 域名注册时间。(百度似乎认为域名比较老的就是原创)
4. 网站的权威度。
关键词的选择
1. 关键词不要太宽泛
2. 主打关键词也不适于太长太特殊，例如公司名称(知名品牌出外)
3. 站在用户角度思考，专业名词用户不会搜索，例如SEO
4. 最有效率的关键词就是那些竞争网页最少，同时被用户搜索次数最多的词。
5. 和你的网站要相关
职业SEO应该学习的知识
1. 市场营销 + 网页制作 + 简单的网站程序编写 + SEO技术
2. 项目组织和协调 + 关注搜索引擎优化技术的新发展 + 写作能力
怎样治疗网站内容缺乏症
1. 从产品历史和沿革出发
2. 从制造、发明产品的人出发
3. 从原材料出发
4. 从客户出发
5. 从本行业出发
6. 从产品用途出发
7. 从产品技术出发
网站被惩罚或被封该怎么办
1. 首先确定你的网站是完全被封，还是只是排名下降。直接搜索一下域名或URL;用site：指令查一下;用网页上某一句独特的话搜索一下(例如版权信息);
2. 检查服务器设置、robots.txt文件、网站是否过度优化(过度优化现在往往是排名被惩罚的重要原因)。
3. 是否有可疑的页面转向?有大量交叉链接?链接向其他有作弊嫌疑的网站?
4. 是否被若为复制内容网页?
5. 是否用了隐藏网页?大量垃圾链接?
6. 其他作弊手段;
高质量的外部链接来自 (你可以反过来思考，不包括的哪些)
1. 开放目录;
2. 其他站对你的新闻介绍;
3. 权威网站的商业链接;
如何写TITLE
1. 每个页面要不一样，并且符合页面内容;
2. 吸引人，排在搜索结果第一页第一屏，客户点哪个就看标题了;
3. 标题标签中应该含有关键词，并且顺口;
4. 普遍TITLE结构：文章名 - 分类名 - 网站名;例如：胎教音乐下载 – 胎教方法 – 妈妈帮
5. 别堆砌关键字。
搜索引擎对逗导入链接地的分析可能包含
1. 导入链接数目
2. 导入链接本身的重要性，也就是链接向你的网页本身的重要性
3. (这两点也就形成了Google PR，但后面的这些因素都和PR没有直接关系。)
4. 反向链接增加的速度
5. 反向链接所在网站本身的内容主题
6. 反向链接所在页的内容是否相关
7. 反向链接的链接锚文字
8. 反向链接锚文字前后周围的文字
9. 链接在页面的位置
10. 反向链接所在的域名年龄
11. 反向链接所在的域名是否曾经转手
12. 反向链接所在页第一次被收录的日期
13. 反向链接所在页页面内容是否曾经有变化?有什么样的变化?
14. 反向链接第一次出现在页面上是什么时候15. 链接文字是否曾经变化?变化是什么?
16. 反向链接所在页还链接向哪些其他网站?这些其他网站内容是否相关?质量怎么样?
17. 反向链接是否有垃圾链接嫌疑?比如来自论坛签名，博客等地方。
18. 链接点击率
19. 用户点击链接后在你的网站停留多长时间
反向链接一般原则
1. 反向链接的锚文字(链接文字)应该多样化
2. 链接应该来自相关网页
3. 链接在网页不同的位置
4. 逐步自然增长
5. 反向链接应该来自不同PR的网页
6. 来自好的邻居
7. 链接应该来自不同的IP地址
8. 来自新旧网站的链接都有
9. 优质交换链接或友情链接
10. 链接到内容网页 千万不要把所有链接都指向你的主页
11. 链接向你的网页是不是还链接向其他的不好的网页
关键字的选择步骤
1. 列出大量关键词：自己想、问朋友、看对手、用工具
2. 关键词竞争程度：总相关网页数;竞价广告价格
3. 关键字被搜索次数
4. 计算关键词效能
5. 确定关键字
针对关键词进行网页优化
1. 关键词密度
2. HTML标签
3. 关键词在网页正文中：正文标题、开头、H1～H3、加粗(黑体)、斜体
4. URL中的关键词
5. 关键词出现在链接中
6. 注意优化自然性，防止过度优化。
URL优化规则 (在选择CMS或BLOG程序时需要考虑)
1. 选个好域名，和网站主题相关，
2. 静态化，别有逗 ? & %地等；
3. 文件名包含内容相关的关键字；
4. 别太长；
5. 全部用小写，因为Unix/Linux服务器大小写字母是不同处理；
提高域名信任度的几个简单方法
1. 网站要有隐私权政策，特别是需要用户注册的网站;
2. 提供完整的联系方法，地址、电话、邮编、EMAIL、QQ、MSN等等;
3. 页面数量;
4. 与行业内权威网站的链接;
5. 域名一次注册N年，而不是每年续费;
6. 拥有独立IP地址;服务器反应快速;
7. 没有死链接、无效链接、假链接(该有链接的地方缺没有)
8. 网页HTML代码经过W3C验证;
9. 逗关于我们地写的详细。
网站健康检查
1. 首先看域名Whois信息，注意域名第一次注册的时间，中间有没有注册人转手;
2. 检查网站DNS设置是否正确，是否有多个域名。
3. URL是否静态化。
4. 收录情况怎样?
5. 是否有作弊行为：隐藏文字、群发链接等;
6. 页面设计是否漂亮，规范。
7. 网站所在的IP地址上还有哪些网站，收录情况，外部链接情况，外观感觉怎样;
站内链接的优化
1. 建立规范的网站地图;
2. 每个网页最多离首页四次点击;
3. 使用文字导航
4. 链接文字包含关键字;
5. 网页的互相链接，使用逗相关文章地逗推荐文章地逗随机文章地等功能;
新站点怎样寻找外部链接
1. 新站点开通三个月以后，再开始寻找链接;因为收录、PR都稳定了;
2. 登录分类目录;直接搜索逗分类信息地或者逗黄页地等可以搜到很多这样的网站 ，我的科迪络互联传媒很容易就加入了。
3. 写博客，发布有吸引力的文章，请朋友转贴;
4. 网站初期从非商业性开始，因为商业网站相对难得到链接;
5. 与同类网站友情链接;
需要知道竞争对手网站的哪些情况
1. 这些网站规模有多大，网站本身有多少页?
2. 收录了多少页?
3. 这些网站的栏目设置?
4. 内容是原创为主，还是采集的?
5. 网站PR值?
6. 域名注册时间?
7. 网页关键词密度?
8. 关键词出现的位置?
9. 有没有一定的规律可以学习?
10. 在雅虎查一下这些网站的外部链接有多少?
11. 外部链接来自于什么地方，质量如何?
12. 是大量的友情链接，垃圾链接?还是来自新闻门户?
百度排名观察
1. 百度蜘蛛极为活跃。
2. 似乎更注重页面内的因素。
3. 没有类似于Google沙盒效应的因素。(当前已经引入)
4. 目标关键词应该完整匹配地出现在页面中。
5. 比较少考虑整个网站的主题。
6. 过度的优化网页并不能在百度搜索中得到好的排名。
7. 相较于Google排名来说比较简单。只要你的网站符合最基本的用户友好原则和搜索引擎优化原则，就应该会得到相当不错的排名。
9、如何提升搜索引擎爬虫的效率来改进SEO工作
其实这是两个方面的问题，一个是提升爬虫的效率，一个是SEO，你是想把爬虫做的更好，还是想seo优化符合爬虫的规范！！