对于robots.txt文件对于网站的作用大家都知道，但是通过观察发现，有些朋友对于robots.txt文件的规则还是有一定的误区。
比如有很多人这样写：
User-agent: *
Allow: /
Disallow: /mulu/
不知道大家有没有看出来，这个规则其实是不起作用的，第一句Allow: / 指的是允许蜘蛛爬行所有内容，第二句Disallow: /mulu/指的是禁止/mulu/下面的所有内容。
表面上看这个规则想达到的目的是：允许蜘蛛爬行除了/mulu/之外的网站所有页面。
在整个网站设计中，搜索框的外观要显眼，方便用户快速找到。网站建设公司普遍认为搜索框只是一个输入和提交内容的按钮而已，因此他们根本不需要花时间网站设计。
搜索框
但是由于错误观念泛滥，站长们也错失了一些潜在的机会。由于网站设计上的缺失以及亮点不突出，用户通常会被搜索框的位置弄得焦头烂额，他们通常会点击“返回”按钮（离开网页）。因此，网站设计平庸，辨识度不高的搜索框就是导致这一切的元凶，如果想要网站获得可观的流量，但是网站转化率却低得离谱，这是不行的。
在为网站设计搜索框时，你可重点考虑以下建议：
站长们都应该知道内部链接与外部链接都是影响网站排名的重要因素，而内部链接是完全可以自主控制的，如果网站的内部链接没有合理设置的话，可能会导致大部分的内容不被搜索引擎收录，所以拥有一个良好的内部链接结构是非常重要的。
第一：网站导航栏
网站导航栏能够有效的指引蜘蛛要到哪里去抓取有用的内容，所以导航栏要尽量使用文字、而不能为了美观而使用JS或FLASH来构建，如果要美观的话可以使用DIV+CSS技术来实现，文字型的导航栏对于搜索引擎是最友好的。
第二：面包屑导航
之前在网络上分享了“seo就像是一场战争，什么是我们的武器”一文，一时间QQ不时的有同行业之人加我好友，问及我是如何能做到网站内的每篇文章都有关键词排名，为了让大家更清楚小敏的操作思路，为此利用周末时间为大家整理了此文。
入正题之前需要说明的是，万变不离其宗，seo也是一样，我们只有提供搜索引擎需要的内容，那么我们的网站就能崭露头角，不管多难，总是会有好的解决方法的。
拿到一个要优化的新站，我们首先要做的就是诊断网站（网站没有经过任何优化，没有内容，没有外链）那么该如何诊断网站呢？
站长做站，最关心的事情莫过于是关键词排名的下降，站长同志们时时刻刻关心的莫过于是网站的关键词排名，可以说站长一天的工作中95%以上的事情都是为网站的关键词排名而做工作，但是，常常会遇到事与愿违的情况，比如，网站的关键词不升反降，令站长朋友们非常的郁闷，那么造成网站的关键词下降的因素有哪些呢，为什么会造成网站的关键词下降呢，小编总结了如下的11个导致网站关键词排名下降的因素，如果您遇到这种情况，可以根据如下的祝因素对照查出问题之所在，更有利于修改。
1、网站内容更新造成的
网站关键词排名和网站内容有很大的关系，当然包括关键词密度，关键词位置等因素，因此如果网站内容更新了，引起了关键词密度和位置的变化，也会造成关键词排名的变化。高质量的原创内容可以促进网站权重的提高，进而有一个好的排名，如果网站内容质量过低，用户体验不好，也会影响关键词排名，造成关键词排名下降，这就告诉我们宁可不更新也不要更新低质量的网站内容。
对于SEO来说，真正的对企业最大阻力的不是SEO技术问题，而是对于SEO认识程度的问题，有的企业接触了新思维，感受了网络推广方式的效果，很激动的就立马开展了SEO优化推广工作，这种情况下多半会进行SEO外包，但是却因为经验不足，以及SEO外包团队和公司参差不齐的问题，而花钱买了教训的，甚至有的企业因此对于SEO这种廉价而效果显著地推广方式产生了失望以及厌恶的感觉。这样就很不利于我们开展SEO工作了，所以中小企业在开展SEO推广的时候一定要注意选择SEO外包团队的技巧，这也是今天要为大家介绍的一些看法。
6.28的百度大K站风波，百度还是在不断的继续进行K站行为，犹如鬼子进村，网站没有恢复的迹象。上周百度再次调整，据CHINAZ的统计，7月第2次调整81%的网站都不同程度存在收录拔毛，网站被K，所有的站长群，站长论坛都哀鸿遍野，各种询问，抱怨，刷楼甚至连百度站长论坛都经常无法打开。
从7月初开始，部分过激的站长向百度提出了宣战，随着7月的严厉调整，参加的人数越来越多，号称十万。无数高价的百度的竞价被乱点一通，虽然很多的广告商不知道，百度大K站事件造成战火。但是大量的数据显示，让很多广告商感到惊叹。流量成直线网上增长，然而转化率失去平衡。很多广告不得不停止一些百度的广告的投放。百度经济来源很大一部分都是来源于百度竞价广告。然而百度在技术上来讲是无法遏制这样的情况。因为这些都是人工的点击。百度无法分辨的出来真实的点击。
也许你不知道，各网站为了防止权重分散，为了防止水军泛滥，又想提高人气，保持用户的活跃度，往往会在用户发布的外链上进行加工，当你发布外链后还以为是个好地方，链接这么容易发不上了，不管是锚文本还是裸链，都轻轻松松，还没人删除，其实在这时你可能错了，细心的人们应该会发现链接其实是被加工过的。
友好提示：
1.下面所写的内容对html有一定认识的朋友更容易理解。
2.不是所有链接搜索引擎蜘蛛都能爬寻的。
3.顺便说一点，做个好的SEOer要对网页知识有一定的了解更有利用自己的发展。
近日的百度算法大更新，让很多站长苦不堪言，笔者的很多站也受到重创，从每日的站长工具统计中可以茫茫观察到百度的一丝动静，希望对大家有所帮助。
首先，笔者的小说站以小说标题为主题做站，关键字排名还是不错的，但是大更新之后此站一直萎靡不振，时好时坏的。如下图
笔者的站采用时时更新所以百度前期收录会好一点，必定更新后网络上发布的还很少，加上文章的伪原创都是采用精准关键字替换，所以会被百度当成原创文章收录。可以看出收录一直处于上升趋势。Google 亦如此。
第一章 搜索引擎如何运行
搜索引擎具有四个功能：抓取、建立索引数据库、计算相关度并得出排名、以及提供索引的结果。搜索引擎抓取并索引数以亿计的网页、文件、新闻、图片、视频等内容，当搜索者提出一个搜索需求的时候，搜索引擎会把索引的结果按照相关性排列起来，提供给搜索者。
1、抓取和索引
互联网就像是一个庞大的城市地铁系统，网站和网站里的页面（也可能是pdf文件、jpg图片等）就像地铁系统里的站点，为了让列车可以到达每一个站点，在地铁系统里就需要有不同的线路把站点连接起来，而在互联网中连接不同网站或者网站中不同页面的线路正是链接。
