1.避免网站存在重复页 不少网站一个内容提供多种浏览版本，虽然在很大程度方便用户，提高了用户体验度，可对蜘蛛却造成了些许困难，因为蜘蛛难以识别主次，一旦让它认为你在恶意重复，那么轻则降权，重则K站拔毛呀。 User-agent： * Disallow： /sitemap/ 《禁止蜘蛛抓取文本页面》http://www.yixiin.com/news/ 扩展阅读：《惠州SEO博客K站之谜》 (叶剑辉也曾在博客上线之初也因类似问题而被k，具体可看链接)
2.保护网站安全 或许有些人会有大大的问号。robots与网站安全怎么就拉上关系了?这就要说到黑客了，不少低级黑客就是通过搜索默认后台登陆，以达到入侵网站的目标，因此安全不得不防呀。 User-agent： * Disallow： /admin/ 《禁止蜘蛛抓取admin目录下所有文件》 扩展阅读：《WordPress程序安全设置技巧 》(本人也曾遭受攻击，因此安全问题哪怕细节也不容忽视，具体可查看叶剑辉博客)
3.防止链接被“盗”用 一般盗链的并不多，可是一旦被搜索引擎“盗链”了，那么百兆宽带恐怕也吃不消呀，因此若非做图片网站，又想避免被盗链，那么即可进行屏蔽。 User-agent： * Disallow：.jpg$
4.提交网站地图 对于现在做网站SEO优化的朋友，都懂得做网站地图，可总会有那么些朋友不懂得去提交的，仅仅以为在网页上加个链接，便完事了。其实robots是具有提交这一功能的，一下以惠州SEO博客为例。 http://www.yixiin.com/sitemap/index-htm-mid-5.html
站长基础说说之搜索引擎的内外部优化你知道多少呢？
搜索引擎的内外部优化你知道多少呢？郑州seo索引擎优化告诉你。如下：一、内部优化(1)META标签优化：例如：TITLE，KEYWORDS，DES
0评论2019-05-03278
站长基础说说之网站百度收录需要注意的问题
1.时间问题:网站是新站,百度对于新站的考察时间是1-3个月.在这三个月中,我们site自己的网站经常会出现网站有时间可以查询到一个
0评论2019-05-03279
站长基础说说之网站改版后的降权处理方法有哪些？
网站出现降权的情况很多，这也是每个优化师不想看到的问题，一但网站出现降权对排名的影响还是比较大的，情况稍好的话可能会轻微
0评论2019-05-03271
站长基础说说之seo优化应该从seo的原理上出发才能做好优化
seo这个行业从开始的混乱无比变得井然有序，让很多从事seo行业的朋友心中有了一个底。可是咱们做seo这么长的时间有没有真的去了
0评论2019-05-02253
站长基础说说之SEO优化如何判定一个外链的价值！
对于外链为皇，内容为王这一句话，我想对做SEO优化的人来说耳朵已经听出茧来了。不过随着百度搜索引擎的算法更新后，很多人就放
0评论2019-05-02134
站长基础说说之百度图片的热门目录收录规则有哪些？
百度图片的热门目录： 爆笑趣图、精品推荐、MM明星、卡通动漫、精美壁纸、电影电视、风景名胜、新闻图片、壁纸。百度图片会根据
0评论2019-05-02123
