robots.txt屏蔽垃圾蜘蛛抓取网站信息
做网站当然希望蜘蛛过来爬取内容，这样有利于增加收录量，提升曝光率。白帽SEO优化中，要保证网站的主要信息能被蜘蛛顺...
基础优化一年前(173)网站上线前用Robots全站屏蔽对SEO有影响吗
网站建设很多朋友是在本地搭建，操作、修改都方便，但很多时候客户需要预览或想知道工作进度就不方便。Windows主机还好...
基础优化一年前(460)
淘宝robots屏蔽了蜘蛛,网店还能参与SEO排名吗
查看一下淘宝的robots，原来全站屏蔽所有蜘蛛，现在也开放了部分目录。后来再想研究一下再次访问robots.txt文件发现这个文...
SEO实战一年前(643)
robots禁止抓取规则为什么还被收录
有时候不希望搜索引擎抓取某些内容可以写robots.txt文件放到根目录，按理蜘蛛会首先读取这个文件，按照robots协议抓取相应...
基础优化一年前(1219)robots添加Sitemap链接位置
robots.txt声明网站中哪些目录不让搜索引擎收录， 执行顺序从上到下 ，robots.txt写法，添加sitemap链接， 什么是robots协议对se...
基础优化一年前(7091)
彻底屏蔽已收录的不需要的二级域名有效方法
前面笔者写过一篇关于删除不想被收录的域名或页面百度快照办法，但由于百度有一定延迟，想到先用robots屏蔽的办法。SE...
进阶优化一年前(5129)
别让网站的robots成为最大的安全漏洞
网站下的robots.txt文件告诉搜索引擎的访问范围，使用方法很简单，但是搜索引擎还是个人来说都是可以访问的， 很多新人不...
进阶优化一年前(3900)
什么是robots协议对seo的影响
蜘蛛spider在访问一个网站时,会首先会检查该网站的根域下是否有一个叫做robots.txt的纯文本文件,这个文件用于指定spider在您网...
SEO教程一年前(1036)
- 推荐内容
SEO规则在变—企划与SEO思考
搜索引擎规则不断在变，如果说百度在打击SEOer不如说百度帮我...[全文]
SEM，SEO是什么意思
由英文Search Engine Optimization缩写而来,中文意译为搜索引擎优化...[全文]
SEO优化编辑文章内容新手必知技巧
SEO编辑文章是站在SEO的角度,更多的是以关键字为主,刚接触某个...[全文]
零基础新手学习SEO有前途吗
从2010年起，越来越多的人离开了搜索引擎优化这个舞台，而现在...[全文]
自媒体人如何选择适合自己的赚钱
自媒体简单来说是"粉丝经济的产物"是以现代化、电子化的手段...[全文]
快速提高网站流量和权重的三个秘
有一定基础的SEOer一定知道流量对一个网站来说是多么重要,因此...[全文]