如何屏蔽已收录的不必要二级目录？ 屏蔽已被百度收录的不必要二级目录的方法
我要评论通常的robots屏蔽就好了，具体如下所示：
User-agent: *
Disallow: /abc/
但是紧接着方法都被一一放弃了，因为统统行不通。因为他们的网站所有二级目录和主目录在ftp中都是在同一文件夹下，然后我又总结了他们网站出现的问题。
1、网站不带www的二级域名已经收录过万，且每日都有蜘蛛爬取，但带www的主域名至今只收录二三十个，且还有下降的趋势，所以想让网站收录带www的主域名页面。
2、网站所有页面在同一个文件夹下无法利用robots屏蔽路径方式屏蔽页面。
虽然我在百度查询了很久但是却并未查到过多有用信息，大多都是和我第一次给出的答案一样，但最后我们还是想出了办法解决了这个问题，那关于屏蔽二级目录收录问题，总结了以下几点可供选择：
1、如果需要屏蔽的页面和主页面是在不同的文件夹下我们可以直接采取我上面提到的直接robots文件屏蔽，写法例如Disallow: /abc/之类的直接robots屏蔽方法。
2、无法利用robots禁止搜索引擎收录某个二级域名的，最好的方法就是301，对于有用的页面将所有的二级目录类域名重定向，无用的就直接删除。
3、与目录分配到不同的空间下利用robots屏蔽。
4、个判断程序，让要屏蔽的二级域名下面有一个robots.txt文件。abc.xxx.com/robots.txt,然后在利用robots屏蔽。此方法我没有试过我是看到夫唯老师很久前给别人的一个建议，就理论而言是可以行的通的。
对于在网站建设中如何避免此类不需要收录的二级域名我罗列了一下几点如果有不完善的欢迎大家补充。
1、虚拟主机时空间自带了二级域名地址且地址已经收录的话最直接的办法就是站内开放的链接上要统一url规范不要给不想收录的二级域名任何的入口。
2、须分二级目录时，将主目录和二级目录分开在不同的文件夹。
3、名解析时候直接采用三W的的域名采用主域名。
以上就是对屏蔽已被百度收录的不必要二级目录的方法全部内容的介绍，更多内容请继续关注脚本之家！相关文章
如何利用网站目录最大效用的推广网站？利用网站目录推广网站的技巧
互联网上网站推广的方法五花八门，每种方法都有各自的门道，就看你会不会用。那么如何利用网站目录最大效用的推广网站？本文将提供利用网站目录最大效用推广网站的技巧供大2016-05-05- 如何发布外链，到哪儿发布外链成为站长最头痛的事情，毕竟现在优质的外链不多，免费的优质外链更少。其实网站分类目录是站长们不该忽略的一个地方，下面我们一起来看看2014-11-23
- 如何保证转移后有效继承原来的权重不被降权？最好的办法就是做301，二级目录301重定向到二级域名的两种方法，需要的朋友可以参考下2013-11-13
- 一个合格的网站，必须在根目录下包含一下robots.txt文件，这个文件的作用对所有运营网站的朋友来说并不陌生，网上也提供了很多制作robots.txt文件的方法和软件，可谓相当方2013-07-02
- 自从百度于10.23发布打击超链作弊一来，又有大批大批的网站相继倒下，相信大家都知道了百度主要是打击那些卖链接的垃圾新闻源站和买链接的那些流量站2012-12-13
- 开设频道或者子网站是用子目录方式还是二级域名，这时候非常重要。现在我就详细分析一下二级域名和子目录两者都有哪些优势和劣势，以及什么情况下选择二级域名，什么情况下2012-11-12
- 被亚马逊收录，获得更高的权重。2012-08-06
- 最近百度将Site指令的网站目录查询取消了，像“Site: /seotool/ ”的指令在百度中失效，现在还不知道百度是不是真的取消了网站目录的Site命令。2011-06-17
- 在网站架构设计中应该使用子域名还是子目录一直是个争论不休的话题。2010-12-29
- 其实关于优化URL这一块，大家不管是自己写的或者是看别人的，都基本了解的差不多。而且一些细节都可能或多或少的被一些站长和seoer提到了。2010-05-23
最新评论