关于分类导航模块的疑问

只看大图 · 发表于 2015-1-28 14:41:34

最近观察网站收录的时候，发现有一个目录下的收录很少。进而开始对目录下的页面质量和入口等做相关的分析，遇到疑问，希望能得到帮助。谢谢
网站的每个分类下都有导航分类。

根据鼠标移动而变化显示，和筛选还是不太一样的。
大概代码是这么实现的
<div class="nave_lab">
            <ul>
                  <li tag="0" class="on">所有</li>
                  <li tag="1">家居家装</li>
                  <li tag="2">美容美妆</li>
                  <li tag="3">美食保健</li>
            </ul>
</div>
然后具体分类再划分到每个tag下
         <ul>
            <li tag="1"><a href="xxxxx-c1.htm" >家居</a></li>
            <li tag="1"><a href="xxx-c1.htm" >装修</a></li>
            <li tag="2"> <a href="xxxx-c1.htm" >服装</a></li>
         </ul>

问题：这样的分类导航是否会形成蜘蛛爬虫黑洞，影响到下方列表内链接的收录。（因为对html代码不是很熟悉，所以问题有点小白-。-）

*发表于 2015-1-28 16:26:40* · 发表于 2015-1-28 16:26:40

这个是完全不会影响蜘蛛抓取的，在源代码中你能看到的蜘蛛都可以抓取识别的。

*发表于 2015-1-28 17:17:11* · 发表于 2015-1-28 17:17:11

建议分析网站日志，看蜘蛛频繁抓取哪些页面，有些频繁抓取的页面和没有什么价值的页面是可以nofollow掉的，比如京东的有些分类，都是nofollow掉的。

楼主| *发表于 2015-1-30 10:21:53* · 发表于 2015-1-30 10:21:53

yc494821461 发表于 2015-1-28 17:17
建议分析网站日志，看蜘蛛频繁抓取哪些页面，有些频繁抓取的页面和没有什么价值的页面是可以nofollow掉的， ...

因为我是具体的分类。不算是多重筛选项。也没有多余的参数。所以感觉nofollow不太合适。主要是想了解这个嵌套会不会影响到抓取的效率

*发表于 2015-1-30 23:33:22* · 发表于 2015-1-30 23:33:22

不是分面导航，一般不会有啥蜘蛛黑洞之类的。。。你这样写也不会影响抓取。

*发表于 2015-2-1 19:44:46* · 发表于 2015-2-1 19:44:46

fred 发表于 2015-1-30 23:33
不是分面导航，一般不会有啥蜘蛛黑洞之类的。。。你这样写也不会影响抓取。 ...

是的，一般的比如很多需要用户输入数据查询的数据，是从数据库里掉出来的数据是属于安网的，也是目前很多搜索引擎在一直想抓取的内容。

帐号		自动登录	找回密码
密码			注册