<select>下拉列表的内容会被抓取吗？

*发表于 2014-12-28 09:09:41* · 发表于 2014-12-28 09:09:41

<select>
  <option value ="volvo">Volvo</option>
  <option value ="saab">Saab</option>
  <option value="opel">Opel</option>
  <option value="audi">Audi</option>
</select>

这里的内容会被抓取吗

*发表于 2014-12-28 13:51:21* · 发表于 2014-12-28 13:51:21

抓取是必然会的，爬虫下载网页怎能跳过一小部分不抓，问题有点问题。

拿option的值加上双引号精确匹配，并加上inurl命令去搜索，能搜到目标网页就说明option值被建立索引。

另外当然要保证option的值在网页上的其它地方没有出现过，不然上法未必管用。

*发表于 2014-12-28 18:53:12* · 发表于 2014-12-28 18:53:12

这个必然是抓取的，和网页上其他的内容一样，没什么特别。

*发表于 2014-12-29 09:16:10* · 发表于 2014-12-29 09:16:10

当然抓取。。。。

楼主| *发表于 2015-1-4 15:11:30* · 发表于 2015-1-4 15:11:30

舞柴刀的骑士发表于 2014-12-28 13:51
抓取是必然会的，爬虫下载网页怎能跳过一小部分不抓，问题有点问题。

拿option的值加上双引号精确匹配，并 ...

论坛大神多就懒得去做测试了

*发表于 2015-1-5 16:18:57* · 发表于 2015-1-5 16:18:57

会抓取
包括作弊使用的 hidden

*发表于 2015-1-6 15:20:34* · 发表于 2015-1-6 15:20:34

用这个http://www.seoqx.com/lynx测试一下就知道能不能抓取了！

帐号		自动登录	找回密码
密码			注册