BeautifulSoup标签定位方法总结

Posted bosslv

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了BeautifulSoup标签定位方法总结相关的知识,希望对你有一定的参考价值。

首先说明一下两个基本函数 .find() 和 .findAll()。

find()返回第一个符合要求的标签

findAll()返回一个由所有符合要求的标签组成的列表。除此之外基本相同。

   

0、直接定位

例:

<body>

<table>

<td>apple</td>

<td>banana</td>

</table>

</body>

   

label_loc = bs.body.table.td

   

1、通过标签名定位

例:<table>

<td>apple</td>

<td>banana</td>

<table>

   

bs.find("td") 返回第一个<td></td>

bs.findAll("td") 返回所有<td></td>

   

2、通过标签属性定位

例:<table>

<td name="fruit">apple</td>

<td name="fruit">apple</td>

</table>

   

bs.find(name="fruit") 返回第一个<td></td>

bs.findAll(name="fruit") 返回所有<td></td>

   

3、通过标签名+属性定位

例:<table>

<td name="fruit">apple</td>

<td name="fruit">apple</td>

</table>

   

bs.find("td",{"name":"fruit"}) 返回第一个<td></td>

findAll 同理

请注意2与3的区别。

find(name="fruit")  != find("td",{"name":"fruit"})

方法3有<td>的限制条件。

   

4、通过text定位

例:<table>

<td>apple</td>

<td>banana</td>

<table>

   

find(text="apple") 返回<td></td>

   

注意text匹配必须完全相同,而且应在同一标签内。find(text="app") 返回None

想要只匹配部分文本,应使用正则表达式,接下来介绍。

   

5、通过正则表达式与以上方式组合

例:<table>

<td name="fruit">apple</td>

<td name="fruit">apple</td>

</table>

   

find(text=re.compile("app")) 返回含有app的标签

bs.find("td",{"name":re.compile("fruit")})

   

   

   

以上是关于BeautifulSoup标签定位方法总结的主要内容,如果未能解决你的问题,请参考以下文章

BeautifulSoup 之 select 总结---1205

Python_爬虫_BeautifulSoup网页解析库

爬虫:BeatifulSoup模块

BeautifulSoup4系列三

python爬虫beautifulsoup4系列3

元素绝对定位以后设置了高宽,a标签不能点击的原因总结