美丽的汤使用正则表达式查找标签？
Posted
技术标签:
【中文标题】美丽的汤使用正则表达式查找标签？【英文标题】：Beautiful Soup Using Regex to Find Tags? 【发布时间】：2014-09-05 01:44:37 【问题描述】：我真的希望能够让 Beautiful Soup 匹配任何标签列表，就像这样。我知道 attr 接受正则表达式，但是在漂亮的汤中有什么东西可以让你这样做吗？
soup.findAll("(a|div)")
输出：
<a> ASDFS
<div> asdfasdf
<a> asdfsdf
我的目标是创建一个可以从网站抓取表格的抓取工具。有时标签的命名不一致，我希望能够输入标签列表来命名表的“数据”部分。
【问题讨论】：
可以使用标签列表：soup.find_all(['a', 'div'])
【参考方案1】：
请注意，您也可以使用正则表达式在标签的属性中搜索。例如：
import re
from bs4 import BeautifulSoup
soup.find_all('a', 'href': re.compile(r'crummy\.com/'))
此示例查找链接到包含子字符串 'crummy.com' 的网站的所有 <a> 标记。
【讨论】：
【参考方案2】：find_all() 是 Beautiful Soup 搜索 API 中最受欢迎的方法。
您可以传递各种过滤器。另外，传递一个list 来查找多个标签：
>>> soup.find_all(['a', 'div'])
示例：
>>> from bs4 import BeautifulSoup
>>> soup = BeautifulSoup('<html><body><div>asdfasdf</div><p><a>foo</a></p></body></html>')
>>> soup.find_all(['a', 'div'])
[<div>asdfasdf</div>, <a>foo</a>]
或者您可以使用regular expression 来查找包含a 或div 的标签：
>>> import re
>>> soup.find_all(re.compile("(a|div)"))
【讨论】：
【参考方案3】：是的，请参阅文档...
http://www.crummy.com/software/BeautifulSoup/bs3/documentation.html
import re
soup.findAll(re.compile("^a$|(div)"))
【讨论】：
以上是关于美丽的汤使用正则表达式查找标签？的主要内容，如果未能解决你的问题，请参考以下文章