BeautifulSoup无法通过其类找到标签

Posted 2021-05-03

以下是网页的一部分：

 <div class="MPinfo">
     <ul class="frontList">
         <li>some text</li>
         <li>some text</li>
         <li>some text</li>
         <li>some text</li>
         <li>some text</li>
         <li>some text
             <a href="/some_local_link/8976">some text</a>;
             <a href="/some_local_link/8943">some text</a>;
         </li>
         <li>E-mail: 
             <a href="mailto:[e-mail]">[e-mail]</a>
         </li>
     </ul>
 </div>

我试图通过它的类获取div然后将电子邮件链接提取到电子邮件本身，如：[e-mail]

page = urllib.urlopen(link)
soup = BeautifulSoup(page.read())
print soup.find('div', attrs={'class': 'MPinfo'})

我已经尝试了几种获取div的方法，但它返回空列表或None

答案

您可以在div下选择所有li，它将是一个列表，因此您可以选择最后一个li元素，如[-1]

>>> soup.find("div",attrs={"class":"MPinfo"}).find_all("li")[-1].a.text
'[e-mail]'