python BeautifulSoup获取网页正文

Posted 2020-07-30

通过BeautifulSoup库的get_text方法找到网页的正文：

#!/usr/bin/env python
#coding=utf-8

#html找出正文

import requests
from bs4 import BeautifulSoup

url=‘http://www.baidu.com‘
html=requests.get(url)

soup=BeautifulSoup(html.text)
print soup.get_text()

 

本文出自 “linux与网络那些事” 博客，请务必保留此出处http://khaozi.blog.51cto.com/952782/1793075