爬取今日新闻网的侧边栏

Posted cjr-qyf

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了爬取今日新闻网的侧边栏相关的知识,希望对你有一定的参考价值。

题目:爬取今日头条新闻网的左边侧栏,并且以csv为文件的形式保存

代码:

import io
import sys
import urllib.request
import pandas as pd
from pyquery import PyQuery as pq
sys.stdout = io.TextIOWrapper(sys.stdout.buffer,encoding=gb18030) #改变标准输出的默认编码
url = https://mini.eastday.com/jrdftt/
def get_Info(url):
    res=urllib.request.urlopen(url)
    htmlBytes=res.read()
    doc = pq(htmlBytes.decode(utf-8))
    res = doc(".channel-item span")
    t = [i.text for i in res]
    se = pd.Series(t)
    se.to_csv("列表.csv")

结果:

技术图片

 

 

以上是关于爬取今日新闻网的侧边栏的主要内容,如果未能解决你的问题,请参考以下文章

Python3从零开始爬取今日头条的新闻开发环境搭建

Xamarin 表单 - 侧边菜单左侧栏、片段和列表视图

wordpress不同页面显示不同的侧边栏,怎么设置

前端学习(3039):vue+element今日头条管理-侧边菜单栏的展示和收缩

使用python-aiohttp爬取今日头条

如何使侧边栏菜单元素居中