Python 做个小爬虫,要看技术交流群里小伙伴们的上榜情况,真的很方便!
Posted Hann Yang
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Python 做个小爬虫,要看技术交流群里小伙伴们的上榜情况,真的很方便!相关的知识,希望对你有一定的参考价值。
如何给在技术交流群里小伙伴们加油打气呢? 每天结束后,爬取个热榜排名发群时给大家总结情况,然后相互加油激励!这个主意,好不好? 不多说了,直接上代码:
源代码:
user=['boysoft2002','x','xx','xxx',....]
#这个变量放上要参加竞赛小伙伴们的id,注意是id不是昵称
import requests
rank,ids = [],[]
agent = 'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (Khtml, like Gecko) Chrome/85.0.4183.83 Safari/537.36'
for i in range(4):
url = f'https://blog.csdn.net/phoenix/web/blog/hotRank?page={i}&pageSize=25'
res = requests.get(url,headers={'User-Agent':agent}).json()
if res["code"] == 200:
data = res["data"]
rank += [r for r in data]
rank = [[v for i,v in r.items()] for r in rank]
for i,r in enumerate(rank):
d,m = divmod(i,25)
if m==0: print(f'【{d*25+1}到{d*25+25}名】:\\n')
if r[5] in user:
ids.append(r[5])
print(f'★№{i+1}:{r[3]}(热度:{r[0]})\\n○《{r[6]}》\\n◎{r[7]}\\n')
print('\\n【还有这些小伙伴要加油了!】:')
for i,n in enumerate([_ for _ in user if _ not in ids]):
print(n, end='\\t' if i%5!=4 else '\\n')
效果图:
来来来,各位看官:
以下是在榜上的文章,点几个赞再走吧!
【1到25名】:
★№1:英雄哪里出来(热度:141576)
○《❤️五万字《算法和数据结构》全套学习路线整理,小白零基础入门算法❤️(建议收藏)》
◎ https://blog.csdn.net/WhereIsHeroFrom/article/details/120328525
★№14:盼小辉丶(热度:35503)
○《OpenCV-Python实战(6)——OpenCV中的色彩空间和色彩映射(❤️含大量实例,建议收藏❤️)》
◎ https://blog.csdn.net/LOVEmy134611/article/details/120069317
★№24:五包辣条!(热度:29660)
○《我用Python把《白蛇2青蛇劫起》的评论做了数据可视化分析》
◎ https://blog.csdn.net/AI19970205/article/details/120268749
【26到50名】:
★№48:敲代码的布莱恩特(热度:22982)
○《常用库函数的介绍与模拟实现(有手就行)——— 字符 / 字符串 库函数》
◎ https://blog.csdn.net/DerrickWestbrook/article/details/120321944
【51到75名】:
★№62:吾日三省贾斯汀(热度:19714)
○《Gradle--❤️依赖构建只会Maven?教你快速上手Gradle及多模块定制化方案❤️(非常实用,建议收藏)》
◎ https://blog.csdn.net/JustinQin/article/details/120328896
【76到100名】:
★№91:Hann Yang(热度:16198)
○《Python 有没有羡慕别人家做的排序动图?❤️来,手把手保姆级地教你也做一个!❤️》
◎ https://blog.csdn.net/boysoft2002/article/details/120319189
★№95:Java程序鱼(热度:15608)
○《当年这些网站,让我普通二本校招拿到22K》
◎ https://blog.csdn.net/qq_35620342/article/details/120221075
--All done!
以上是关于Python 做个小爬虫,要看技术交流群里小伙伴们的上榜情况,真的很方便!的主要内容,如果未能解决你的问题,请参考以下文章
从零开始,学会Python爬虫不再难!!! -- (13)selenium项目:自动点赞机丨蓄力计划