Python 做个小爬虫,要看技术交流群里小伙伴们的上榜情况,真的很方便!

Posted Hann Yang

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Python 做个小爬虫,要看技术交流群里小伙伴们的上榜情况,真的很方便!相关的知识,希望对你有一定的参考价值。

如何给在技术交流群里小伙伴们加油打气呢? 每天结束后,爬取个热榜排名发群时给大家总结情况,然后相互加油激励!这个主意,好不好? 不多说了,直接上代码:

源代码:

user=['boysoft2002','x','xx','xxx',....] 
#这个变量放上要参加竞赛小伙伴们的id,注意是id不是昵称

import requests
rank,ids = [],[]
agent = 'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (Khtml, like Gecko) Chrome/85.0.4183.83 Safari/537.36'
for i in range(4):
    url = f'https://blog.csdn.net/phoenix/web/blog/hotRank?page={i}&pageSize=25'
    res = requests.get(url,headers={'User-Agent':agent}).json()
    if res["code"] == 200: 
        data = res["data"]
        rank += [r for r in data]

rank = [[v for i,v in r.items()] for r in rank]

for i,r in enumerate(rank):
    d,m = divmod(i,25)
    if m==0: print(f'【{d*25+1}到{d*25+25}名】:\\n')
    if r[5] in user:
        ids.append(r[5])
        print(f'★№{i+1}:{r[3]}(热度:{r[0]})\\n○《{r[6]}》\\n◎{r[7]}\\n')

print('\\n【还有这些小伙伴要加油了!】:')
for i,n in enumerate([_ for _ in user if _ not in ids]):
    print(n, end='\\t' if i%5!=4 else '\\n')

效果图:

来来来,各位看官:

以下是在榜上的文章,点几个再走吧!

【1到25名】:

★№1:英雄哪里出来(热度:141576)
○《❤️五万字《算法和数据结构》全套学习路线整理,小白零基础入门算法❤️(建议收藏)》
◎ https://blog.csdn.net/WhereIsHeroFrom/article/details/120328525

★№14:盼小辉丶(热度:35503)
○《OpenCV-Python实战(6)——OpenCV中的色彩空间和色彩映射(❤️含大量实例,建议收藏❤️)》
◎ https://blog.csdn.net/LOVEmy134611/article/details/120069317

★№24:五包辣条!(热度:29660)
○《我用Python把《白蛇2青蛇劫起》的评论做了数据可视化分析》
◎ https://blog.csdn.net/AI19970205/article/details/120268749

【26到50名】:

★№48:敲代码的布莱恩特(热度:22982)
○《常用库函数的介绍与模拟实现(有手就行)——— 字符 / 字符串 库函数》
◎ https://blog.csdn.net/DerrickWestbrook/article/details/120321944

【51到75名】:

★№62:吾日三省贾斯汀(热度:19714)
○《Gradle--❤️‍依赖构建只会Maven?教你快速上手Gradle及多模块定制化方案❤️‍(非常实用,建议收藏)》
◎ https://blog.csdn.net/JustinQin/article/details/120328896

【76到100名】:

★№91:Hann Yang(热度:16198)
○《Python 有没有羡慕别人家做的排序动图?❤️来,手把手保姆级地教你也做一个!❤️》
◎ https://blog.csdn.net/boysoft2002/article/details/120319189

★№95:Java程序鱼(热度:15608)
○《当年这些网站,让我普通二本校招拿到22K》
◎ https://blog.csdn.net/qq_35620342/article/details/120221075

--All done!

以上是关于Python 做个小爬虫,要看技术交流群里小伙伴们的上榜情况,真的很方便!的主要内容,如果未能解决你的问题,请参考以下文章

Python爬虫大佬实战:超星(学习通)网络协议分析

从零开始,学会Python爬虫不再难!!! -- (13)selenium项目:自动点赞机丨蓄力计划

从零开始,学会Python爬虫不再难!!! -- (13)selenium项目:自动点赞机丨蓄力计划

PHP爬虫抓取

Python采集游记攻略,为十月假期做准备

用python爬取去哪儿游记攻略为十月假期做准备。。。爬虫之路,永无止境!