真香啊,让 Python 代码能力起飞的 24 个骚操作
Posted Python学习与数据挖掘
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了真香啊,让 Python 代码能力起飞的 24 个骚操作相关的知识,希望对你有一定的参考价值。
大家好,我们知道 Python 加速技巧有很多。今天这篇文章,我给大家总结了24个,查缺补漏,每天学会一个新的小技巧。内容较长,建议收藏、关注。
部分 Python 技巧来自粉丝群小伙伴的分享,在此表示感谢。想加入的小伙伴,文末提给添加方式。
一、分析代码运行时间
第1式:测算代码运行时间
平凡方法
快捷方法(jupyter环境)
第2式:测算代码多次运行平均时间
平凡方法
快捷方法(jupyter环境)
第3式:按调用函数分析代码运行时间
平凡方法
快捷方法(jupyter环境)
第4式:按行分析代码运行时间
平凡方法
快捷方法(jupyter环境)
二、加速你的查找
第5式:用set而非list进行查找
低速方法
高速方法
第6式:用dict而非两个list进行匹配查找
低速方法
高速方法
三、加速你的循环
第7式:优先使用for循环而不是while循环
低速方法
高速方法
第8式:在循环体中避免重复计算
低速方法
高速方法
四、加速你的函数
第9式:用循环机制代替递归函数
低速方法
高速方法
第10式:用缓存机制加速递归函数
低速方法
高速方法
第11式:用numba加速Python函数
低速方法
高速方法
五、使用标准库函数进行加速
第12式:使用collections.Counter加速计数
低速方法
高速方法
第13式:使用collections.ChainMap加速字典合并
低速方法
高速方法
六,使用numpy向量化进行加速
第14式:使用np.array代替list
低速方法
高速方法
第15式:使用np.ufunc代替math.func
低速方法
高速方法
第16式:使用np.where代替if
低速方法
高速方法
七、加速你的Pandas
第17式:使用np.ufunc函数代替applymap
低速方法
高速方法
第18式:使用预分配存储代替动态扩容
低速方法
高速方法
第19式:使用csv****文件读写代替excel文件读写
低速方法
高速方法
第20式:使用pandas多进程工具pandarallel
低速方法
高速方法
八、使用Dask进行加速
第21式:使用dask加速dataframe
低速方法
高速方法
第22式:使用dask.delayed进行加速
低速方法
高速方法
九、应用多线程多进程加速
第23式:应用多线程加速IO密集型任务
低速方法
高速方法
第24式:应用多进程加速CPU密集型任务
低速方法
高速方法
推荐文章
- 上瘾了,最近又给公司撸了一个可视化大屏(附源码)
- 如此优雅,4款 Python 自动数据分析神器真香啊
- 梳理半月有余,精心准备了17张知识思维导图,这次要讲清统计学
- 年终汇总:20份可视化大屏模板,直接套用真香(文末附源码)
技术交流
欢迎转载、收藏、有所收获点赞支持一下!
目前开通了技术交流群,群友已超过2000人,添加时最好的备注方式为:来源+兴趣方向,方便找到志同道合的朋友
- 方式①、发送如下图片至微信,长按识别,后台回复:加群;
- 方式②、添加微信号:dkl88191,备注:来自CSDN
- 方式③、微信搜索公众号:Python学习与数据挖掘,后台回复:加群
以上是关于真香啊,让 Python 代码能力起飞的 24 个骚操作的主要内容,如果未能解决你的问题,请参考以下文章