真香啊,让 Python 代码能力起飞的 24 个骚操作

Posted Python学习与数据挖掘

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了真香啊,让 Python 代码能力起飞的 24 个骚操作相关的知识,希望对你有一定的参考价值。

大家好,我们知道 Python 加速技巧有很多。今天这篇文章,我给大家总结了24个,查缺补漏,每天学会一个新的小技巧。内容较长,建议收藏、关注。

部分 Python 技巧来自粉丝群小伙伴的分享,在此表示感谢。想加入的小伙伴,文末提给添加方式。

一、分析代码运行时间

第1式:测算代码运行时间

平凡方法

快捷方法(jupyter环境)

第2式:测算代码多次运行平均时间

平凡方法

快捷方法(jupyter环境)

第3式:按调用函数分析代码运行时间

平凡方法


快捷方法(jupyter环境)

第4式:按行分析代码运行时间

平凡方法



快捷方法(jupyter环境)

二、加速你的查找

第5式:用set而非list进行查找

低速方法



高速方法

第6式:用dict而非两个list进行匹配查找

低速方法

高速方法

三、加速你的循环

第7式:优先使用for循环而不是while循环
低速方法

高速方法

第8式:在循环体中避免重复计算

低速方法

高速方法

四、加速你的函数

第9式:用循环机制代替递归函数

低速方法


高速方法

第10式:用缓存机制加速递归函数

低速方法

高速方法

第11式:用numba加速Python函数

低速方法


高速方法

五、使用标准库函数进行加速

第12式:使用collections.Counter加速计数

低速方法

高速方法

第13式:使用collections.ChainMap加速字典合并

低速方法


高速方法

六,使用numpy向量化进行加速

第14式:使用np.array代替list

低速方法

高速方法

第15式:使用np.ufunc代替math.func

低速方法

高速方法

第16式:使用np.where代替if

低速方法


高速方法

七、加速你的Pandas

第17式:使用np.ufunc函数代替applymap

低速方法

高速方法

第18式:使用预分配存储代替动态扩容

低速方法

高速方法

第19式:使用csv****文件读写代替excel文件读写

低速方法

高速方法

第20式:使用pandas多进程工具pandarallel

低速方法


高速方法

八、使用Dask进行加速

第21式:使用dask加速dataframe

低速方法

高速方法

第22式:使用dask.delayed进行加速

低速方法


高速方法

九、应用多线程多进程加速

第23式:应用多线程加速IO密集型任务

低速方法

高速方法

第24式:应用多进程加速CPU密集型任务

低速方法

高速方法

推荐文章

技术交流

欢迎转载、收藏、有所收获点赞支持一下!

目前开通了技术交流群,群友已超过2000人,添加时最好的备注方式为:来源+兴趣方向,方便找到志同道合的朋友

  • 方式①、发送如下图片至微信,长按识别,后台回复:加群;
  • 方式②、添加微信号:dkl88191,备注:来自CSDN
  • 方式③、微信搜索公众号:Python学习与数据挖掘,后台回复:加群

以上是关于真香啊,让 Python 代码能力起飞的 24 个骚操作的主要内容,如果未能解决你的问题,请参考以下文章

真香啊让 Python 代码起飞的 24 个神操作

学废了嘛?提升 Python 代码运行速度的6个技巧真香啊

500个轻松处理,Python 自动化读写Word文档真香啊

Docker 的 8 个应用场景,真香啊!

Docker 的 8 个应用场景,真香啊...

真香啊,一文讲透金融风控建模全流程(Python)