Python3:只用一个装饰器,就让python的运行速度提升200倍!!

Posted Carl_奕然

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Python3:只用一个装饰器,就让python的运行速度提升200倍!!相关的知识,希望对你有一定的参考价值。

1、引言

小屌丝:鱼哥,我今天被鄙视了
小鱼:因为你的颜值被鄙视了??
小屌丝:咱还能正常聊天吗??
小鱼:好吧,我已经很正经的说话了,那你说吧,因为啥被鄙视了?
小屌丝:今天一个小菜鸟说C语言是世界上运行速度最快的语言,我非常不服气~~
小鱼:那有啥不服气的,我都觉得这话说得没啥毛病。
小屌丝:鱼哥,小姐姐说谁的速度快,就跟谁YYSX。
小鱼:那…这… 我赞同,我也表示不服。

看样子,小姐姐是动力的源头!

2、Numba

关于Numba的详细文档,点击Numba传送门即被可传送。
但是文档归文档,我们还是要简单的说一下Numba。

2.1 简介

numba 是一款可以将 python 函数编译为机器代码的JIT编译器,经过 numba 编译的python 代码(仅限数组运算),其运行速度可以接近 C 或 FORTRAN 语言。

小屌丝:看样子很厉害的哦,那使用起来,是不是很难呢?
小鱼:不难不难,到底有多容易,请往下看:

三不要:

  • 不需要替换Python解析器
  • 不需要单独编译
  • 不需要安装C/C++编译器

一需要:

  • 将 Numba 提供的装饰器放在 Python 函数上面就行

小屌丝:哎哟~总结的还挺到位。
小鱼:没事别说话,打断我思路了都!!

2.2 安装

在撸码前,需要确认,是否已经有numba这个库,
如果没有的话,那我们回想一下,有几种方法呢???

不管哪种方法,能安装上就是可行的。
在这里,小鱼就直接举例单独安装:

pip install numba

详细可参考:
Python3:我低调的只用一行代码,就导入Python所有库!》;
Python3,选择Python自动安装第三方库,从此跟pip说拜拜!!

2.3 代码实例

安装完numba库,那就直接上代码,展示一下速度…

看看能不能比我们的苏神跑的快!

实例一
我们看看调用jit的样子

# -*- coding:utf-8 -*-
# @Time   : 2021-08-08
# @Author : carl_DJ

from numba import jit
import random

# 调用jit装饰器
@jit(nopython=True)
def mot_pi(nsamples):
    acc =0
    for i in range(nsamples):
        x = random.random()
        y = random.random()
        if (x ** 2 + y ** 2) <1.0 :
            acc +=1
    return 8.0 * acc /nsamples

实例二
Numba 是专为科学计算而设计的,在与 NumPy 一起使用时,Numba 会为不同的数组数据类型生成专门的代码,以优化性能为主,
上代码

# -*- coding:utf-8 -*-
# @Time   : 2021-08-08
# @Author : carl_DJ

@numba.jit(nopython=True, parallel=True)
def logistic_regress(X, Y, w, iterations):
    for i in range(iterations):
        w -= np.dot(((1.0 /
              (1.0 + np.exp(-Y * np.dot(X, w)))
              - 1.0) * Y), X)
    return w

小屌丝:这个…我看不懂…
小鱼:看不懂啊,没关系,毕竟不是每个人都对科学计算有兴趣。
小屌丝:你这是在侮(xiu)辱我!!!
小鱼:你不配~ ~

如果大家看不懂这个实例,没事没事,别灰心,
接下来,我们就来搞个大一点的事情。

3、 代码实战

上面的代码,就是一个热身了~ ~
接下来,我们就用正儿八经的例子,看看Numba的运行速度有多快。

有了苏神的速度,还担心妹子不跟咱YYXS吗!!


举个例子
我们使用和不使用Numba,来找出1000个W以内所有的素数。

3.1 不使用Numba

我们不使用Numba,来看看花费多长时间。
上代码

# -*- coding:utf-8 -*-
# @Time   : 2021-08-08
# @Author : carl_DJ

import math
import time

def is_prime(num):
    if num == 2:
        return True
    if num <= 1 or not num % 2:
        return False
    for div in range(3, int(math.sqrt(num) + 1), 2):
        if not num % div:
            return False
    return True

def run_program(N):
    total = 0
    for i in range(N):
        if is_prime(i):
            total += 1
    return total


if __name__ == "__main__":
    N = 10000000
    start = time.time()
    total = run_program(N)
    end = time.time()
    print(f"1000W以内所有的素数是: {total}")
    print(f"耗时: {end - start}s")
    

运行结果

1000W以内所有的素数是: 664579
耗时: 245.93426966667175s

小屌丝:好吧,这运行速度,确实有点…
小鱼:别灰心啊,我们不是还有Numba吗。

3.2 使用Numba

我们使用Numba,看看花费多长时间。
上代码

# -*- coding:utf-8 -*-
# @Time   : 2021-08-08
# @Author : carl_DJ

import math
import time
from numba import njit

# @njit 相当于 @jit(nopython=True) 
@njit
def is_prime(num):
    if num == 2:
        return True
    if num <= 1 or not num % 2:
        return False
    for div in range(3, int(math.sqrt(num) + 1), 2):
        if not num % div:
            return False
    return True

# #普通循环计算,
# @njit
# def run_program(N):
#     total = 0
#     #普通range循环处理
#     for i in range(N):
#         if is_prime(i):
#             total += 1
#     return total

#使用Numba的prange来进行并发循环计算
@njit(parallel = True)
def run_program(N):
    total = 0
    #使用Numba提供的prange参数来进行并行计算
    for i in prange(N):
        if is_prime(i):
            total += 1
    return total


if __name__ == "__main__":
    N = 10000000
    start = time.time()
    total = run_program(N)
    end = time.time()
    print(f"1000W以内所有的素数是: {total}")
    print(f"耗时: {end - start}s")
    

运行结果

  • 未使用Numba的prange运行结果,如下:
1000W以内所有的素数是: 664579
耗时: 11.453454494476318s
  • 使用Numba的prange运行结果,如下:
total prime num is 664579
cost 5.30582857131958s

小屌丝:我的天啊, 这么神奇吗~
小鱼:必须的。
小屌丝:鱼哥,鱼哥,它是怎么做到的??
小鱼:嗯,我们来看看官方文档怎么解释的。

官方文档解释:
它读取装饰函数的 Python 字节码,并将其与有关函数输入参数类型的信息结合起来,分析和优化代码,最后使用编译器库(LLVM)针对你的 CPU 生成量身定制的机器代码。每次调用函数时,都会使用此编译版本

小屌丝:原来如此…看来我今晚和小姐姐YYSX 是有戏了。
小鱼:就这点出息了!!!

4、总结

虽然Python是动态语言,有全局解释器锁,比其他静态语言要慢,
但是,通过今天小鱼分享的Numba,是不是把你心中那一团火又燃烧了。
说归说,闹归闹,官方文档最重要!
所以,关于更多的Numba的知识,还请异步到官方文档
倒数三个数,开始上链接,宝宝们准备好。
3
2
1

官网文档http://numba.pydata.org/numba-doc/latest/index.html

以上是关于Python3:只用一个装饰器,就让python的运行速度提升200倍!!的主要内容,如果未能解决你的问题,请参考以下文章

python3之装饰器

python3 装饰器

python3 装饰器应用举例

python3-装饰器

python3 装饰器

python3--装饰器