百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

加快Python运行时速度的10种技巧

itomcoil 2024-12-07 13:24 32 浏览

将好的写作风格和不好的写作风格与代码运行时进行比较

Python是一种脚本语言。 与C / C ++之类的编译语言相比,Python在效率和性能上有一些缺点。 但是,我们可以使用一些技术来提高Python代码的效率。 在本文中,我将向您展示我通常在工作中使用的加速技术。

测试环境是Python 3.7,macOS 10.14.6和2.3 GHz Intel Core i5。

0.优化原理

在深入探讨代码优化的细节之前,我们需要了解一些代码优化的基本原理。

· 确保代码可以首先正常工作。 因为快速制作正确的程序要比制作快速的程序容易得多。

· 权衡优化成本。 优化要付出代价。 例如,更少的运行时通常需要更多的空间使用,或者更少的运行时通常需要更多的运行时间。

· 优化不能牺牲代码的可读性。

1. Python中正确的数据类型用法

1.1用set替换list以检查元素是否在序列中

根据Python的时间复杂度,list的s操作中x的平均情况为O(n)。 另一方面,集合的s操作中x的平均情况为O(1)。

1.2使用defaultdict初始化字典

我们应该使用defaultdict进行初始化。

2.用生成器表达式替换列表推导

# Bad: 447ms
nums_sum_list_comprehension = sum([num**2 for num in range(1000000)])
# Good: 300
msnums_sum_generator_expression = sum((num**2 for num in range(1000000)))

生成器表达式的另一个好处是,我们无需迭代就可以在不将整个列表对象构建和保存在内存中的情况下获得结果。 换句话说,生成器表达式可以节省内存使用量。

import sys
# Bad
nums_squared_list = [num**2 for num in range(1000000)]
print(sys.getsizeof(nums_squared_list)) 
# 87632
# Good
nums_squared_generator = (num**2 for num in range(1000000))
print(sys.getsizeof(nums_squared_generator)) 
# 128

3.用局部变量替换全局变量

我们应该将全局变量放入函数中。 局部变量比全局变量快。

4.避免点操作

4.1避免函数访问

每次我们使用。 要访问该函数,它将触发特定的方法,例如__getattribute __()和__getattr __()。 这些方法将使用字典操作,这将导致时间成本。 我们可以使用从xx导入xx来消除此类费用。

根据技术3,我们还可以将全局函数分配给局部函数。

此外,我们可以将list.append()方法分配给本地函数。

4.2避免类属性访问

访问self._value的速度比访问局部变量的速度慢。 我们可以将class属性分配给局部变量以加快运行时间。

5.避免不必要的抽象

当使用其他处理层(例如装饰器,属性访问,描述符)包装代码时,这会使代码变慢。 在大多数情况下,有必要重新考虑是否有必要使用这些层。 一些C / C ++程序员可能会遵循使用getter / setter函数访问属性的编码风格。 但是我们可以使用更简单的写作风格。

6.避免数据重复

6.1避免无意义的数据复制

value_list是没有意义的。

6.2更改值时避免使用temp变量

不需要临时变量。

6.3连接字符串时用join()替换+

当使用a + b连接字符串时,Python将申请内存空间,并将a和b分别复制到新应用的内存空间。 这是因为Python中的字符串数据类型是不可变的对象。 如果串联n个字符串,它将生成n-1个中间结果,并且每个中间结果都将应用于内存空间并复制新的字符串。

另一方面,join()将节省时间。 它将首先计算需要应用的总内存空间,然后一次申请所需的内存,然后将每个字符串元素复制到内存中。

7.利用if语句的短路评估

Python使用短路技术来加快对真值的评估。 如果第一个语句为假,则整个事情必须为假,因此它将返回该值。 否则,如果第一个值为true,则检查第二个值并返回该值。

因此,为了节省运行时间,我们可以遵循以下规则:

· if a and b:变量a应该具有很高的False概率,因此Python不会计算b。

· if a or b:变量a应该具有较高的True概率,因此Python不会计算b。

8.循环优化

8.1 for

for循环比while循环快。

8.2用隐式for循环替换显式for循环

8.3减少内部for循环的计算

我们将sqrt(x)从内部for循环移动到外部for循环。

9.使用numba.jit

Numba可以将Python函数JIT编译为机器代码以执行,从而大大提高了代码速度。 有关numba的更多信息,请参见主页。

我们使用上面的示例。

我们将sqrt(x)从内部for循环移动到外部for循环。

10.使用cProfile查找时间成本函数

cProfile将输出每个函数的时间使用情况。 因此我们可以找到时间成本函数。

通过分类视图查看我在Medium上的其他帖子!GitHub:BrambleXuLinkedIn:Xu Liang博客:BrambleXu

参考

· https://wiki.python.org/moin/PythonSpeed/PerformanceTips

· https://realpython.com/introduction-to-python-generators/#building-generators-with-generator-expressions

· 编写可靠的Python Code 的91条建议

· Python Cookbook,第三版

· https://zhuanlan.zhihu.com/p/143052860

· https://pybit.es/faster-python.html

(本文翻译自Xu LIANG的文章《10 Techniques to Speed Up Python Runtime》,参考:https://towardsdatascience.com/10-techniques-to-speed-up-python-runtime-95e213e925dc)

相关推荐

Excel新函数TEXTSPLIT太强大了,轻松搞定数据拆分!

我是【桃大喵学习记】,欢迎大家关注哟~,每天为你分享职场办公软件使用技巧干货!最近我把WPS软件升级到了版本号:12.1.0.15990的最新版本,最版本已经支持文本拆分函数TEXTSPLIT了,并...

Excel超强数据拆分函数TEXTSPLIT,从入门到精通!

我是【桃大喵学习记】,欢迎大家关注哟~,每天为你分享职场办公软件使用技巧干货!今天跟大家分享的是Excel超强数据拆分函数TEXTSPLIT,带你从入门到精通!TEXTSPLIT函数真是太强大了,轻松...

看完就会用的C++17特性总结(c++11常用新特性)

作者:taoklin,腾讯WXG后台开发一、简单特性1.namespace嵌套C++17使我们可以更加简洁使用命名空间:2.std::variant升级版的C语言Union在C++17之前,通...

plsql字符串分割浅谈(plsql字符集设置)

工作之中遇到的小问题,在此抛出问题,并给出解决方法。一方面是为了给自己留下深刻印象,另一方面给遇到相似问题的同学一个解决思路。如若其中有写的不好或者不对的地方也请不加不吝赐教,集思广益,共同进步。遇到...

javascript如何分割字符串(javascript切割字符串)

javascript如何分割字符串在JavaScript中,您可以使用字符串的`split()`方法来将一个字符串分割成一个数组。`split()`方法接收一个参数,这个参数指定了分割字符串的方式。如...

TextSplit函数的使用方法(入门+进阶+高级共八种用法10个公式)

在Excel和WPS新增的几十个函数中,如果按实用性+功能性排名,textsplit排第二,无函数敢排第一。因为它不仅使用简单,而且解决了以前用超复杂公式才能搞定的难题。今天小编用10个公式,让你彻底...

Python字符串split()方法使用技巧

在Python中,字符串操作可谓是基础且关键的技能,而今天咱们要重点攻克的“堡垒”——split()方法,它能将看似浑然一体的字符串,按照我们的需求进行拆分,极大地便利了数据处理与文本解析工作。基本语...

go语言中字符串常用的系统函数(golang 字符串)

最近由于工作比较忙,视频有段时间没有更新了,在这里跟大家说声抱歉了,我尽快抽些时间整理下视频今天就发一篇关于go语言的基础知识吧!我这我工作中用到的一些常用函数,汇总出来分享给大家,希望对...

无规律文本拆分,这些函数你得会(没有分隔符没规律数据拆分)

今天文章来源于表格学员训练营群内答疑,混合文本拆分。其实拆分不难,只要规则明确就好办。就怕规则不清晰,或者规则太多。那真是,Oh,mygod.如上图所示进行拆分,文字表达实在是有点难,所以小熊变身灵...

Python之文本解析:字符串格式化的逆操作?

引言前面的文章中,提到了关于Python中字符串中的相关操作,更多地涉及到了字符串的格式化,有些地方也称为字符串插值操作,本质上,就是把多个字符串拼接在一起,以固定的格式呈现。关于字符串的操作,其实还...

忘记【分列】吧,TEXTSPLIT拆分文本好用100倍

函数TEXTSPLIT的作用是:按分隔符将字符串拆分为行或列。仅ExcelM365版本可用。基本应用将A2单元格内容按逗号拆分。=TEXTSPLIT(A2,",")第二参数设置为逗号...

Excel365版本新函数TEXTSPLIT,专攻文本拆分

Excel中字符串的处理,拆分和合并是比较常见的需求。合并,当前最好用的函数非TEXTJOIN不可。拆分,Office365于2022年3月更新了一个专业函数:TEXTSPLIT语法参数:【...

站长在线Python精讲使用正则表达式的split()方法分割字符串详解

欢迎你来到站长在线的站长学堂学习Python知识,本文学习的是《在Python中使用正则表达式的split()方法分割字符串详解》。使用正则表达式分割字符串在Python中使用正则表达式的split(...

Java中字符串分割的方法(java字符串切割方法)

技术背景在Java编程中,经常需要对字符串进行分割操作,例如将一个包含多个信息的字符串按照特定的分隔符拆分成多个子字符串。常见的应用场景包括解析CSV文件、处理网络请求参数等。实现步骤1.使用Str...

因为一个函数strtok踩坑,我被老工程师无情嘲笑了

在用C/C++实现字符串切割中,strtok函数经常用到,其主要作用是按照给定的字符集分隔字符串,并返回各子字符串。但是实际上,可不止有strtok(),还有strtok、strtok_s、strto...