百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

加快Python运行时速度的10种技巧

itomcoil 2024-12-07 13:24 43 浏览

将好的写作风格和不好的写作风格与代码运行时进行比较

Python是一种脚本语言。 与C / C ++之类的编译语言相比,Python在效率和性能上有一些缺点。 但是,我们可以使用一些技术来提高Python代码的效率。 在本文中,我将向您展示我通常在工作中使用的加速技术。

测试环境是Python 3.7,macOS 10.14.6和2.3 GHz Intel Core i5。

0.优化原理

在深入探讨代码优化的细节之前,我们需要了解一些代码优化的基本原理。

· 确保代码可以首先正常工作。 因为快速制作正确的程序要比制作快速的程序容易得多。

· 权衡优化成本。 优化要付出代价。 例如,更少的运行时通常需要更多的空间使用,或者更少的运行时通常需要更多的运行时间。

· 优化不能牺牲代码的可读性。

1. Python中正确的数据类型用法

1.1用set替换list以检查元素是否在序列中

根据Python的时间复杂度,list的s操作中x的平均情况为O(n)。 另一方面,集合的s操作中x的平均情况为O(1)。

1.2使用defaultdict初始化字典

我们应该使用defaultdict进行初始化。

2.用生成器表达式替换列表推导

# Bad: 447ms
nums_sum_list_comprehension = sum([num**2 for num in range(1000000)])
# Good: 300
msnums_sum_generator_expression = sum((num**2 for num in range(1000000)))

生成器表达式的另一个好处是,我们无需迭代就可以在不将整个列表对象构建和保存在内存中的情况下获得结果。 换句话说,生成器表达式可以节省内存使用量。

import sys
# Bad
nums_squared_list = [num**2 for num in range(1000000)]
print(sys.getsizeof(nums_squared_list)) 
# 87632
# Good
nums_squared_generator = (num**2 for num in range(1000000))
print(sys.getsizeof(nums_squared_generator)) 
# 128

3.用局部变量替换全局变量

我们应该将全局变量放入函数中。 局部变量比全局变量快。

4.避免点操作

4.1避免函数访问

每次我们使用。 要访问该函数,它将触发特定的方法,例如__getattribute __()和__getattr __()。 这些方法将使用字典操作,这将导致时间成本。 我们可以使用从xx导入xx来消除此类费用。

根据技术3,我们还可以将全局函数分配给局部函数。

此外,我们可以将list.append()方法分配给本地函数。

4.2避免类属性访问

访问self._value的速度比访问局部变量的速度慢。 我们可以将class属性分配给局部变量以加快运行时间。

5.避免不必要的抽象

当使用其他处理层(例如装饰器,属性访问,描述符)包装代码时,这会使代码变慢。 在大多数情况下,有必要重新考虑是否有必要使用这些层。 一些C / C ++程序员可能会遵循使用getter / setter函数访问属性的编码风格。 但是我们可以使用更简单的写作风格。

6.避免数据重复

6.1避免无意义的数据复制

value_list是没有意义的。

6.2更改值时避免使用temp变量

不需要临时变量。

6.3连接字符串时用join()替换+

当使用a + b连接字符串时,Python将申请内存空间,并将a和b分别复制到新应用的内存空间。 这是因为Python中的字符串数据类型是不可变的对象。 如果串联n个字符串,它将生成n-1个中间结果,并且每个中间结果都将应用于内存空间并复制新的字符串。

另一方面,join()将节省时间。 它将首先计算需要应用的总内存空间,然后一次申请所需的内存,然后将每个字符串元素复制到内存中。

7.利用if语句的短路评估

Python使用短路技术来加快对真值的评估。 如果第一个语句为假,则整个事情必须为假,因此它将返回该值。 否则,如果第一个值为true,则检查第二个值并返回该值。

因此,为了节省运行时间,我们可以遵循以下规则:

· if a and b:变量a应该具有很高的False概率,因此Python不会计算b。

· if a or b:变量a应该具有较高的True概率,因此Python不会计算b。

8.循环优化

8.1 for

for循环比while循环快。

8.2用隐式for循环替换显式for循环

8.3减少内部for循环的计算

我们将sqrt(x)从内部for循环移动到外部for循环。

9.使用numba.jit

Numba可以将Python函数JIT编译为机器代码以执行,从而大大提高了代码速度。 有关numba的更多信息,请参见主页。

我们使用上面的示例。

我们将sqrt(x)从内部for循环移动到外部for循环。

10.使用cProfile查找时间成本函数

cProfile将输出每个函数的时间使用情况。 因此我们可以找到时间成本函数。

通过分类视图查看我在Medium上的其他帖子!GitHub:BrambleXuLinkedIn:Xu Liang博客:BrambleXu

参考

· https://wiki.python.org/moin/PythonSpeed/PerformanceTips

· https://realpython.com/introduction-to-python-generators/#building-generators-with-generator-expressions

· 编写可靠的Python Code 的91条建议

· Python Cookbook,第三版

· https://zhuanlan.zhihu.com/p/143052860

· https://pybit.es/faster-python.html

(本文翻译自Xu LIANG的文章《10 Techniques to Speed Up Python Runtime》,参考:https://towardsdatascience.com/10-techniques-to-speed-up-python-runtime-95e213e925dc)

相关推荐

Python Qt GUI设计:将UI文件转换Python文件三种妙招(基础篇—2)

在开始本文之前提醒各位朋友,Python记得安装PyQt5库文件,Python语言功能很强,但是Python自带的GUI开发库Tkinter功能很弱,难以开发出专业的GUI。好在Python语言的开放...

Connect 2.0来了,还有Nuke和Maya新集成

ftrackConnect2.0现在可以下载了--重新设计的桌面应用程序,使用户能够将ftrackStudio与创意应用程序集成,发布资产等。这个新版本的发布中还有两个Nuke和Maya新集成,...

Magicgui:不会GUI编程也能轻松构建Python GUI应用

什么是MagicguiMagicgui是一个Python库,它允许开发者仅凭简单的类型注解就能快速构建图形用户界面(GUI)应用程序。这个库基于Napari项目,利用了Python的强大类型系统,使得...

Python入坑系列:桌面GUI开发之Pyside6

阅读本章之后,你可以掌握这些内容:Pyside6的SignalsandSlots、Envents的作用,如何使用?PySide6的Window、DialogsandAlerts、Widgets...

Python入坑系列-一起认识Pyside6 designer可拖拽桌面GUI

通过本文章,你可以了解一下内容:如何安装和使用Pyside6designerdesigner有哪些的特性通过designer如何转成python代码以前以为Pyside6designer需要在下载...

pyside2的基础界面(pyside2显示图片)

今天我们来学习pyside2的基础界面没有安装过pyside2的小伙伴可以看主页代码效果...

Python GUI开发:打包PySide2应用(python 打包pyc)

之前的文章我们介绍了怎么使用PySide2来开发一个简单PythonGUI应用。这次我们来将上次完成的代码打包。我们使用pyinstaller。注意,pyinstaller默认会将所有安装的pack...

使用PySide2做窗体,到底是怎么个事?看这个能不能搞懂

PySide2是Qt框架的Python绑定,允许你使用Python创建功能强大的跨平台GUI应用程序。PySide2的基本使用方法:安装PySide2pipinstallPy...

pycharm中conda解释器无法配置(pycharm安装的解释器不能用)

之前用的好好的pycharm正常配置解释器突然不能用了?可以显示有这个环境然后确认后可以conda正在配置解释器,但是进度条结束后还是不成功!!试过了pycharm重启,pycharm重装,anaco...

Conda使用指南:从基础操作到Llama-Factory大模型微调环境搭建

Conda虚拟环境在Linux下的全面使用指南:从基础操作到Llama-Factory大模型微调环境搭建在当今的AI开发与数据分析领域,conda虚拟环境已成为Linux系统下管理项目依赖的标配工具。...

Python操作系统资源管理与监控(python调用资源管理器)

在现代计算环境中,对操作系统资源的有效管理和监控是确保应用程序性能和系统稳定性的关键。Python凭借其丰富的标准库和第三方扩展,提供了强大的工具来实现这一目标。本文将探讨Python在操作系统资源管...

本地部署开源版Manus+DeepSeek创建自己的AI智能体

1、下载安装Anaconda,设置conda环境变量,并使用conda创建python3.12虚拟环境。2、从OpenManus仓库下载代码,并安装需要的依赖。3、使用Ollama加载本地DeepSe...

一文教会你,搭建AI模型训练与微调环境,包学会的!

一、硬件要求显卡配置:需要Nvidia显卡,至少配备8G显存,且专用显存与共享显存之和需大于20G。二、环境搭建步骤1.设置文件存储路径非系统盘存储:建议将非安装版的环境文件均存放在非系统盘(如E盘...

使用scikit-learn为PyTorch 模型进行超参数网格搜索

scikit-learn是Python中最好的机器学习库,而PyTorch又为我们构建模型提供了方便的操作,能否将它们的优点整合起来呢?在本文中,我们将介绍如何使用scikit-learn中的网格搜...

如何Keras自动编码器给极端罕见事件分类

全文共7940字,预计学习时长30分钟或更长本文将以一家造纸厂的生产为例,介绍如何使用自动编码器构建罕见事件分类器。现实生活中罕见事件的数据集:背景1.什么是极端罕见事件?在罕见事件问题中,数据集是...