(译)让 python 代码一键转为 wasm
itomcoil 2024-12-31 12:24 13 浏览
自五年前开始创建Wasmer以来,我们一直致力于通过WebAssembly使更多的语言能够针对Web及其超越Web的应用。
其中最受欢迎的语言之一就是Python,并且虽然确实可以在WebAssembly中运行Python程序,但就性能而言,它并不理想。
以下是基准测试
今天,我们非常高兴地宣布推出py2wasm:这是一款将你的Python程序转化为WebAssembly的编译器(感谢Nuitka!),避免了解释器的开销,使其运行速度比基础解释器快3倍!
下面是你如何使用它的方式:
$ pip install py2wasm
$ py2wasm myprogram.py -o myprogram.wasm
$ wasmer run myprogram.wasm
注意: py2wasm需要在Python 3.11环境中运行. 你可以使用pyenv在你的系统中轻松设置Python 3.11:
pyenv install 3.11 && pyenv global 3.11.
基准测试
让我们尝试运行著名的pystone.py基准测试,来比较本机Python,常规WebAssembly和py2wasm。
注意:你可以在以下链接检查用于基准测试的代码:https://gist.github.com/syrusakbary/b318c97aaa8de6e8040fdd5d3995cb7c
Python深度分析运行可能的策略来优化WebAssembly中的Python工作负载。
如何加速Python在WebAssembly中的运行速度
有许多方法可以优化运行时速度:
- 使用可以编译成性能代码的Python子集
- 在Python内使用JIT
- 使用静态分析来优化生成的代码
将Python子集编译为Wasm
我们可能只想目标定向Python的子集,而不是支持Python的全部功能。这是因为并不需要支持所有的功能,并且我们可以承受一些捷径:
? 可以生成非常高效的代码
? 不支持全部的语法或模块
使用这种策略的最常见选择是:CPython,RPython(PyPy)和Codon。
CPython: 可以创造性能高效的模块,正常运行你的Python代码库。然而,我们希望允许从我们的程序创建完全独立的WebAssembly二进制文件,所以很遗憾Cython对于加速Wasm中的Python可执行文件是行不通的。
RPython: RPython将类型代码转化为C,然后使用正常的C编译器进行编译。对于RPython中的Python程序能够运行的程度,限制是非常严格的,比如字典需要被完全类型化,这严重限制了我们可以使用它的程序。
Codon: Codon将Python代码的一个子集转化为LLVM IR。Codon是最有前途也是提供最多提速(从10到100倍)的备选方案。然而,他们支持的Python子集还有许多缺失的特性,这阻止了在大部分Python代码中使用它。
Python JIT
另一种策略是在Python中使用JIT,这样当执行复杂计算时,热路径就会被编译为WebAssembly。
? 运行速度过快
? 需要预热
? 不容易支持Webassembly(但是可能)
最常见(如果不是最常见的)的方法就是PyPy。
PyPy是一种Python解释器,它可以比标准的CPython解释器以更快的速度执行你的Python程序。一旦涉及到复杂的计算,他会通过JIT (即时编译器) 把执行速度变得超快。运行一个JIT在WebAssembly是不容易的,但可能.
大约五年前,pypyjs.org项目通过创建一个新的针对Javascript/Asm.js(而不是x86_64或arm64/aarch64)的PyPy后端来显示这种可能性。
对于我们的案例,我们需要从输出Javascript代码便到Webassembly。
实现一个PyPy的Wasm后端是完全可能的,就像Pypy.js所证明的那样,但不幸的是,这并不是一件轻而易举的事情(这可能需要几周到一个月的工作时间)。
静态分析
最后一种策略我们可以尝试加快Python在WebAssembly中的执行速度是:静态分析。静态分析可以让我们提前分析/自动检测程序的类型,这样代码就可以转译成更高效的特殊形(通常是通过Python到C的转译)。
? 与任何Python代码和应用程序大部分兼容
? 只能提高1.5-3倍的速度
? 实现复杂性高(从静态分析器的角度看,有许多细微之处)
? 二进制文件较大
mypy & mypy-c: Mypy可能是最受欢迎的Python静态分析器。Mypy团队也创建了一个mypy-c,它获取了来自Mypy的所有类型信息,然后将Python代码转化为等价的C代码,性能更好。
mypy-c主要针对的是Python模块,这样可以在Python代码库旁边运行。然而,在我们的用例中,我们希望允许从我们的程序创建新的完全独立的WebAssembly二进制文件,所以不幸的是,mypy-c可能不能适用于我们的用例。
Nuitka: Nuitka通过将程序做的Python调用转化为C,使用内部的CPython API调用。它支持大多数Python程序,因为将Python代码转为对应的CPython调用。
在经过了对所有选项的深入分析后,我们意识到,通过Nuitka将Python运行在WebAssembly中可能是最快的选项。
使用Nuitka将Python编译为WebAssembly
当我们试着运行生成的Wasm文件时,发现另一个问题:由于Nuitka的翻译器是在一个64位的架构中执行的,但生成的代码是在一个32位的架构中运行的(WebAssembly),所以事情并没有按照预期地工作。
一旦我们修复了这两个问题,原型就完全工作了!万岁!
我们已经创建了一个PR尝试将更改推送到Nuitka的上游,欢迎在这里查看:https://github.com/Nuitka/Nuitka/pull/2814
?? 目前py2wasm 是使用Nuitka的一个分支,但是一旦更改被集成到上游,我们的目标是让py2wasm成为在Nuitka之上的一个独立层。
我们首先满足了自己的需求,因为我们想将Python执行速度提升到最大,这样我们可以将Python Django后端从Google Cloud移至 Wasmer Edge。
py2wasm让我们(以及许多其他国家)更接近在Edge上运行Python后端应用程序,提供了一种远优于当前Cloud Provider的经济高性能Hosting这些应用程序的替代方案。
未来路线图
在未来,我们计划将py2wasm发布为Wasmer的一个包,这样你只需要简单地执行以下命令来操作。敬请留意!
wasmer run py2wasm --dir=. -- myfile.py -o myfile.wasm
我们希望你喜欢这篇展示py2wasm的文章,我们已经迫不及待地想听到你在Hacker News和Github上的反馈了!
本文翻译自wasmer 官方的文章:https://wasmer.io/posts/py2wasm-a-python-to-wasm-compiler
感兴趣的可以读原文。
了解更多
作为一个 python 爱好者,我会经常性分享和翻译各种高质量的文章和博客,希望把好的内容带给大家,让读者可以高质量低成本的获取知识,降低走弯路的成本,这是我写技术文章的初衷,如果对我的内容感兴趣想了解更多技术知识可以关注我的技术专栏,更多有深度的内容都会更新到专栏。
相关推荐
- PS小技巧 调整命令,让人物肤色变得更加白皙 #后期修图
-
我们来看一下如何去将人物的皮肤变得更加的白皙。·首先选中图层,Ctrl键加J键复制一层。·打开这里的属性面板,选择快速操作删除背景,这样就会将人物进行单独的抠取。·接下来在上方去添加一个黑白调整图层,...
- 把人物肤色提亮的方法和技巧
-
PS后期调白肤色提亮照片的方法。一白遮百丑,所以对于Photoshop后期来说把人物肤色调白是一项非常重要的任务。就拿这张素材图片来说,这张素材图片人脸的肤色主要偏红、偏黄,也不够白皙,该怎样对它进行...
- 《Photoshop教程》把美女图片调成清爽色彩及润肤技巧
-
关注PS精品教程,每天不断更新~~室内人物图片一般会偏暗,人物脸部、肤色及背景会出现一些杂点。处理之前需要认真的给人物磨皮及美白,然后再整体润色。最终效果原图一、用修补工具及图章工具简单去除大一点的黑...
- PS后期对皮肤进行美白的技巧
-
PS后期进行皮肤美白的技巧。PS后期对皮肤进行美白的技巧:·打开素材图片之后直接复制原图。·接下来直接点击上方的图像,选择应用图像命令。·在通道这里直接选择红通道,混合这里直接选择柔光,然后点击确定。...
- 493 [PS调色]调模特通透肤色
-
效果对比:效果图吧:1、光位图:2、拍摄参数:·快门:160;光圈:8;ISO:1003、步骤分解图:用曲线调整图层调出基本色调。用可选颜色调整图层调整红色、黄色、白色和灰色4种颜色的混合比例。用色彩...
- 先选肤色再涂面部,卡戴珊的摄影师透露:为明星拍完照后怎么修图
-
据英国媒体12月17日报道,真人秀明星金·卡戴珊终于承认,她把女儿小北P进了家族的圣诞贺卡,怪不得粉丝们都表示这张贺卡照得非常失败。上周,这位39岁的女星遭到了一些粉丝针对这张照片的批评,她于当地时间...
- 如何在PS中运用曲线复制另一张照片的色调
-
怎样把另一张作品的外观感觉,套用到自己的照片上?单靠肉眼来猜,可能很不容易,而来自BenSecret的教学,关键是在PS使用了两个工具,让你可以准确比较两张照片的曝光、色调与饱和度,方便你调整及复制...
- PS在LAB模式下调出水嫩肤色的美女
-
本PS教程主要使用Photoshop使用LAB模式调出水嫩肤色的美女,教程调色比较独特。作者比较注重图片高光部分的颜色,增加质感及肤色调红润等都是在高光区域完成。尤其在Lab模式下,用高光选区调色后图...
- 在Photoshop图像后期处理中如何将人物皮肤处理得白皙通透
-
我们在人像后期处理中,需要将人物皮肤处理的白皙通透,处理方法很多,大多数都喜欢使用曲线、磨皮等进行调整,可以达到亮但是不透,最终效果往往不是很好,今天就教大家一种如何将任务皮肤处理得白皙通透,希望能帮...
- PS调色自学教程:宝宝照片快速调通透,简单实用!
-
PS调色自学教程:宝宝照片快速调通透。·首先复制图层,然后选择进入ACR滤镜,选择曲线锁定照片的亮部,也就高光位置,其他部位补亮一点,尤其是阴影的部位补亮多一些,让画面的层次均匀一点。·然后回到基本项...
- 【干货】如何利用PS进行人物美化
-
人物图像美化在Photoshop中非常常用,Photoshop作为一款功能强大的图像处理软件,不仅可以对人像进行基本的调色、美化和修复等处理,还可以改变人物的线条和幅度,如调整脸部器官和脸型的大小、调...
- 教大家一种可以快速把肤色处理均匀的方法@抖音短视频
-
快速把肤色处理均匀的方法。今天教大家一种可以快速把肤色处理均匀的方法。像这张照片整体肤色走紫红色,但是局部偏黄缘处理起来非常的麻烦。其实我们只需要新建空白图层,图层混合模式更改为颜色,再选择画笔工具把...
- PS调色教程 利用RAW调出干净通透的肤色
-
要么不发,要么干货。后期教程来噜~用RAW调出干净通透的肤色。这次终于不会原片比PS后好看了吧。如果你依然这么觉得,请不要残忍的告诉我这个事实,泪谢TAT)附送拍摄花絮,感谢各位的支持更多风格请关注m...
- photoshop后期皮肤变白的技巧
-
PS后期皮肤变白的技巧。1.PS后期让皮肤变白的方法有很多种,接下来教你一种非常简单容易上手的方法。2.打开素材图片之后,直接在小太极下拉框的位置添加一个纯色调整图层,颜色设置一个纯白色,点击...
- Photoshop调出人物的淡雅粉嫩肤色教程
-
本教程主要使用Photoshop调出人物的淡雅粉嫩肤色教程,最终的效果非常的通透迷人,下面让我们一起来学习.出自:86ps效果图:原图:1、打开原图复制一层。2、用Topaz滤镜磨皮(点此下载)。3、...
- 一周热门
- 最近发表
- 标签列表
-
- ps像素和厘米换算 (32)
- ps图案在哪里 (33)
- super().__init__ (33)
- python 获取日期 (34)
- 0xa (36)
- super().__init__()详解 (33)
- python安装包在哪里找 (33)
- linux查看python版本信息 (35)
- python怎么改成中文 (35)
- php文件怎么在浏览器运行 (33)
- eval在python中的意思 (33)
- python安装opencv库 (35)
- python div (34)
- sticky css (33)
- python中random.randint()函数 (34)
- python去掉字符串中的指定字符 (33)
- python入门经典100题 (34)
- anaconda安装路径 (34)
- yield和return的区别 (33)
- 1到10的阶乘之和是多少 (35)
- python安装sklearn库 (33)
- dom和bom区别 (33)
- js 替换指定位置的字符 (33)
- python判断元素是否存在 (33)
- sorted key (33)