Redian新闻
>
Julia 快到离谱?不,它并没有比 Python 快 340000,000,000 倍

Julia 快到离谱?不,它并没有比 Python 快 340000,000,000 倍

公众号新闻

作者 | Logan Kilpatrick
译者 | 红泥
策划 | 刘燕

Julia 运行速度很快,但从性能表现上看,也没快的那么离谱。

几周前,当我在 YouTube 上刷编程趣闻时,无意中看到一个视频,它展示了 C++ 和 Python 从 0 加到 10 亿时的性能差异。不出所料,Python 在执行此操作过程中不是非常快,耗时 1m52s,C++ 耗时 2.4s,但我很想看看 Julia 执行效果是什么样子。

接着,我开始写一些简单的 Julia 代码,来运行这个基准测试,以此看看 Julia 是否比 C++ 还快,是否能碾压 Python 很多(虽然这不是一个专业性的对比实验,但仍然可以作为一个有趣的参考指标)。

我使用的 Python 代码跟 YouTube 视频中的几乎一样,把它运行起来也比较简单:


>>> import time>>> def count():... start = time.perf_counter()... n = 0... while n < 1000000000:... n += 1... print(f"Completed Execution in {time.perf_counter() - start} seconds")... >>> count()Completed Execution in 44.67635616599998 seconds

如您所见,我使用 Python 代码,整个计算过程花了惊人的 44.67 秒,这个结果比视频中的运行时间快了很多,但这可能是由于很多其它原因导致的,比如我电脑 CPU 等硬件差异。

实现相同功能的 Julia 代码,与 Python 的代码比较相似,只需做一些小的改动。


julia> function count() n = 0 while n < 1000000000 n +=1 end endjulia> using BenchmarkToolsjulia> @benchmark count()BenchmarkTools.Trial: 10000 samples with 1000 evaluations. Range (minmax): 1.167 ns … 10.584 ns ┊ GC (minmax): 0.00% … 0.00% Time (median): 1.250 ns ┊ GC (median): 0.00% Time (mean ± σ): 1.261 ns ± 0.222 ns ┊ GC (mean ± σ): 0.00% ± 0.00%

我相信,你肯定也跟我一样,刚开始也为这个结果大吃了一惊。这段 Julia 代码只花了 1.25 纳秒。这样的结果好的令人难以置信,它比 Python 代码快了近 34,000,000,000 倍。

一个小小的区别是,这个函数目前还没有返回 n 的值。但是即便我们加上返回值,整体运行时间也基本维持在 2.0 纳秒左右。

另外,如果在 print 语句中打印出结果,这个时间花费接近~ 33.084 微秒,这明显影响很小。


1 evaluation. Range (minmax): 25.333 μs … 79.291 μsGC (minmax): 0.00% … 0.00% Time (median): 33.084 μsGC (median): 0.00% Time (mean ± σ): 37.645 μs ± 9.828 μsGC (mean ± σ): 0.00% ± 0.00%

我知道这样难以置信的效果应该不是真实的,之后我没有去 Julia slack 而是直接到 Julia 社区寻求帮助,很快我便得到了一些有效反馈,Mosè Giordano 建议使用 @code_llvm 来分析下 LLVM,看看在底层创建了什么(LLVM 是 Julia 的编译器)。

确实,之后 Julia 编译器在这个例子中发挥了关键性的作用:


julia> @code_llvm count(); @ REPL[7]:1 within `count`define i64 @julia_count_868() #0 {top:; @ REPL[7]:6 within `count` ret i64 1000000000}

如您所见,编译器完全移除了循环,并选择立即返回 10 亿的值。作为一个对编译器基本一无所知的人(我也期望我能有更多的了解),这种操作着实让我大吃一惊。我写这篇文章的目的也是为了防止其他人在自己的代码中发现类似的误导性基准。

在这种情况下,该函数没有足够的计算复杂度,无法与 Python 版本进行充分比较。

如果想了解 Julia 的真实速度性能,Mosè有一个不错的帖子,它对 Julia 的速度神话提出了挑战,我强烈建议你去看看:

1 Julia 如何做基准测试

在 Julia 社区,基准测试是个热门话题,因此有相当多的文档资源。我强烈建议您通读 BenchmarkTools.j1 文档,有很多实践案例可以查看:

https://juliaci.github.io/BenchmarkTools.jl/stable/manual/

最简单的,你可以使用 @benchmark 宏对任何函数进行基准测试(提示——基准测试会“打印”代码,如下所示,可能会导致很多东西打印在你的屏幕上):


julia> @benchmark print("Hello world") Range (minmax): 25.125 μs … 87.625 μs ┊ GC (minmax): 0.00% … 0.00% Time (median): 32.792 μs ┊ GC (median): 0.00% Time (mean ± σ): 37.638 μs ± 10.026 μs ┊ GC (mean ± σ): 0.00% ± 0.00% ▁▃▆██▆▄▂ ▁ ▂▅▇█████████▇▆▅▅▅▄▄▃▃▂▂▂▂▂▂▃▃▃▅▆▄▄▅▄▃▂▂▂▃▃▄▆█▇▆▅▃▃▃▄▃▂▂▂▁▁▁ ▃ 25.1 μs Histogram: frequency by time 59.6 μs < Memory estimate: 48 bytes, allocs estimate: 2.

你也许会对 Valentin Churavy 写的关于 Julia 性能的 notebook 程序感兴趣,可以通过它更好的理解 Julia 性能。Valentin 是 Julia 的长期贡献者,在这个领域有很大的权威性。

Valentin 是一个有智慧的人,这里分享下他在 Julia slack 说过的一段话:

基准测试是困难的,你首先需要确保度量的是真实的东西™
2 使用 Julia 可以带来哪些方面的性能改善呢?

虽然关于 Julia 的性能有很多夸大和错误引导的文章,但使用 Julia,比起 Python 和 Matlab 等语言,在多数情况下我们还是能获得比较大的性能提升。

2022 年 4 月,SciML 团队在 Julia 博客上发表了一篇关于在 Julia 中使用小型网络进行科学机器学习的文章。他们将其性能与 PyTorch 的等效性能进行了比较,并在此基础上获得了 5 倍的速度提高。虽然 PyTorch 通常是同类中最好的工具,但该文章强调,当您想将科学计算结合到您的深度学习(DL)工作流程中时,Julia 在深度学习(DL)领域确实具有较好的效果。你可以在这里阅读全文:

我们来看几个其他的例子:

图片来自 julialang.org

上图标识了几种基本操作及其在每种语言中的速度。该基准测试位于于:

https://julialang.org/benchmarks/,你可以去了解更多的细节。

Julia 提高速度性能的另一个地方是读取 CSV(大多数数据科学家应该都不愿意承认他们要频繁做这个操作)。下面这篇文章写的非常好,它描述了 Julia 和 CSV.jl 是如何做到比 Python 和 R 快 10-20 倍的。

另一个案例来源于 Pfizer(辉瑞) 公司的团队,他们使用 Julia 将他们的一些模拟速度提高了 175 倍:

为了避免重复造轮子,我想向大家推荐最后一篇关于 Julia 速度性能的文章。在下面这篇文章中,作者介绍了用 Julia 编写的一些基本算法,并将它们的性能与其他语言进行了比较:

如果您有 Julia 代码方面的疑问想要获得帮助,可以到 https://discourse.julialang.org 的“General Usage”主题、“Performance”子类别下发帖:https://discourse.julialang.org/c/usage/perf

英文原文地址

https://juliazoid.com/no-julia-is-not-34-000-000-000-times-faster-than-python-f63e956313d7

声明:本文为 InfoQ 翻译,未经许可禁止转载。

点击底部阅读原文访问 InfoQ 官网,获取更多精彩内容!

今日好文推荐

Flink创始团队二次创业再被收购,Kafka母公司与阿里“遭遇战”已经开始

中文编程不如英文香?今年诞生的这些国产编程语言表示不服

字节回应员工因没年终奖与 HR 互殴;乐视实行 4 天半工作制:不降薪无 996,研发可准点下班;亚马逊发全员信,拟裁员 1.8 万人|Q 资讯

2022年全球程序员收入报告出炉:首席工程师最高年薪超700万,字节跳动成国内唯一上榜公司

微信扫码关注该文公众号作者

戳这里提交新闻线索和高质量文章给我们。
相关阅读
清华大学终于把Python整理成了漫画书…R语言工作者入门python,你需要实际解决这三个问题Python如何修改美女桌面仅剩一席|三周掌握Python, SQL, R, Excel, VBA等必备工具不会做饭的人能有多离谱?不行咱还是点外卖吧猫妹(5)Python的魔术方法小结“可在浏览器端运行的Python”再发力家里钻进乱贼,搅得天翻地覆Out with the old, in with the new. JuniorCoach is here for you使用 Beautiful Soup 在 Python 中抓取网页阿瑟新剧大火!然而学Python的看了都在骂人10 个杀手级的 Python 自动化脚本!再进大公司,英年早逝的老板import 一个“太极”库,让 Python 代码提速 100 倍!在加国金融圈,SQL比Python更靠谱3D打印销声匿迹了?不,它可能颠覆传统工业国殇日看《西线无战事》硬核有奖问卷|你选择 JavaScript 还是 Python?下一个热门语言由你定义速领!清华大学出品《Python教学书》!零基础3天就能速成阿瑟新剧大火!然而学Python的留学生看了都在骂人神秘的古老之光:埃及阿布神庙ChatGPT竟写出毁灭人类计划书,还给出相应Python代码,网友:AI正在指数级发展豪赚5W!居家做Python私活,真香!ChatGPT发明「史莱姆语」,词汇语法规则全都有,还配了「史翻英」Python代码3天速成!这份清华大学出品的《Python漫画书》领到就是赚到!12月电费贵到离谱?网友晒账单,一个月超千元!官方回应:没涨价!上海辟谣平台也发文谷歌中国大裁员赔偿 N+9?不,结果比这更离谱。。。速领!清华大学出品《Python漫画教学书》!零基础3天就能速成Arduino宣布支持MicroPythonJulia 快到离谱?不,它并没有比Python快340000,000,000倍两天赚1w,用Python接私活的一些技巧这篇罕见的符号编程论文,让你在Jupyter Notebook中手绘草图并变成代码在 VS Code 和 Codium 中编写 Python 程序 | Linux 中国狂揽两千星,速度百倍提升,高性能Python编译器Codon开源
logo
联系我们隐私协议©2024 redian.news
Redian新闻
Redian.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Redian.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。