Redian新闻
>
Trino Summit 2022:Trino的现状和未来

Trino Summit 2022:Trino的现状和未来

科技

本文首发微信公众号:飞总聊IT


Trino Summit 2022今年11月在San Francisco召开。我今年挺想现场去参加这个会议的,但是公司今年砍掉了所有travel的budget,所以就没去。


Keynote和其他相关视频在11月底放出来了,我拖延了一段时间才看,具体视频在这里:https://youtu.be/mUq_h3oArp4


我不知道国内网站有没有,没有的话,可能国内朋友要看就要自己想办法了。


Keynote里提到Trino的发展主要是这几件事情。


第一,新增了一个Merge语句:

这个语句方便把一个表 merge到另外一个表里面,比起写join来实现要简单很多。主要的用途是把增量表合并到基础表上面。


第二是增加了支持半结构化数据Json格式的函数:

第三是增加了table函数:

这个函数最大的作用是在原来SQL语法能够用到table的地方都可以用这个函数产生的结果去取代。很方便可以和其他的系统进行整合。


最后是一些fault tolerant execution的东西:

具体细节可以参考我之前写的这篇文章:TProject Tardigrade:Trino(Presto)到底想干什么?这篇文章里面的内容就是Fault Tolerant execution相关的东西。


当然Trino还有很多其他的提高,一张PPT概括了。


Trino 2023需要做的事情最重要的大概就是这个了:

具体来说,首先是下一代的列式处理引擎,里面当然会用到各种各样新的技术了。


其次是join和aggregation的hash table实现,我虽然不清楚大概要做什么,我猜是想学习ClickHouse。毕竟ClickHouse的Hash Table的实现可谓是无微不至,什么样的东西都要优化,有的时候都不知道是不是优化过头了。


最后,还有这样一些东西:

看起来都挺熟悉的,connector,query tracing,performance improvements 等等等等。


总之2022年Trino做了很多事情,2023年Trino还要做很多事情,好日子望不到边啊。


那么问题来了,你要问我Trino的2022年,做的这些事情,放到Keynotes里面来说,到底是不是真的值得大夸特夸呢?


讲真,这些东西有的是早就应该做的,但是拖到现在才做,有的呢,我都不知道它这样做到底是正确的道路,还是歪门邪道。毕竟,可能时间才能告诉我们对还是错。


飞总毕竟年纪大了,没有前几年犀利尖锐了,有些话只能说得点到即止了。谁要是看不明白,那肯定不是我的锅,是看不明的人自己的锅。


至于明年要做的事情,我倒是觉得Trino真的应该认认真真的考虑用C++了啊,不然时不我待,继续在Java上面绑死日子不好过。


考虑一下Spark都开始在商业版里推C++的向量化引擎了,老东家Facebook也想要用C++一统天下了,这还不提到日程上来,黄花菜就要凉凉了啊。


当然Starburst公司是要做商业版的,Trino社区是要做开源免费的,到底什么样的功能应该做进商业版什么样的功能应该在免费版本里面,这个问题,我觉得Starburst可能真的没有考虑的很清楚。


起码在开源方面Starburst显然没有Databricks有原则。当然对Databricks来说,成也开源,败也开源,成败都是开源。原则可以在今时今日是正确的,可以在明年是错误的。这一盘大旗,确实不好下。




微信扫码关注该文公众号作者

戳这里提交新闻线索和高质量文章给我们。
相关阅读
2023招聘季 | EY (US) 科技咨询开启2024 Summer Internship展望2023 | 关于城市的现状与未来,我们有话说九大投行|Citigroup 2023 Summer Analyst实习生招聘正在进行中!天赋“易昺(bǐng)”,创造历史!WAVE SUMMIT+2022大会回顾,NVIDIA极致性能赋能飞桨落地千行百业2023招聘季 | Jefferies (US) 金融 Summer Internship已开放!2023招聘季 | Moelis (US) 已开放 Summer Internship!大波士顿房地产市场现状和预测Bain大中华区启动2023暑期实习项目(Summer Associate) 网申!【外所】吉布森律所,2023 Summer Internship,可留用[摄影] 【美丽的东西不需太要强】Leica Summaron-M 28mm f/5.6 开箱+样片校招 | 贝恩公司大中华区2023暑期实习项目(Summer Associate) 网申启动!2025-2027届可申!KPMG (US) 开启2024 Summer Internship精神炼金术 信仰的颠覆(六十一)2023招聘季|Lazard (US) 已开放Summer Associate岗位!【Biotech Community】AI药物研发的现状与挑战三女儿与父亲同行佛州(杰克逊维尔)2023招聘季 | 加国五大行CIBC(US) Summer Analyst已开放申请!【MIT CEO Energy Community】企业碳管理的过去、现在、和未来駕長車縱橫五萬邁,巡看美國好河山(2)走资派特色党还是为工农服务吗2024招聘季 | Credit Sussie (US) 金融Summer Internship已开放!2023招聘季 | Ebay (US) Data岗Summer Internship已开放!Embedded AI Summit 2022 发布丨亮点抢先看DBC职梦学员已收到HSBC (HK) 2023 Summer Internship终面邀请!英国秋招 | Lazard开放2023 Summer Internship岗位投递通道!母亲在养老院去世之后2023招聘季丨顶级保险金融公司AIG(US)已开放Summer Internship!2023招聘季 | William Blair (US) 已开放 Summer Internship!2023招聘季 | Uber (US) Data岗 Summer Internship已开放!2023招聘季 | 有转正机会!Tesla(US) ​已开放Summer Internship[摄影] 徕卡SUMMILUX-M 35mm f/1.4 钢嘴复刻版与十四位大佬畅聊2022和未来|CEIS年刊《咬定青山》首发2023招聘季 | 顶奢公司LVMH (US) 已开启Summer InternshipThe Four Key Issues Facing China at the COP27 Climate Summit
logo
联系我们隐私协议©2024 redian.news
Redian新闻
Redian.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Redian.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。