新计算范式下,Databricks、Snowflake、Doris、字节跳动的数据平台落地实践|QCon
数据平台,已经成为企业必备的基础设施。领域发展 20 年,一些范式已经成熟,另一些新范式在持续变化和创新。
基于关系代数计算范式的结构化数据分析领域,已经沉淀出批、流、交互三类典型引擎,并已经被广泛采用,三种引擎组装式架构的挑战也有充分的认知。技术向前演进,下一代的数据分析应该是怎样的?
特别的,发展 10 年的深度学习技术终于因 LLM 产生技术拐点,同时拓展了数据处理的能力边界。从结构化数据 +SQL 的关系代数范式,到半结构化数据 +LLM,再到非结构化数据 +DL,数据平台开始形成“全频谱”。多源异构数据如何组织,如何释放 AI 的能力?面向 BI+AI 的数据平台,应该怎样建设?
即将于 9 月 3-5 日在北京·富力万丽酒店举办的 QCon 全球软件开发大会(北京站)2023 特别策划「从 BI 到 BI+AI,新计算范式下的大数据平台」,由云器科技联合创始人 /CTO,分布式系统和大数据平台领域专家关涛(Tony)出品。他是前阿里云计算平台事业部研究员,阿里巴巴通用计算平台 MaxCompute、Dataworks 负责人,负责阿里巴巴主线大数据平台。前阿里巴巴和蚂蚁集团技术委员会计算平台领域组长、阿里云架构组大数据组组长。回国加入阿里云之前,在微软云计算和企业事业部工作 9 年,主持和参与开发了包括 Azure Datalake,Cosmos/Scope,Kirin 在内的多套超大规模分布式存储和计算平台。并著有多篇国内外会议论文和专利。
2021 年,关涛曾出席由极客邦科技旗下 InfoQ 中国团队推出的重点面向高端技术管理者、架构师的技术会议 ArchSummit 全球架构师峰会·深圳站,在主会场分享了题为《当下的大数据体系是什么?》的主题演讲,他结合 15 年大数据从业经验,从系统架构的角度,就大数据架构的五个热点、四个技术趋势和三个未解问题等方面一一展开了概述。同时,他还担任了该届大会「应云而生的新一代数据架构」专题的出品人,与来自 Snowflake、Databricks、阿里云、网易严选的几位专家从“云原生”的视角,探讨了新一代数据平台的架构迭代方向。根据现场听众投票数据,最终,他获得了该届大会“优秀出品人”“明星讲师”的称号。作为本届 QCon 大会的出品人,他与组委会一同策划专题、挖掘业界具有参考价值的创新落地实践案例。
在几个月的筹备后,专题最终邀请到包括 Databricks、Snowflake、SelectDB、Kyligence、火山引擎、Apache Pinot、RisingWave 等在内的海内外数据平台的从业者、新兴创业公司、以及部分平台开发者,从不同视角分享观点并讨论。议题详情如下:
另外,9 月 4 日 18:30-21:00,QCon 北京站现场还将举办「新计算范式下的计算平台发展与趋势」特色晚场圆桌,关涛、李潇、付翔、马如悦等几位重磅嘉宾将面向未来探讨数据平台领域技术发展趋势。如果你对以下论题感兴趣,不妨来到现场与我们一同交流(圆桌对外免费开放)——
当前数据平台到了什么发展阶段?
中美发展是否有差异,为什么?
最近几年不少公司都在做数据平台,很多人觉得“重复造轮子”“内卷”,你认为呢?
独立数据平台与云的关系,更多竞争 or 更多合作?
“中国没有 SaaS”,都是解决方案交付,很难赚到钱,你们怎么看?
国际化 / 出海是个创业圈的热门话题,各位国内外的专家是否有出海 / 反向出海计划,为什么?
如何看待 AI 的发展?
……
本次会议以「启航·AIGC 软件工程变革」为主题,还策划了大前端融合提效、大模型应用落地、面向 AI 的存储、AIGC 浪潮下的研发效能提升、LLMOps、异构算力、微服务架构治理、业务安全技术、构建未来软件的编程语言、FinOps 等近 30 个精彩专题。目前会议 9 折报名仅剩 5 天,现在购票即可享受立减 ¥880 优惠。咨询购票可联系票务经理 18514549229(微信同手机号)。点击「阅读原文」即可查看全部专题,期待与各位开发者现场交流。
微信扫码关注该文公众号作者