Redian新闻
>
新计算范式下,Databricks、Snowflake、Doris、字节跳动的数据平台落地实践|QCon

新计算范式下,Databricks、Snowflake、Doris、字节跳动的数据平台落地实践|QCon

公众号新闻

数据平台,已经成为企业必备的基础设施。领域发展 20 年,一些范式已经成熟,另一些新范式在持续变化和创新。

基于关系代数计算范式的结构化数据分析领域,已经沉淀出批、流、交互三类典型引擎,并已经被广泛采用,三种引擎组装式架构的挑战也有充分的认知。技术向前演进,下一代的数据分析应该是怎样的?

特别的,发展 10 年的深度学习技术终于因 LLM 产生技术拐点,同时拓展了数据处理的能力边界。从结构化数据 +SQL 的关系代数范式,到半结构化数据 +LLM,再到非结构化数据 +DL,数据平台开始形成“全频谱”。多源异构数据如何组织,如何释放 AI 的能力?面向 BI+AI 的数据平台,应该怎样建设?

即将于 9 月 3-5 日在北京·富力万丽酒店举办的 QCon 全球软件开发大会(北京站)2023 特别策划「从 BI 到 BI+AI,新计算范式下的大数据平台」,由云器科技联合创始人 /CTO,分布式系统和大数据平台领域专家关涛(Tony)出品。他是前阿里云计算平台事业部研究员,阿里巴巴通用计算平台 MaxCompute、Dataworks 负责人,负责阿里巴巴主线大数据平台。前阿里巴巴和蚂蚁集团技术委员会计算平台领域组长、阿里云架构组大数据组组长。回国加入阿里云之前,在微软云计算和企业事业部工作 9 年,主持和参与开发了包括 Azure Datalake,Cosmos/Scope,Kirin 在内的多套超大规模分布式存储和计算平台。并著有多篇国内外会议论文和专利。

2021 年,关涛曾出席由极客邦科技旗下 InfoQ 中国团队推出的重点面向高端技术管理者、架构师的技术会议 ArchSummit 全球架构师峰会·深圳站,在主会场分享了题为《当下的大数据体系是什么?》的主题演讲,他结合 15 年大数据从业经验,从系统架构的角度,就大数据架构的五个热点、四个技术趋势和三个未解问题等方面一一展开了概述。同时,他还担任了该届大会「应云而生的新一代数据架构」专题的出品人,与来自 Snowflake、Databricks、阿里云、网易严选的几位专家从“云原生”的视角,探讨了新一代数据平台的架构迭代方向。根据现场听众投票数据,最终,他获得了该届大会“优秀出品人”“明星讲师”的称号。作为本届 QCon 大会的出品人,他与组委会一同策划专题、挖掘业界具有参考价值的创新落地实践案例。

在几个月的筹备后,专题最终邀请到包括 Databricks、Snowflake、SelectDB、Kyligence、火山引擎、Apache Pinot、RisingWave 等在内的海内外数据平台的从业者、新兴创业公司、以及部分平台开发者,从不同视角分享观点并讨论。议题详情如下:

另外,9 月 4 日 18:30-21:00,QCon 北京站现场还将举办「新计算范式下的计算平台发展与趋势」特色晚场圆桌,关涛、李潇、付翔、马如悦等几位重磅嘉宾将面向未来探讨数据平台领域技术发展趋势。如果你对以下论题感兴趣,不妨来到现场与我们一同交流(圆桌对外免费开放)——

  • 当前数据平台到了什么发展阶段?

  • 中美发展是否有差异,为什么?

  • 最近几年不少公司都在做数据平台,很多人觉得“重复造轮子”“内卷”,你认为呢?

  • 独立数据平台与云的关系,更多竞争 or 更多合作?

  • “中国没有 SaaS”,都是解决方案交付,很难赚到钱,你们怎么看?

  • 国际化 / 出海是个创业圈的热门话题,各位国内外的专家是否有出海 / 反向出海计划,为什么?

  • 如何看待 AI 的发展?

  • ……

活动推荐

本次会议以「启航·AIGC 软件工程变革」为主题,还策划了大前端融合提效、大模型应用落地、面向 AI 的存储、AIGC 浪潮下的研发效能提升、LLMOps、异构算力、微服务架构治理、业务安全技术、构建未来软件的编程语言、FinOps 等近 30 个精彩专题。目前会议 9 折报名仅剩 5 天,现在购票即可享受立减 ¥880 优惠。咨询购票可联系票务经理 18514549229(微信同手机号)。点击「阅读原文」即可查看全部专题,期待与各位开发者现场交流。  

微信扫码关注该文公众号作者

戳这里提交新闻线索和高质量文章给我们。
相关阅读
AIGC时代的算力基石,未来的数据平台将如何演进?计算范式巨变前夜,云器发布多云及一体化数据平台云器 Lakehouse |GGV Family成本压力带来挑战,Snowflake能否成功破局?仅使用解码器实现语音翻译,字节跳动提出基于LLM的新范式PolyVoice计算范式巨变前夜,云器发布多云及一体化数据平台云器 Lakehouse燧原科技张亚林:大模型带来计算范式变革,形成“大树型”生态格局丨GACS 2023精选SDE岗位 | Snowflake、Databricks、Blizzard Entertainment公司岗位发布!永远乐观!永远奋斗!游学东方甄选、360集团、字节跳动站上AI风口,致尚科技即将上市!游戏机核心零部件制造商,进入任天堂、Meta、字节跳动供应链构建大模型生态基础设施,你选 Python + Docker 还是 Rust + WebAssembly?| QCon生成式AI搭台,Data+Analytics唱戏: Snowflake、Databricks 2023年度大会前瞻网易互娱出海之旅:大数据平台上云架构设计与实践剑拔弩张的 Databricks 和Snowflake,连用个Apache Iceberg 都能掐架!从 0 到 1 精益创新 AIGC 产品应用及商业化落地的 4 个关键|QCon精选DS岗位 | Amazon、Databricks、ByteDance公司岗位发布!CTPN、TextBoxes、SegLink、RRPN、FTSN、DMPNet…你都掌握了吗?一文总结OCR必备经典模型(一)大模型爱好者必看:60+大模型全场景落地案例集|QCon数据平台流量回放最佳实践从Snowflake迁移到Databricks,成本下降50%?Snowflake被迫解释对话云器科技 CTO 关涛:打造中国版“Snowflake”,经济低迷时期技术创业型公司如何乘风破浪?nǚ hóng?nǚ gōngSnowflake:将颠覆数据云行业,前景无限Databricks出招了,Snowflake怎么办???为黄大师说两句从 Hadoop 到 Snowflake,2023年数据平台路在何方?Instacart上市,导致Databricks撕逼Snowflake。。。去外地跑马拉松赛趣事夜读字节跳动的多云云原生实践之路又走了一位老海归-邬沧萍对话黄东旭、关涛、李远策:AI热潮下,用户到底需要怎样的数据平台?|GGView字节跳动如何在单元测试中落地大模型|QCon求职干货 | 字节跳动 2024秋招已开启!海归求职:数据(数据分析、数据科学、工程)《僭越之殇》(16)——牛父秘藏案例分享:混部共享集群租户内自定义调度编排数据密集型Serverless应用|QCon
logo
联系我们隐私协议©2024 redian.news
Redian新闻
Redian.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Redian.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。