Redian新闻
>
新计算范式下,Databricks、Snowflake、Doris、字节跳动的数据平台落地实践|QCon

新计算范式下,Databricks、Snowflake、Doris、字节跳动的数据平台落地实践|QCon

公众号新闻

数据平台,已经成为企业必备的基础设施。领域发展 20 年,一些范式已经成熟,另一些新范式在持续变化和创新。

基于关系代数计算范式的结构化数据分析领域,已经沉淀出批、流、交互三类典型引擎,并已经被广泛采用,三种引擎组装式架构的挑战也有充分的认知。技术向前演进,下一代的数据分析应该是怎样的?

特别的,发展 10 年的深度学习技术终于因 LLM 产生技术拐点,同时拓展了数据处理的能力边界。从结构化数据 +SQL 的关系代数范式,到半结构化数据 +LLM,再到非结构化数据 +DL,数据平台开始形成“全频谱”。多源异构数据如何组织,如何释放 AI 的能力?面向 BI+AI 的数据平台,应该怎样建设?

即将于 9 月 3-5 日在北京·富力万丽酒店举办的 QCon 全球软件开发大会(北京站)2023 特别策划「从 BI 到 BI+AI,新计算范式下的大数据平台」,由云器科技联合创始人 /CTO,分布式系统和大数据平台领域专家关涛(Tony)出品。他是前阿里云计算平台事业部研究员,阿里巴巴通用计算平台 MaxCompute、Dataworks 负责人,负责阿里巴巴主线大数据平台。前阿里巴巴和蚂蚁集团技术委员会计算平台领域组长、阿里云架构组大数据组组长。回国加入阿里云之前,在微软云计算和企业事业部工作 9 年,主持和参与开发了包括 Azure Datalake,Cosmos/Scope,Kirin 在内的多套超大规模分布式存储和计算平台。并著有多篇国内外会议论文和专利。

2021 年,关涛曾出席由极客邦科技旗下 InfoQ 中国团队推出的重点面向高端技术管理者、架构师的技术会议 ArchSummit 全球架构师峰会·深圳站,在主会场分享了题为《当下的大数据体系是什么?》的主题演讲,他结合 15 年大数据从业经验,从系统架构的角度,就大数据架构的五个热点、四个技术趋势和三个未解问题等方面一一展开了概述。同时,他还担任了该届大会「应云而生的新一代数据架构」专题的出品人,与来自 Snowflake、Databricks、阿里云、网易严选的几位专家从“云原生”的视角,探讨了新一代数据平台的架构迭代方向。根据现场听众投票数据,最终,他获得了该届大会“优秀出品人”“明星讲师”的称号。作为本届 QCon 大会的出品人,他与组委会一同策划专题、挖掘业界具有参考价值的创新落地实践案例。

在几个月的筹备后,专题最终邀请到包括 Databricks、Snowflake、SelectDB、Kyligence、火山引擎、Apache Pinot、RisingWave 等在内的海内外数据平台的从业者、新兴创业公司、以及部分平台开发者,从不同视角分享观点并讨论。议题详情如下:

另外,9 月 4 日 18:30-21:00,QCon 北京站现场还将举办「新计算范式下的计算平台发展与趋势」特色晚场圆桌,关涛、李潇、付翔、马如悦等几位重磅嘉宾将面向未来探讨数据平台领域技术发展趋势。如果你对以下论题感兴趣,不妨来到现场与我们一同交流(圆桌对外免费开放)——

  • 当前数据平台到了什么发展阶段?

  • 中美发展是否有差异,为什么?

  • 最近几年不少公司都在做数据平台,很多人觉得“重复造轮子”“内卷”,你认为呢?

  • 独立数据平台与云的关系,更多竞争 or 更多合作?

  • “中国没有 SaaS”,都是解决方案交付,很难赚到钱,你们怎么看?

  • 国际化 / 出海是个创业圈的热门话题,各位国内外的专家是否有出海 / 反向出海计划,为什么?

  • 如何看待 AI 的发展?

  • ……

活动推荐

本次会议以「启航·AIGC 软件工程变革」为主题,还策划了大前端融合提效、大模型应用落地、面向 AI 的存储、AIGC 浪潮下的研发效能提升、LLMOps、异构算力、微服务架构治理、业务安全技术、构建未来软件的编程语言、FinOps 等近 30 个精彩专题。目前会议 9 折报名仅剩 5 天,现在购票即可享受立减 ¥880 优惠。咨询购票可联系票务经理 18514549229(微信同手机号)。点击「阅读原文」即可查看全部专题,期待与各位开发者现场交流。  

微信扫码关注该文公众号作者

戳这里提交新闻线索和高质量文章给我们。
相关阅读
大模型爱好者必看:60+大模型全场景落地案例集|QConnǚ hóng?nǚ gōngCTPN、TextBoxes、SegLink、RRPN、FTSN、DMPNet…你都掌握了吗?一文总结OCR必备经典模型(一)字节跳动如何在单元测试中落地大模型|QCon对话黄东旭、关涛、李远策:AI热潮下,用户到底需要怎样的数据平台?|GGView燧原科技张亚林:大模型带来计算范式变革,形成“大树型”生态格局丨GACS 2023精选SDE岗位 | Snowflake、Databricks、Blizzard Entertainment公司岗位发布!计算范式巨变前夜,云器发布多云及一体化数据平台云器 Lakehouse对话云器科技 CTO 关涛:打造中国版“Snowflake”,经济低迷时期技术创业型公司如何乘风破浪?去外地跑马拉松赛趣事AIGC时代的算力基石,未来的数据平台将如何演进?仅使用解码器实现语音翻译,字节跳动提出基于LLM的新范式PolyVoice构建大模型生态基础设施,你选 Python + Docker 还是 Rust + WebAssembly?| QCon为黄大师说两句成本压力带来挑战,Snowflake能否成功破局?生成式AI搭台,Data+Analytics唱戏: Snowflake、Databricks 2023年度大会前瞻计算范式巨变前夜,云器发布多云及一体化数据平台云器 Lakehouse |GGV FamilyDatabricks出招了,Snowflake怎么办???Instacart上市,导致Databricks撕逼Snowflake。。。从 0 到 1 精益创新 AIGC 产品应用及商业化落地的 4 个关键|QCon站上AI风口,致尚科技即将上市!游戏机核心零部件制造商,进入任天堂、Meta、字节跳动供应链字节跳动的多云云原生实践之路从Snowflake迁移到Databricks,成本下降50%?Snowflake被迫解释AIGC 风口下,一窥智能技术在金融行业的应用与实践|直播报名预约精选DS岗位 | Amazon、Databricks、ByteDance公司岗位发布!《僭越之殇》(16)——牛父秘藏夜读数据平台流量回放最佳实践又走了一位老海归-邬沧萍Snowflake:将颠覆数据云行业,前景无限从 Hadoop 到 Snowflake,2023年数据平台路在何方?求职干货 | 字节跳动 2024秋招已开启!海归求职:数据(数据分析、数据科学、工程)剑拔弩张的 Databricks 和Snowflake,连用个Apache Iceberg 都能掐架!永远乐观!永远奋斗!游学东方甄选、360集团、字节跳动案例分享:混部共享集群租户内自定义调度编排数据密集型Serverless应用|QCon
logo
联系我们隐私协议©2024 redian.news
Redian新闻
Redian.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Redian.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。