Redian新闻
>
把大模型“装”进小盒子,云天励飞在想什么?

把大模型“装”进小盒子,云天励飞在想什么?

公众号新闻
作者周一笑
邮箱[email protected]
3 月 28 日,云天励飞举办 AI 大模型产品发布会,发布“深目”AI 模盒,同时宣布自研大模型“云天天书-2.0-68B”版本免费向合作伙伴开放。
云天励飞董事长兼 CEO 陈宁在发布会提到:“未来 3 年,全球 80% 的企业都将使用大模型。大模型一次训练成本在千万级,主流的训推一体机价格普遍在百万元,绝大多数企业都无法承担这样高昂的成本。” 云天励飞此次发布的 “深目”AI 模盒,属于边缘计算设备,侧重在推理端,搭载了云天励飞的自研大模型边缘训推芯片 DeepEdge10 Max,以及自研多模态大模型“云天天书”,具备算法边缘侧在线学习能力。
这种边缘端标准化硬件,再加上大模型,除了能通过边缘端部署,解决数据隐私问题,还可以实现对多种长尾场景的覆盖。其搭载的 DeepEdge10 芯片可以针对不同的场景提供差异化算力,并且可以在线下载更新多种算法。
在云天励飞为客户提供的算法训练平台上,有大量与生态合作伙伴共同打造的算法商城,用户可以直接调用预训练算法,并上传自身场景图片完成算法的微调和升级,快速训练出高精度算法。针对无训练数据的极端场景,例如加油站场景的吸烟识别,云天励飞还使用了 AI 合成数据来训练算法,并在这一过程中引入了 3D 引擎,从而填补数据空白。


“推理芯片没有垄断性巨头”

AI 芯片可以分为训练芯片和推理芯片。训练芯片多用于服务器,推理芯片则主要部署在边端设备之上。当大模型训练完成,开始进入到了实际应用之后,对于 AI 推理的需求将会更多。云天立飞的 AI 芯片就定位在推理的应用。DeepEdge10 系列是云天励飞去年推出的大模型推理芯片,该芯片采用自主可控的国产工艺,内含国产 RISC-V 核,支持大模型训练推理部署。依托自研芯片 DeepEdge10 Max创新的 D2D chiplet 架构打造的 X5000 推理卡,已适配并可承载 10 亿级 SAM、百亿级 Llama2 等大模型运算,可应用于 AIoT 边缘视频、移动机器人等场景。
谈及推理芯片,陈宁表示,如果训练芯片是英伟达一骑绝尘,占有绝对的市场占有率,那么推理芯片今天没有垄断性的巨头,今年大火的 Groq 也是 AI 推理芯片。
“云天天书”是云天励飞自研的多模态大模型,由 CV 大模型、NLP 大模型和多模态大模型组成。云天励志在通用基础大模型的基础上,训练出行业大模型,包括智慧城市、智慧安防、智慧交通、智慧商超等等,最后再针对落地细分的场景,将数据集进行微调,从而实现落地。


深圳 CV 独角兽,“算法芯片化”为核心竞争力

云天励飞成立于 2014 年,是一家以计算机视觉(CV)应用起家的公司,2022 年 4 月 4 日,作为“深圳 AI 第一股”在科创板上市,主营业务为视觉 AI 软硬件产品及解决方案。解决方案中又以面向公共安防及交通治理领域为主。公司为客户提供算法软件、芯片等自研产品,并按照客户需求,将自己的产品,外购的硬件产品、安装施工服务等打包交付。
2023 财年,云天励飞营业收入 5.35 亿元,同比下降 2.14%;归母净利润亏损 3.9 亿元,比上年同期的 -4.47 亿元有所收窄。
值得一提的是云天励飞具备算法芯片化能力,同时自研的 AI 芯片也已实现商用。公司的 AI 芯片在 2018 年成功流片,2019 年开始逐步对外销售,客户包括海康威视、阿里巴巴平头哥、富瀚微电子等。


并购智能穿戴公司,G、B、C 全都要?

“深目”AI 模盒的发布是云天励飞从 AI 方案化到 AI 产品化的一次尝试,通过 AI 技术或解决方案转化为标准化、通用化的产品或服务,从而满足更广泛的市场需求。
在大模型方向上,作为一家在机器视觉赛道方向积淀已久的的 AI 企业,云天励飞并没有直接发布面向 C 端用户的 LLM 产品。毕竟大模型需要长期巨量烧钱,且商业化尚处于早期阶段。而是选择通过“深目”AI 模盒这样的边缘计算盒子,将大模型与自身 AI 产品落地相结合,寻求在 G 端和 B 端场景实现标准化和规模化。
在 To C 方向上,云天励飞也有所布局。近期,云天励飞发布公告称拟以不超过人民币 1.8 亿元的对价收购智能穿戴方案设计公司岍丞技术。岍丞技术主要从事智能穿戴产品的软硬件开发与技术服务,属于智能耳机、智能手表等智能穿戴设备的 IDH(系 Independent Design House 的缩写,直译为“独立设计公司”)方案商。收购岍丞技术后,云天励飞拟开展智能穿戴产品的软硬件开发与技术服务业务,探索"大模型 + 智能可穿戴"深度融合。
云天励飞董事长兼 CEO 陈宁曾表示,“过去 10 年,AI 行业基本走完了 To G 的基础设施建设的历程,在向 To B 的企业级服务转变;预计 3 年左右的时间,人工智能的行业会走向 ToC 的服务,尤其是随着 ChatGPT 和多模态大模型的逐步成熟,行业最终会走向 To C 的服务。” 这似乎也表明了云天励飞未来的探索方向。另外值得注意的是,同为视觉 AI 起家的商汤科技也在今年发布了面向 C 端消费者的 AI 台灯产品。
大模型技术加持下的 AI 行业竞争愈演愈烈,考验着每一位参与者的底层技术能力、资金实力和战略定力。并非所有玩家都能实现大而全的全面领先,聚焦自身的差异化优势,实现市场的精准定位和有效突围,或许才是破局之道。
点个在看,再走吧👀

微信扫码关注该文公众号作者

戳这里提交新闻线索和高质量文章给我们。
相关阅读
面壁智能低调开源大模型“理科状元”!LeetCode 周赛超越80%人类选手,推理性能超 Llama3-70B云天励飞余晓填:剖解大模型技术演进与挑战,算法芯片化突破大模型落地“三角约束”丨GenAICon 2024波音“星际客机”飞船首次载人试飞在即;观鸟有助改善心理健康丨科技早新闻如何让企业把大模型用起来?零一万物的答案是 API 开放平台美股基本面 - 2024_02_01 * 晨报 * 美国未来三个月长债发行规模再创历史记录!。小鹏汽车公布1月交付量,小鹏X9大模型的“瘦身”革命:巨头逐鹿轻量化大模型 | 大模型一周大事看了火锅店点菜崩溃的孩子,终于明白:软硬不吃的娃,心里在想什么?总是突然心慌又查不出毛病? 用“小盒子”测一测清华系创业新势力!把大模型塞进AR眼镜,高铁上能用10块大屏办公奇怪的再会(五)电梯调度算法到底在想什么?为何总是错过你的楼层?雅雅寻根心路开启了Meta最新进展!大模型“超级外挂”:LLM RAG宇宙人(1484期)同比增长5.3%;国家天文台人工智能工作组发布大模型“星语3.0”​;刘强东数字人今天将开启直播首秀它“装”不下去了,中产哭了用 AI 面试员工的企业,知道打工人在想什么吗?!今日arXiv最热NLP大模型论文:NAACL24实锤语言学对大模型“负优化”,抽象语义表示+思维链有损表现开启大模型“安卓”时刻,Meta刚刚干了一件大事云天励飞进军智能穿戴!收购IDH黑马,抢滩大模型C端落地窗口最佳食用日期的终结?新型“智能包装”能告诉你东西还能不能吃看了火锅店点菜崩溃的孩子,终于明白:软硬不吃的孩子,心里在想什么?一条中国龙,腾飞在美国大华府山东春晚奥特曼昨晚放话也要把大模型价格打下来!微软一夜革新生产力:Copilot 贯穿全场、小模型持续炸街向用不起的AI宣战!宇视掀起“装备大模型化”变革清华、哈工大把大模型压缩到了1bit,把大模型放在手机里跑的愿望就快要实现了!父母吵架时,孩子都在想什么?看完只觉得心酸…今日arXiv最热大模型论文:清华把大模型用于城市规划,回龙观和大红门地区成研究对象流浪狮这个真人实验火了:父母吵架时,孩子究竟在想什么?大模型应用成本卷到了千元级!云天励飞发布“深目”AI 模盒:搭载自研芯片,单手可托起父母吵架时,孩子都在想什么?AI早知道|小红书内测自研大模型“小地瓜”;OpenAI为ChatGPT Plus用户开放“记忆”功能46、长篇家庭伦理小说《嫁接》第十一章 惺惺相惜(3)大模型“暴力计算”时代,中国如何突围算力之困?AI早知道|淘天集团自研大模型“淘宝星辰”上线;Gemini Pro1.5向所有人开放;Suno正式发布V3音乐生成模型
logo
联系我们隐私协议©2024 redian.news
Redian新闻
Redian.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Redian.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。