Redian新闻
>
紧跟AI步伐, Gitee已支持AI模型托管

紧跟AI步伐, Gitee已支持AI模型托管

公众号新闻


AI 时代已经来了!

现在,越来越多的企业和个人开始使用 AI 技术来解决各种问题。想要了解 AI,那么就一定要了解 AI 模型,作为 AI 的核心技术之一,AI 模型为各种进阶的人工智能应用奠定了基础,从 ChatGPT 、文心一言、通义千问这种语言模型,到 Stable Diffusion、Midjourney 这种文本到图像生成模型,很难不让开发者们开始对 AI 模型的开发产生关注。

目前已经有许多开源的 AI 模型供开发者们学习,但开发者们接触后才发现,AI 模型大多体积庞大,对其进行版本控制和共享下载都十分困难。比如  stable-diffusion-v1-5 模型总共要占用近 24GB 的空间,清华大学开源的 ChatGLM-6B 也需要超过 13GB 的空间,如此巨大的空间占用,对于个人开发者来说是一个巨大的挑战。

AI 模型也能用 Gitee 托管

为了帮助开发者们更高效的学习和开发 AI 模型,Gitee 现已经支持了 AI 模型托管功能,为广大 AI 开发者提供高速稳定的托管服务,现在除了代码之外,你也可以在 Gitee 托管自己的 AI 模型了。

查看 AI 模型

AI 模型的管理界面和代码的管理界面风格统一,比较明显的区别在于在大文件(如 AI 模型文件)后会对其进行 LFS 文件的标注,并注明其所占空间大小,这样就能很方便地定位到 AI 模型文件。

下载 AI 模型

  • 通过网页下载 如果你想要下载仓库中的某个 AI 模型,就像下载代码仓库中的某个文件一样,点击其文件名并点击下载即可。
  • 通过命令行下载 除网页外,你也可以通过命令行下载模型文件:
# 克隆仓库
git clone https://gitee.com/<your-gitee-repo-path>
cd <your-gitee-repo-path>

# 若已全局启动lfs,AI模型已全部自动下载完成
# 若未全局启动lfs,可手动下载指定模型
git lfs install

# 执行完成后,<model-file-path>的模型文件就可以直接使用了
git lfs pull -I <model-file-path>

通过 Git LFS 管理模型

你还可以使用 Git LFS 的方式对模型进行管理。在仓库标签页中的「管理」进入「Git LFS」选项,就可以查看该仓库内所有的 LFS 文件,包含其文件类型、大小等信息,并可以对它们进行下载和删除的操作。

怎么把 AI 模型上传到 Gitee

那么,如果想在 Gitee 上托管 AI 模型该如何操作呢?流程和代码托管一样吗?

与代码托管类似,目前 Gitee 支持从 Hugging Face 导入和从本地推送两种方式进行 AI 模型的上传

从 Hugging Face 导入

Hugging Face 是一家非常活跃的人工智能创业公司。它拥有一个活跃的人工智能社区。有超过5000多家机构都在 Hugging Face 的社区发布内容,包括 Google AI、Facebook AI、微软等,这也让它成为了目前开发者们最熟悉的人工智能技术社区。

现在你可以直接使用 Hugging Face 的模型地址来将其导入至 Gitee 中,其操作与代码仓库的导入是相同的:

  • 点击右上角头像旁的「+」,选择从外部仓库导入;
  • 在 Git 仓库 URL 中输入你想要导入的 Hugging Face 地址,Gitee 会为其自动设置名称及路径;
  • 点击「导入」,等待几分钟即可完成,同时后台开始同步 LFS 文件(速度取决于文件大小)。

从本地推送

除了从 Hugging Face 导入外,由于 Gitee 全面支持 Git LFS 功能,所以 Gitee 同样支持从本地推送 AI 模型,其流程与代码推送略有不同的是,推送 AI 模型时需要加入git lfs相关命令。

  • 推送 Hugging Face 的模型仓库
# 克隆仓库至本地
git clone https://huggingface.co/bert-base-uncased.git
cd bert-base-uncased

# 同步模型数据
git lfs fetch --all

# 推送到Gitee仓库
git lfs push https://gitee.com/<your-gitee-repo-path> --all
  • 推送自己的 AI 模型仓库
cd ai-models-project

# 初始化仓库
git init

# 添加remote
git remote add origin https://gitee.com/<your-gitee-repo-path> 

// ...
// 创建ai模型,如:xxx.msgpack
// ...

# 追踪模型文件
git lfs track "*.msgpack"
# 提交追踪变更
git add .gitattributes
git commit -m "track *.msgpack"

# 提交模型
git add .
git commit -m "append ...."

# 推送模型
git lfs push origin --all
git push 

想要获得更大的存储空间?

目前该功能已经对所有付费企业开放,由于 AI 模型体积庞大,存储和流量成本较高,付费企业可以通过扩容 LFS 容量以存储更多的 AI 模型,在企业控制台中,点击左下角的设置即可查看 Git LFS 配额使用情况,并可按需进行扩容操作。

如果你想要获取更多关于 LFS 扩容的信息,欢迎扫描下方二维码联系专属顾问,或前往 Gitee 企业版官网了解更多详情:https://gitee.com/enterprises。

AI 时代已来,Gitee 已经做好准备帮助你搭上这趟快车,快来和我们同行吧!

往期推荐



MariaDB市值暴跌,收入不足以支持运营

我们为何期待Rust 2.0?

碾压ChatGPT、自主完成任务、Star数超8万的Auto-GPT,是炒作还是未来?



🌟 活动推荐


2023 年 5 月 27-28 日,GOTC 2023 全球开源技术峰会将在上海张江科学会堂隆重举行。

为期 2 天的开源行业盛会,将以行业展览、主题发言、特别论坛、分论坛、快闪演讲的形式来诠释此次大会主题 ——“Open Source, Into the Future”。与会者将一起探讨元宇宙、3D 与游戏、eBPF、Web3.0、区块链等热门技术主题,以及 OSPO、汽车软件、AIGC、开源教育培训、云原生、信创等热门话题,探讨开源未来,助力开源发展。

长按识别下方二维码立即查看 GOTC 2023 详情/报名。

微信扫码关注该文公众号作者

戳这里提交新闻线索和高质量文章给我们。
相关阅读
把握尺度,营建未来|MILESEEY迈测|DEEP GREEN一周资讯|美团建立直播中台;快手短视频已支持挂店铺;淘宝直播上线“捧场购”功能...Rust游戏引擎Bevy已支持WebGPU渲染IEEE标准协会网络研讨会 | PRODUCT SHOWCASE: IEEE EQ NAVIGATOR蒸馏也能Step-by-Step:新方法让小模型也能媲美2000倍体量大模型Linux内核、LLVM、GCC均已支持龙芯LoongArch架构【她力量】生育与工作发展如何平衡?星展中国行长霸气回应!未来紧跟数字化转型潮流Wide&Deep、DCN、xDeepFM、DIN、GateNet、IPRec…你都掌握了吗?一文总结推荐系统必备经典模型(三)第一批去以色列的VC/PE已经赚到钱了刚刚!澳洲政府宣布禁止抖音+换掉中国造摄像头,紧跟美国!但结果,政府却无奈了...【Career Forum|4.1】Fight the Career Winter in the Tech Industry!Careers at the FTC(Federal Trade Commission):英国咨询| 日常实习推荐: McKinsey/Newton Europe/Mace已开启,23/24届可投!形势似乎在往最坏的方向发展EADV春季研讨会如约而至,紧跟AD治疗领域新进展中信银行资产托管部总经理杨璋琪:秉承服务初心,拓展托管价值边界【初次】发现她学中文,是要出轨中国男人。IEEE Education Week主题演讲 | 主讲人:IEEE主席Saifur Rahman澳洲紧跟美国大哥, 宣布TikTok禁令! 多名州长表态, 立刻注销账号刚刚!澳洲政府宣布禁止Tiktok+换掉中国造摄像头,紧跟美国!但结果,政府却无奈了...庆祝IEEE Education Week | 课程优惠抢先了解突发!深圳打响第一枪!上海,北京,杭州,兰州紧跟!最新!“珠峰被救女子”登山公司发声:她是老队员,善良乐观,公司已支付救援费!当时的情况是…苹果现已支持 Swift 包索引疯狂!安省男子高速上滑旱冰 两辆警车紧跟差点相撞!全国人大代表、泓淋电力董事长迟少林:紧跟产业绿色转型及“出海”节奏,靠电源线组件干出单项冠军YouTube上的脱口秀只给大模型LeetCode编号,也能解题!大模型表现好是源于对训练数据的记忆吗?请不要迷信大模型IEEE高级会员,IEEE中国联合会前任主席,IEEE北京分会前任主席冯进军当选北京“最美科技工作者”Linux 游戏崛起了?微软《我的世界》已支持谷歌 ChromeOS四大之一 | Deloitte(US) 2024 Full Time已开放总统提名:前MasterCard CEO Ajay Banga,head World Bank英国咨询| 日常实习推荐: PwC/Arup/GE已开启,23/24届可投!As City Bus Service Teeters in Henan, Local Government Steps In循着《铁西区》《钢的琴》的步伐,她为东北拍下一场体面的葬礼
logo
联系我们隐私协议©2024 redian.news
Redian新闻
Redian.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Redian.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。