Redian新闻
>
亚马逊云科技开源 Mountpoint for Amazon S3,通过挂载点技术简化 Amazon S3 对象存储的使用

亚马逊云科技开源 Mountpoint for Amazon S3,通过挂载点技术简化 Amazon S3 对象存储的使用

公众号新闻

作者 | Renato Losio
译者 | 平川
策划 | 丁晓昀

在 Pi Day 活动期间,AWS 发布了 Mountpoint for Amazon S3,这是一个开源文件客户端,可以提供 Amazon S3 的高吞吐量访问。该工具目前处于 Alpha 阶段,其本地挂载点提供了很高的单实例传输速率,主要用于数据湖应用程序。

Mountpoint for Amazon S3 将本地文件系统 API 调用转换为 S3 对象 API 调用,如 GET 和 LIST。它支持对文件进行随机和顺序读操作,支持列出文件和目录。但该 Alpha 版本不支持写入操作(PUT),预计将来只支持新对象的顺序写入。

AWS 学者、德克萨斯大学助理教授 James Bornholt、AWS 高级产品经理 Devabrat Kumar 和 AWS 杰出工程师 Andy Warfield 承认,该客户端不是一个通用的网络文件系统,并且在文件操作上有一些限制,他们写道:

Mountpoint 是为大规模分析型应用程序而设计的,它们可以并行读取和生成大量的 S3 数据,但不需要向现有对象中间写入数据。Mountpoint 允许你将 S3 存储桶或前缀映射到实例的文件系统命名空间,遍历存储桶的内容,就像它们是本地文件一样,并实现对对象的高吞吐量访问。

这个开源客户端没有模拟目录重命名等操作,因为那会产生 S3 API 调用,或者说需要 S3 API 不支持的 POSIX 文件系统特性。

Mountpoint for S3 并不是第一个将 S3 作为文件系统呈现的客户端,我们也可以使用 Goofys 和 s3fs 这些流行的开源选项通过 FUSE 挂载桶。在 Reddit 上,有一些开发人员质疑新客户端的必要性,并担心它会被用在数据湖之外的领域,Bornholt、Kumar 和 Warfield 写道:

Mountpoint 并不是第一个用于访问 S3 的文件客户端——有几个开源的文件客户端,我们有客户使用过。然而,我们从这些客户那里都听到过的一个话题是,他们希望这些客户端能够提供与 S3 REST API 和 AWS SDK 相同的稳定性、性能和技术支持。

新客户端使用 Rust 在大多数 AWS SDK 都使用的公共运行时(CRT) 上构建,它依赖于自动推理来验证文件系统语义。The Duckbill Group 首席云经济学家 Corey Quinn 在推特上写道:

哦不,AWS 做了什么?15 年来,我之所以没有呼吁人们不要将 S3 用作文件系统,就是希望 S3 团队自己来做这件事!

云专家和 AWS 无服务器英雄 Ben Kehoe 提醒说:

使用文件概念来考虑 S3 会使你对 API 的语义产生误解,最终做出错误的假设,当系统总是因为这些假设不成立而出现轻微的故障时,你就要难过了。

Mountpoint 遵循 Apache License 2.0 许可,尚不能应用于生产工作负载。GitHub 上提供了初始 Alpha 版本和公共路线图。

原文链接:

https://www.infoq.com/news/2023/03/mountpoint-amazon-s3/(https://www.infoq.com/news/2023/03/mountpoint-amazon-s3/)

相关阅读:

通过 Amazon Managed Microsoft Active Directory 运行混合 Active Directory 服务 (https://xie.infoq.cn/article/929a761df9243e16ee2317b5c )

亚马逊云科技为蓝绿及金丝雀策略引入 CloudFront 持续部署 (https://www.infoq.cn/article/LW5JeoLR0Jcl1ktRNV0o )

声明:本文为 InfoQ 翻译,未经许可禁止转载。

点击底部阅读原文访问 InfoQ 官网,获取更多精彩内容!

今日好文推荐

马斯克将起诉微软,称其使用 Twitter 数据“非法”训练GPT,吃瓜网友:事情变得更有趣了!

谷歌或被抛弃!ChatGPT 引爆手机市场新一轮洗牌:Android 手机销冠三星30亿美元大单欲改投 Bing

中国开源项目贡献者已超过10万!《中国开源生态图谱 2023》发布

Databricks来搅局了:0门槛克隆ChatGPT,完全开源可随意修改商用

微信扫码关注该文公众号作者

戳这里提交新闻线索和高质量文章给我们。
相关阅读
大咖云集,干货满满,来亚马逊云科技中国峰会深度解读AIGC的现在和未来什么样的人最自由?欧洲给Google, Amazon,等湾区大厂上了一课!亚马逊营销总监:快速崛起的亚马逊是否在游戏业找到了自己的路?Amazon 上东西买完了就涨价是怎么回事?中欧四国自驾游: 信息和体验总汇倒数7天!交易门 X 亚马逊云约你深圳见!对话出海企业:“云襄百业,共拓全球”——2023亚马逊云科技出海日圆桌论坛2023最重磅!亚马逊云科技出海日金融专场等你!扭亏为盈后业绩增长22倍,汇量科技开启增长“加速器”一种KV存储的GC优化实践As Tourism Bounces Back, China’s Travel Bloggers Ride a Rebound​COSI:对象存储也可以通过 K8S API 管理了!第三届 冇(Mǎo)国际青年影像周 开始征片啦!愤怒!尔湾华裔小孩被亚马逊快递车撞死,亚马逊竟将责任推得一干二净从Pre-founder到Pro-founder,来鸵鸟会就够了|鸵鸟会人工智能营报名倒计时Mountain View 绝佳位置End Unit Townhouse 带独立后院 Los Altos High 好学区新上市夫妻团圆,又分离20年给孩子的使用社群媒体10问,家长不应该放任孩子无限制使用[歪解] thank you for your generous supportAgustín Hernández:中美洲建筑背景下的未来主义巨构亚马逊云游戏遇困境:自家游戏都不愿上,50余款三方游戏本月跑路探索 17 年,亚马逊云科技重新定义 Serverless春假hiking的战斗装:Mountain Warehouse户外系列白菜价低至4折云端安全由繁到简,云安全文化护航下的“业务创新”进入新局面? | 亚马逊云科技 re:Inforce 2023 全球大会亚马逊云科技:双向奔赴,全球合作伙伴网络为企业出海铺路!诺奖得主保罗·伯格:他发明了革命性的重组DNA技术,却主动要求约束它的使用20年不变的初心,亚马逊云科技为初创企业的独角兽梦想加速赋能!【嘛嘛档炒面】Mee MamakJP Morgan、Credit Suisse专业导师带你全面掌握投行面试考点技巧,刷题冲刺,斩获Offer!亚马逊云科技把Serverless的应用门槛降下来了加速步入Serverless时代,与亚马逊云科技一同领驭创新浪潮亚马逊云科技 Lambda 引入响应有效负载流Amazon one medical $144 一年让天下没有难Tuning的大模型:PEFT技术简介IEEE行业快报 | 新型存储技术-铁电存储都是做 AIGC,亚马逊云科技怎么就那么“不一样”?“感受” 到底是个什么鬼?Amazon 上买的枸????水-泡都是红红的,中国产会不会添加了什么颜料?
logo
联系我们隐私协议©2024 redian.news
Redian新闻
Redian.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Redian.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。