腾讯大数据团队主导开发,新一代分布式对象存储Ozone从Apache基金会毕业
2020-12-10 16:36:46AI云资讯1244
刚刚获悉,Apache基金董事会通过一致表决,正式批准分布式文件对象存储Ozone从Hadoop社区孵化成功,成为独立的Apache顶级开源项目。这意味着,作为腾讯大数据团队首个参与和主导的开源项目,Ozone已得到全球Apache技术专家的一致认可,成为世界顶级的存储开源项目之一。
Ozone 是Apache Hadoop社区推出的面向大数据领域的新一代分布式存储系统,它的推出解决了Hadoop分布式文件系统在可扩展性上限方面的缺陷问题,能够支持百亿甚至千亿级文件规模的存储。
自1999年成立以来,Apache 软件基金会已成功建立起强大的生态圈,其社区涌现了非常多优秀的开源项目,同时有越来越多国内外项目走向这个国际开源社区进行孵化。目前所有的 Apache 项目都需要经过孵化器孵化,满足一系列质量要求之后才可毕业。Ozone从Hadoop社区孵化成功,不仅是项目本身的重要里程碑,也是对项目成员学习Apache Way和推动社区发展等一系列成果的认可。
今年9月,腾讯主导的Ozone 1.0.0版本在Apache Hadoop社区正式发布,标志着历经了2年多的社区持续开发,Ozone 已经具备了在大规模生产环境下部署使用的能力。Ozone的设计,吸收和借鉴了很多HDFS的优点。同时支持兼容AWS S3协议的对象访问接口,且兼容 Hadoop Compatible File System的分布式文件访问接口。

Ozone构架图
除了参与和贡献社区,在0zone的应用层面,腾讯也走在前列。据了解,在腾讯内部,目前已经在对象和容器等一些场景使用了Ozone,并且获得了内部用户积极的好评反馈,后续也会持续将这部分经验分享出来。
随着1.0.0 的发布,腾讯参与和见证了 Ozone 孵化成为一个 Apache 顶级开源项目的过程。腾讯大数据团队Ozone项目技术负责人陈怡也被社区推选为Apache Ozone 首位项目主席(Chair) ,同时项目团队诞生了多位PMC成员和committer,带领社区一起把Ozone向新一代大数据文件对象存储系统推进。

Ozone的生态栈
“随着Ozone 成为Apache 顶级项目,越来越多的贡献者加入到社区的开发中。腾讯内部,一方面计划在Ozone的基础上,开发基于SCM的新一代高性能分布式文件系统;另一方面,持续推进 Ozone 在更多业务落地,部署更大规模的生产集群,进一步提高Ozone的可靠性、稳定性和性能,立志将Ozone打磨成为新一代文件对象存储的标杆。”腾讯云大数据团队Ozone项目技术负责人陈怡表示。
开源协同是当前腾讯最重要的技术战略之一。以大数据团队为代表的腾讯内部技术团队经历了从使用开源、回馈开源再到主导开源的演变。除了在Ozone项目上的贡献之外,目前已完成了大数据核心能力全开源。如今,在Apache基金会的大数据项目上,腾讯已经为主流的Hadoop、Spark、Flink等项目贡献了大量的特性和patch。
从各大开源基金会公开的数据来看,腾讯已经成为对开源社区贡献最大的中国互联网公司之一。
相关文章
- 腾讯首发效率智能体工具集,打造“AI提效新标配”
- 腾讯发布CodeBuddy Security,用AI Agent实现更高效的代码审计
- 腾讯云ADP4.0发布:推出Claw模式,助力企业Agent规模化落地
- 腾讯董志强:AI Agent已成为众多企业“数字员工”,安全防护需要同步跟上
- Agent进入“生产级”时代!腾讯云ADP4.0发布,打造企业级 AgentOps平台
- 腾讯文档「人机双写」行业首发,原生接入WorkBuddy打造新一代AI办公工作台
- 未来智能与腾讯云达成战略合作,共筑AI Agent硬件与办公智能体新生态
- 腾讯QQ发布“新芽守护行动”,全面升级未成年人保护体系
- 腾讯云MongoDB获亚太游戏行业“三料第一”
- iCourt第二届全国法律人AI大赛走进腾讯,探见法律AI生态新未来
- 首汽约车与腾讯地图达成品牌战略合作 北京发车仪式圆满举行
- 双展联动!携手宝安区、腾讯云,洲明文博会硬核科技清单请查收!
- 腾讯云联合TC601提出国产 Data+AI平台五步转型路径
- 北京无限迭代与腾讯云和中国电信等公司共同荣获全球AI生态基石大奖
- 金山文档Skill、专家与连接器上架腾讯云WorkBuddy
- 腾讯云TVP走进银河通用×NVIDIA×福田戴姆勒,解码AI驱动产业硬核突围之路
人工智能企业
更多>>人工智能硬件
更多>>人工智能产业
更多>>人工智能技术
更多>>- 自变量机器人王昊:训练世界模型需付出“时间税”,解决模态对齐是当务之急
- 腾讯发布CodeBuddy Security,用AI Agent实现更高效的代码审计
- Twinkle x昇腾,率先实现Deepseek-V4系列模型高效训练
- 高德发布鸿蒙首个生成式 UI 开源框架 AGenUI,告别传统 UI 开发模式
- 发布即适配| 天数智芯全力支持腾讯混元Hy3 preview 开源落地,共推国内大模型产业普惠
- Seedance 2.0面向企业公测,豆包大模型日均Token使用量突破120万亿
- 端到端OCR模型第一!百度千帆Qianfan-OCR正式发布
- 云知声Unisound U1-OCR大模型发布!首个工业级文档智能基础大模型,开启OCR 3.0时代









