率先实现批流一体,网易易数入选浙江省软件产业高质量发展重点项目
2020-10-27 10:57:46爱云资讯487
近日,浙江省经信厅公布2020年浙江省软件产业高质量发展重点项目公示名单,经过企业自主申报、地方推荐、专家评审等多个环节,凭借在技术创新性、先进性等方面的突出表现,网易数帆旗下网易易数批流一体实时数据中台(以下简称"易数数据中台")成功入选。
易数数据中台是基于网易杭州研究院十几年实践经验研发的下一代大数据一站式应用开发和管理平台。传统大数据计算有两类主要对象,批计算操作的对象是离线表,而流计算操作的对象是动态的数据流。两类计算的处理逐渐形成了两套不同的体系,这样不仅浪费更多的存储空间,也使得大数据的开发成本倍增。易数数据中台首次将批计算和流计算的编程模型进行了统一,提高了大数据应用开发的简捷性,极大降低了开发成本和运营成本。同时,数据中台基于批流异构数据统一管理,并研发了大规模作业调度保障技术,可以有效兼顾数据预测和基线运维能力,保障大规模复杂任务。
目前,易数数据中台已经形成了完整的大数据解决方案,包括数据传输、离线开发、自助分析、任务运维中心、实时开发、数据质量中心、指标系统、数据资产中心、模型设计中心、数据地图、数据服务、流程协作与通知中心、问答中心等多个功能模块,可以集中管理异构大数据源并提供实时计算分析能力,将从海量数据中发掘的结果以动态可视化的形式展示,为有大数据积累的中大型企业提供数据集成、存储、计算、分析和挖掘能力。
易数数据中台实现支持1000个以上计算节点,单日处理数据能力达到PB级别;实时计算能力支持计算100亿条数据/天的能力,可处理超过15万条/秒的日志数据;批流统一存储和管理,数据存储空间降低50%,提供分钟级数据延迟;90%的作业预测误差在10分钟内,作业按期完成率95%以上。网易云音乐在实际应用中,实现代码量减少35%,物理结点节约30%,同时开发人员减少了1/2。
应用方面,网易易数与国产鲲鹏生态紧密结合,已经完成大数据兼容性测试,成为华为ISV伙伴并获得华为鲲鹏认证。在智能制造、零售、金融、能源、医药、互联网等行业领域中,易数数据中台已得到广泛应用,有效助力传统企业数字化转型升级,推动大数据产业发展。
相关文章
- 网易云音乐深度集成DeepSeek大模型 打造更智能的内容创作消费体验
- DeepSeek入驻全球首款AI游戏,网易伏羲【有灵·易生诸相】平台提供技术支持
- 网易伏羲【有灵·易生诸相】平台助力网易数智旗下业务全面接入DeepSeek
- 网易伏羲有灵AOP平台首届编程挑战赛揭晓获奖名单
- 网易易盾发布业内首个内容安全成熟度模型,助企业提升风险防范及应对能力
- 网易专访微云集团高级副总裁郑燕芳:以践行者之名,推动AI医疗普适化
- 金豪漾与网易伏羲合作签约仪式隆重举行
- 2024中国设计智造大奖揭晓,网易伏羲有灵玉声平台荣膺“佳作奖”
- 人机协作智能体如何助力人形机器人产业发展?网易伏羲受邀分享前沿观点
- 坚持AI战略,网易云商公布最新AI应用落地进展
- 新质生产力远销海外!网易徐工联合研发国产机器人落地首个“黑灯工地”
- 网易数智获 2023 年度浙江省科学技术进步奖一等奖
- 逆水寒携手网易伏羲邀请五大AI厂商,共创全球首个游戏内AI竞技场
- 纯血鸿蒙应用市场预告:网易云音乐、企业微信等多款主流应用即将上架
- AOP框架推动新质生产力,CNCC2024网易伏羲分论坛展示前沿创新成果
- 云音乐上市公司拟更名为网易云音乐股份有限公司 上月被纳入港股通