
云海分布式存储产品概览
云海以全自研统一引擎为底座,提供块存储、对象存储、文件存储、并行文件存储、大数据存储 5种自研产品,支持标准x86或信创存储服务器;已在京东公有云上规模使用,并以纯软授权、软硬一体机方式独立输出。

云海产品能力分析

云海与传统分布式存储对比
与传统分布式存储架构相比,云海存储构架在 性能、可用性、可靠性、体验 有明显优势

云海产品能力 – 交付方式
存算分离的需求、趋势、难点
云海 – 释放存算分离价值

云海 – 释放存算分离价值

云海存算分离实践:京东云 RDS & ES
存算分离收益:由原来多个业务 孤立资源池,拉通到一个全局共享的弹性资源池;计算资源利用率明显提升,存储资源利用率提升到 80%以上。

云海存算分离实践:京东云原生数仓
存算分离数仓,极低的使用和运维成本
云海存算分离实践:京东云原生数仓
存储资源利用率由原来30+%提升到 80%以上,支持根据用量按需扩容,避免阶梯扩容的资源浪费

京东 AI 训练产品与场景

极速型文件存储与 AI 训练
场景挑战:在自动驾驶的大规模 AI 训练的场景下,数据读写的性能会直接影响训练效率。AI 场景下的数据访问特性主要表现在:海量小文件,由于训练任务需要的文件数量都在几亿到十几亿的量级,同时,由于很多训练模型都是依赖于图片、音频片段、视频片段文件,而这些文件基本上都是在几 KB 到几 MB 之间。读多写少,在大部分场景中,训练任务只读取文件,中间很少产生中间数据,即使产生了少量的中间数据,也是会选择写在本地,很少选择写回存储集群。目录热点,由于训练时,业务部门的数据组织方式不可控,很有可能用户会将大量文件存放在同一个目录,容易导致多个计算节点在训练过程中,会同时读取这一批数据,这个目录所在的元数据节点就会成为热点。
云海对象存储 – 产品特点

云海特点 – 多机房机制

音视频、图片存储客户案例
音视频、图片存储客户案例
金融类场景案例




