杉岩数据金融行业对象存储解决方案
立即咨询
首页
什么是对象存储?互联网非结构化存储主流技术 超大存储容量
起源于内容寻址存储技术 · 并发访问>1000万
最早规模应用：AWS S3(2006) · 容量上限>1EB
存储规模超万亿文件 · 通用服务器，硬件成本低。
对象存储在公有云数据湖的定位
对象存储在公有云数据湖的定位
数据湖对存储的需求数据湖 - 维基百科
“数据湖是一种在系统或存储库中以自然格式存储数据的方法，它有助于以各种模式和结构形式配置数据，通常是对象或文件。
为什么数据湖的核心是对象存储：文件管理规模100倍以上提升
为什么是对象存储：更适合云原生架构
为什么是对象存储：混合云基础架构
金融行业采用对象存储的主要场景
影像系统存储 (替换FileNet/Documentus)
生态：信雅达/中科软等都支持S3接口
性价比高：ECM采购和维护成本高
性价比高：ECM采购和维护成本高
通用性好：S3标准接口，避免被厂商绑定
安全性高：支持容灾、多版本
容器平台
· 容器业务基于云原生构建，非结构化数据采用S3接口
· 扩展性好：业务弹性扩展更灵活，无需挂载，无连接限制。
· 扩展性好：业务弹性扩展更灵活，无需挂载，无连接限制。
互联网金融业务
· 开发更方便：RestFul接口，Web/Mobile开发更简单
· 业务迁移方面：与公有云统一S3/OSS接口
· 业务迁移方面：与公有云统一S3/OSS接口
备份 / 归档 / CDM存储
· 生态：NBU/CV/英方/爱数都支持S3
· 性能高：对象存储吞吐性能非常高。
· 扩展性：容量可弹性EB级扩展
· 性能高：对象存储吞吐性能非常高。
· 扩展性：容量可弹性EB级扩展
大数据平台（替换HDFS）
· 生态：Hadoop原生S3A支持对象
· 性价比：60%-80%磁盘利用率
· 性价比：60%-80%磁盘利用率
· 维护更简单：计算层独立升级，快速使用新特性
· 存算分离：存储独立扩容，成本更低
· 存算分离：存储独立扩容，成本更低
机器学习存储
生态：提供高性能NFS网关
应用场景：金融影像系统
客户挑战
· 海量小文件性能差：KB级小文件为主，读写性能下降。
· 管理复杂化：业务对容量的需求不确定，单个LUN的容量难规划，频繁的扩容变更操作，管理难度增大。
· 影像数据备份难：传统备份成本高，备份和恢复效率低。
· 管理复杂化：业务对容量的需求不确定，单个LUN的容量难规划，频繁的扩容变更操作，管理难度增大。
· 影像数据备份难：传统备份成本高，备份和恢复效率低。
解决方案&客户收益
· 金融影像平台：整合服务器及硬盘资源，作为金融影像系统的底层存储基石，替换ECM系统。
· 解决存储难题：弹性扩展，统一命名空间，消除瓶颈。
· 生命周期迁移：数据自动分层，兼顾存储、性能、成本，纳管第三方NAS，利旧、经济、高效
· 内容感知、价值挖掘：业务访问与AI平台共享存储，避免搬迁；与TensorFlow等垂直整合，提高效率。
· 解决存储难题：弹性扩展，统一命名空间，消除瓶颈。
· 生命周期迁移：数据自动分层，兼顾存储、性能、成本，纳管第三方NAS，利旧、经济、高效
· 内容感知、价值挖掘：业务访问与AI平台共享存储，避免搬迁；与TensorFlow等垂直整合，提高效率。
应用场景：机器学习
客户挑战
· 数据量大，迁移成本高：大量离线数据搬迁成本高
· 数据孤岛，安全风险大：各阶段部署多套存储，形成数据孤岛，数据交互成本高，风险大。
· 读取效率低，训练周期长：文件读取效率决定了整个训练的周期长短，传统存储难以满足需求。
· 读取效率低，训练周期长：文件读取效率决定了整个训练的周期长短，传统存储难以满足需求。
解决方案&客户收益
· 智能存储平台：提供全流程数据的统一管理及能力扩展适配，标签检索、图像处理等能力，简流程提效率。
· 全流程数据统一：打通各阶段的壁垒，让流程切换更顺畅，降低管理成本，提高存储利用率。
· 训练周期更短：标签特性优化准备工作;智能缓存增强读取性能；标准接口支持，减少开发适配工作。
· 全流程数据统一：打通各阶段的壁垒，让流程切换更顺畅，降低管理成本，提高存储利用率。
· 训练周期更短：标签特性优化准备工作;智能缓存增强读取性能；标准接口支持，减少开发适配工作。
应用场景：大数据存算分离解决方案
客户挑战
成本高：HDFS三副本，磁盘利用率30%
存储&计算捆绑扩容：计算资源跑存储
Hadoop升级不够灵活：大版本HDFS不兼容，无法享受新版本计算新特性
存储&计算捆绑扩容：计算资源跑存储
Hadoop升级不够灵活：大版本HDFS不兼容，无法享受新版本计算新特性
解决方案&客户收益
成本更低：支持EC和冷热分层，综合磁盘利用率60%~80%
独立扩容：存储/计算独立扩容，资源投放更有效
独立扩容：存储/计算独立扩容，资源投放更有效
独立升级：兼容HDFS前提，Hadoop可以快速升级，享受新特性
杉岩对象存储新场景：新一代原生云OLAP场景
解决方案优势
· 非结构化&结构化统一存储，管理更轻松。
· 通过扩展S3接口，将部分查询OfLoad到存储，提升数据检索效率。
· 成本更优化：利用副本+EC，分层存储，提升整体存储成本。
· 通过扩展S3接口，将部分查询OfLoad到存储，提升数据检索效率。
· 成本更优化：利用副本+EC，分层存储，提升整体存储成本。
金融行业对象存储规划建议选择部分系统采用对象，如：影像、备份网盘、电子档案、互联网业务
HDFS迁移到对象或者采用云原生数仓容器平台采用对象更多业务系统迁移。
全面采用对象存储，构建统一数据湖。
客户案例：广发证券档案系统建设
业务痛点分析
· 海量小文件，文件规模达到亿级别，NAS查询性能低
· 双录、视频开户数据量大，容量持续爆发性增长
· 跨数据中心链路占用多大，影响业务带宽
· 前端应用通过档案Web服务才能访问NAS文件，影响性能
解决方案
· 采用12台分布式存储系统，构建杉岩对象存储系统
· 两个数据中心同城双活，各个数据中心的业务数据直接写入本中心存储。证卷交易时间对跨数据中心复制进行QoS控制
· 两个数据中心同城双活，各个数据中心的业务数据直接写入本中心存储。证卷交易时间对跨数据中心复制进行QoS控制
· 前端Web应用通过S3接口访问存储
客户案例：支撑广发证券建设公司级的非结构化数据存储平台客户收益
· 文件数100亿级别，访问时延低于100ms
· 弹性扩展，满足未来数据长期归档查询需求
· 双向数据异步复制，实现数据中心双读双写
· 支持跨数据中心复制QoS控制，避免交易时间占用大带宽
· 前端Web直接通过S3协议(基于HTTP)访问存储，带宽大、性能更高。
客户案例：支撑北京银行信用卡中心非结构化数据管理
客户的挑战
· 数据共享不便：使用FTP服务器作为中转，通过上传下载，在应用间传递数据。
· 检索不便：只能通过文件名查找，且无法实现历史数据在线查询。
· 数据管理复杂：多套传统存储，非结构化数据增长很快，运维管理压力较大。
· 检索不便：只能通过文件名查找，且无法实现历史数据在线查询。
· 数据管理复杂：多套传统存储，非结构化数据增长很快，运维管理压力较大。
解决方案和客户收益
· 非结构化数据统一管理：统一管理海量语音、图片、文档、凭证等非结构化数据
· 冷热数据分层：数据在不同存储池和设备之间自由流动，应用无感知
· 自定义文件标签：亿级文件毫秒级检索
· 支持多种访问方式：支持NFS、FTP、S3协议，业务系统快速接入。
· 冷热数据分层：数据在不同存储池和设备之间自由流动，应用无感知
· 自定义文件标签：亿级文件毫秒级检索
· 支持多种访问方式：支持NFS、FTP、S3协议，业务系统快速接入。
客户案例：帮助CFCA将50亿文件的检索耗时从分钟级提升到秒级
客户的挑战
国家级权威安全认证机构：服务2400家金融机构
海量文件带来性能压力：每月产生5000万个电子合同文件，存储性能压力大
应用和数据管理复杂：应用需维护数据库和NAS两套。命名空间，数据迁移管理复杂，维护变更的工作量大。
海量文件带来性能压力：每月产生5000万个电子合同文件，存储性能压力大
应用和数据管理复杂：应用需维护数据库和NAS两套。命名空间，数据迁移管理复杂，维护变更的工作量大。
解决方案和客户收益
MOS异构接管现有NAS：50亿个文件迁移到杉岩对象存储。
冷热数据分层：数据在不同存储池和设备之间自由流动，应用无感知。
性能提升2倍：成本降低40%，检索耗时从分钟级提升到秒级。
冷热数据分层：数据在不同存储池和设备之间自由流动，应用无感知。
性能提升2倍：成本降低40%，检索耗时从分钟级提升到秒级。
客户案例：助力人保财险广东分公司建设履约保证保险影像平台
客户的挑战
· 数据增长快：小额高频交易，数据量增长无法预期，传统存储扩容周期长。
· 混合云兼容：第三方贷款公司多采用公有云对象存储，要考虑兼容性。
· 混合云兼容：第三方贷款公司多采用公有云对象存储，要考虑兼容性。
解决方案和客户收益
· 高效率低成本：利用通用服务器建设存储资源池，解决ECM系统扩容难、备份难的问题
· 弹性扩展：增加服务器即可线性扩展容量和性能，存储平台弹性伸缩
· 标准接口：支持与主流保险行业影像平台集成。
· 弹性扩展：增加服务器即可线性扩展容量和性能，存储平台弹性伸缩
· 标准接口：支持与主流保险行业影像平台集成。
客户案例：招商信诺影像统一存储平台
业务痛点
· 运行在公有云上的互联网应用无法与NAS交互，需要通过后台访问存储，导致后端应用的数据传输压力大。
· 核心系统影像存储在ECM(IBMFileNet)系统，而互联网应用存储在NAS，用户信息割裂。
· 运行在公有云上的互联网应用无法与NAS交互，需要通过后台访问存储，导致后端应用的数据传输压力大。
· 核心系统影像存储在ECM(IBMFileNet)系统，而互联网应用存储在NAS，用户信息割裂。
· 应用微服务化，NAS的挂载机制导致部署和运维复杂。
解决方案
· 利用SandStone MOS+X86服务器搭建分布式对象存储集群
解决方案
· 利用SandStone MOS+X86服务器搭建分布式对象存储集群
· 将核心影像、电商/会员等互联网应用的存储统一
· 电商/会员APP数据流直接从数据中心的对象存储读取
客户收益
· 对象存储S3接口是RESTFul接口，APP经过授权下可直接访问存储，从而降低应用的流量压力，提升了访问效率。
客户收益
· 对象存储S3接口是RESTFul接口，APP经过授权下可直接访问存储，从而降低应用的流量压力，提升了访问效率。
· 统一了核心影像和互联网业务影像，实现数据统一管理。
· 应用通过SDK访问存储，无需在系统层面挂载，部署和运维更灵活。
· 应用通过SDK访问存储，无需在系统层面挂载，部署和运维更灵活。
客户案例：深圳证券信息有限公司 - 私有云平台存储
解决方案
· 在通用x86服务器上搭建杉岩统一存储平台(SandStone USP)，支撑企业所有网站系统和上层k8s容器云平台对接，实现文件快速上传，按需智能分配存储资源的功能。
· 结合SandStone USP自研的AgileCache，智能缓存、智能感知上层应用，满足业务系统的高性能要求。
· 结合SandStone USP自研的AgileCache，智能缓存、智能感知上层应用，满足业务系统的高性能要求。
· SandStone USP通过CSI存储接口，对接k8s容器云平台，满足业务系统快速上线、提供持久化存储空间，保障存储性能和数据安全。
客户收益
· 存储空间按需分配，弹性扩展，实现存储性能的线性增加。
· 存储系统和容器解耦，满足业务系统快速上线。
· 存储系统高可用，当个别节点或硬盘故障时，保证业务连续不中断。
· 存储系统和容器解耦，满足业务系统快速上线。
· 存储系统高可用，当个别节点或硬盘故障时，保证业务连续不中断。
产品推荐
云上曲率互动游戏实时音视频解决方案
云上曲率互动游戏实时音视频解决方案，提供游戏语音连麦 SDK 与游戏内容风控 SDK 接入服务。支持游戏内实时语音连麦互动，同步通过风控 SDK 保障内容合规，适配各类互动游戏场景。助力游戏平台提升社交体验与内容安全，是互动游戏音视频服务的优选方案。
飞致创阳 RFID 智能仓储管理系统，聚焦 RFID 库位管理与仓库库存管控。提供智能库位标记、RFID 快速盘点及库存实时更新功能，集成出入库扫码核验、货位优化及库存预警，支持仓储全流程数字化管理。是智能仓储管理优选系统。
冰柏科技TrackSight运动目标跟踪分析系统，由冰柏科技自主研发的、国内首个专为追踪和分析各类运动物体的空间轨迹、姿态和轮廓变化的专业系统。系统深度融合计算机视觉与人工智能算法，实现多类型运动目标的自动跟踪与精准数据分析，显著提升数据处理效率与精度。
数字化社区
视频
文章
