立即咨询

电话咨询

微信咨询

立即试用
商务合作

大道云行TaoCloud FAFS全闪文件存储系统

大道云行TaoCloud FAFS全闪文件存储系统,基于分布式全闪存储架构,通过元数据管理、数据组织、I/O 流程优化等多方面优化,可以有效释放全闪存介质的性能,实现海量文件访问的快速响应、持久稳定存储。满足需要存储系统提供超高访问带宽、大容量存储空间、以及通用文件访问接口,满足大量数据快速查看、编辑、分析处理、共享等多方面的需求。
立即咨询
iconTaoCloud产品总览icon

 

 

iconFAFS分布式全闪文件存储系统icon

 

 

iconFAFS产品优势总览icon
全栈自主研发
· 全栈自主研发(包括NFS/SMB server实现)核心服务运行在一个进程;
· 自研高效链路聚合,无需手动bonding;
· 基于changelog的一致性哈希算法,扩容后只需要均衡极少数据即可达到平衡;
· 基于B+树的元数据磁盘结构,非开源DB。
领先性能优势
· 全异步IO模型,性能远超SMB/NFS开源方案;
· 带宽轻松应对HPC/EDAVAIGC等应用需求;
· 高效ACL实现,设置ACL后对性能无影;
· 高效快照实现,快照后性能无衰减;
· 高效配额实现,设置配额后对性能无影响。
轻松部署升级
· 极简部署,节点自动发现,一键搭建集群;
· 稳定可靠的升级系统,一键升级所有集群节点;
· 支持离线升级和在线滚动升级产品实测升级0失败。

 

 

iconFAFS产品规格icon
 
协议特性
· 支持SMB Persistent File Handle(SMB高可用),网络切换业务不报错;
· 支持SMB的Mac0S扩展协议,MacOS访问更高效;
· 原生支持SMB Case Insensitive/Case Preserving,无性能损耗· 统一ACL权限模型,无需考虑复杂的踌协议互操作,支持CLI/GUI设置。
 
易用可靠
· 一键搭建集群,5分钟即可完成集群部署;
· 支持离线升级(10分钟内完成),支持在线滚动升级;
· 支持单节点部署,扩展后即可恢复节点级冗余;
· 快速的故障切换,任意网络/节点故障,对业务影响时间<5秒

 

iconFAFS高性能优化技术icon
1、全路径RDMA
减少CPU计算开销,降低传输时延,提升传输带宽。
3、自研NAS服务组件
充分发挥CPU性能,提升传输带宽
5、内存优化技术
缩短文件系统内数据传输时延
7、智能预读技术
有效提高读数据的响应速度及带宽。
9、显卡直接访问存储
支持GDS(NVIDIA GPUDirect Storage)技术。
2、MultiPtah X
无需配置即可实现多链路聚合,充分发挥端口性能。
4、元数据分离部署
有效提升小文件读写性能。
6、智能分配技术
提高大文件空间存放连续性,有效提高空间利用率
8、统一权限模型
基于Windows ACL,权限丰富,可以设置多个用户
icon端到端RDMA高效通信icon

 

 

iconMultipath X高效链路聚合:满带宽、高可用icon

无需设备支持,即可高效聚合后端多个网络带宽,并提供冗余能力。

速 率:10Gb~40Gb //取决于modeX(X=?)
效 率: 取决于Bonding模块,应用层较难获知链路状态;
鲁棒性: 取决于modeX(X=?)
配 置:需要人工配置(甚至交换机)
其 它:实测表明,不适合文件10
                  速 率:40Gb
效 率: Per-link/Per-thread,应用层实时获得链路状态;
鲁棒性: 自管理、自适应;
配 置:无额外配置,仅需连线;
其 它:实测高性能、高鲁棒

 

icon高效NAS服务组件,更高并发吞能力icon

 

 

icon元数据/数据分离存储,优化文件访问性能icon

FAFS在目录下50万文件情况下列目录,6秒索引完毕。

 

 

icon内存拷贝优化:多模块统一内存管理、高效数据交换icon

所有软件模块在统一内存空间交换数据,各模块数据零拷贝共享,有效降低了IO路径上的处理延迟,提高存储带宽。

 

icon智能预读:连续数据访问大幅提速降icon
 
智能预读
· 自建缓存管理,预读优化,多磁盘协同;
· 同一文件,智能预判即将读取的数据内容,预先加载进内存
· 不同文件(序列帧),智能预判即将读取的文件,预先加载进内存
 
基因测序类场景:有效提高访问数据响应速度,降低业务时延;
视频非编类的场景:有效提高回放的稳定性,降低丢帧的可能性

 

icon智能空间分配:大小文件兼顾,存储高效利用icon

· 文件系统根据文件大小自动匹配相应Allocsize;

· 大文件存放连续性更好;

· 小文件不浪费空间。

 

 

icon统一用户管理一本地用户与AD用户统一管理icon

· 本地用户、AD用户同时共存;

· 本地用户、AD用户统一管理;

· 所有用户/用户组不区分协议;

· 同一用户可通过多个协议登陆(S3、SMB、FTP)。

 

 

icon多协议统一权限模型 - 全局统一精细粒度权限控制icon

FAFS在同一套文件系统下,多协议下权限互通,同一用户使用不同协议访问都被赋予完全一致的权限模型。

 

 

icon多协议数据互通icon

 

 

iconGDS支持:显卡直接访问存储icon

 

 

iconSMB Multichannel:带宽叠加、突破单路径限制icon

· 增加传输带宽: 服务器可以同时使用多张网卡,提升数倍传输带宽。
· 网络冗余:当使用多通道带宽叠加后,即使有部分网卡出现故障,客户端仍可继续访问共享,不会中断。
· 即插即用:无需特殊设备支持,系统会自动探测发现多通道,并建立连接。

 

 

iconSMB Multichannel性能对比icon

 

 

iconSMB高可用技术 - 高可用共享服务icon

 

 

iconFAFS典型应用场景icon
超算智算
生命科学、基因测序
石油勘探、气象分析。
AI/大模型
深度学习、大模型训练
自动驾驶、数字孪生
金融科技
影像后督、私募量化
容器应用、测试开发
媒体企业
融媒体、高清非编、CDN
云桌面、协作共享

 

icon三节点性能测试icon

 

 

icon单节点性能测试icon
 
20.2110.4万 IOPS
4KB文件4KB粒度随机读/写

50.4/15.5万 IOPS
1GB文件4KB粒度随机读写

11.1/10.0 GB/S
单客户端单流读写带宽

66.1/45.2 GB/S
总体读/写带宽

 

 

icon大模型业务性能测试icon
 
 
127GBIS
读带宽
 
 

70GBIS
写带宽

 

 

产品推荐

劢微机器人自然导航全向舵轮AMR
全向舵轮AMR潜伏至货物下方,通过顶升的方式抬起整托货物并进行搬运,货物及载具总重量不超过载重负荷。全向舵轮AMR潜伏至载具下方,通过顶升的方式自动对接载具,使用牵引的方式道东载具移动,可以实现大尺寸料车、货架的牵引,对通道的宽度,空间有更高的要求。
免费试用
查看详情
泛微网络eteams—— 一体化的移动办公云平台
融合18年经验打造的适用于企事业单位的SaaS一体化移动办公云平台,包含移动审批、项目任务协作、CRM、知识分享、数据协作等诸多应用。
免费试用
查看详情
微盟X微信小店全链路经营解决方案
微盟 X 微信小店全链路经营解决方案,致力于挖掘微信生态商业潜力。作为一体化小店运营方案,能在同一系统实现双平台商品订单管理。还提供 CRM 会员运营策略,将公域流量巧妙沉淀为专属用户资产,全方位助力商家提升经营效率与收益。
免费试用
查看详情
合电站企业采购定制商城系统
合电站企业采购定制商城系统,专注企业级采购场景,提供员工福利商城与商务采购一体化解决方案。支持全流程数字化采购管理,涵盖商品定制、批量下单、物流跟踪等功能,精准匹配企业集采需求。通过智能供应链整合与价格管控,降低采购成本,提升效率。助力企业构建专属采购平台,实现福利发放与商务采购的智能化、规范化,是企业数字化采购的优选方案。
免费试用
查看详情