icon数据库同步面临的问题icon

传统数据同步方式通常只能解决以上问题的其中一部分,无法同时解决以上所有问题。

数据异构严重

硬件平台/操作系统/数据库类型/数据库版本/数据结构/字符集等各不相同、互不兼容。

实时性不高

数据同步周期长、延迟大,无法满足业务的高实时要求。

成本高

用于灾备的产品采购成本高,部署复杂,甚至要求改造业务系统及网络结构;使用门槛高,后期维护困难。

对数据库干扰大

需要在数据库中创建大量触发器/存储过程/临时表等;需要在数据库中安装插件/程序/补丁包;数据库需要停机/重启等。

一致性无法保证

数据同步不准确、不全面,造成数据错误、遗漏、重复等问题。

icon网御实时数据库同步系统(RDS)icon
产品概述
网御实时数据库同步系统,简称RDS,是一款可以在各种数据库之间实现数据准实时同步的产品。由网御星云完全自主研发,具有低影响、低延迟、高性能等特点。广泛适用于各种数据库之间的数据容灾热备、数据汇聚、数据分发、数据共享与交换等业务场景下。
icon核心功能icon
对数据库低干扰
无需创建触发器等对象,无需与数据库安装在一起,数据库保持双活。
数据异构同步
支持各种软硬件平台、数据库类型、字符集、数据结构等的异构同步。
无缝融入业务环境
通过交换机旁路部署,现有网络结构及业务系统无需改造。
海量数据同步
支持TB级存量数据在线迁移、日均数亿条增量数据同步、上万张数据表。
低延迟
支持数据的秒级延迟同步。
支持容灾切换
支持数据库热备容灾及主备库之间数据流向的在线切换。
同步过程高度可控
运行状态实时监控、交换记录细粒度审计及查询、异常实时报警。
国产化
网御星云自主研发,具备完全的自主知识产权。专业及时的售后服务响应。
icon产品优势icon
数据库日志文件解析
解析数据库归档日志、在线日志文件,精准定位和还原增量数据。
数据一致性保证
严格按照源端操作顺序还原数据,以事务方式入库,保证数据一致性。
数据跨网复制
结合隔离交换类产品一起部署,可实现数据库数据的跨网复制。
支持多种数据库类型
支持Oracle、MS SQL、DB2、Sybase等各种常见关系型数据库。
数据选择性同步
可自主选择要同步数据的用户、表、字段,以及自定义数据过滤条件。
数据库对象迁移
可实现Oracle数据库间12种数据库对象的在线迁移。
多任务
单套产品可承载多个数据库,以及多个同步任务而互不干扰。 B/S架构
全中文图形化界面,方便快捷,更符合国内用户使用习惯。
iconRDS用途1:数据库数据汇聚icon

支持多来源、高复杂场景下的数据库数据采集和汇聚

iconRDS用途2:数据库容灾热备icon

实现生产数据库的本地、异地容灾热备,且数据库保持双活。

iconRDS用途3:数据库分发和共享icon

支持把中心数据库的数据分发共享给多个单位或应用的目标数据库

icon解决数据同步对数据库干扰大的问题icon

采用目前最先进的数据库日志文件解析技术原理,实现对增量数据的采集和复制。 不需要在数据库中创建任何触发器、存储过程、临时表等对象,也不需要安装插件或补丁。 旁路部署,不需要与数据库安装在一起,实现与数据库的松耦合。 把对数据库的干扰降到最低。

icon解决数据同步异构严重的问题icon

支持硬件平台、操作系统、字符集的各类异构数据同步

icon解决数据同步异构严重的问题icon

支持数据库类型、数据结构的各类异构数据同步

icon解决数据同步实时性不高的问题icon
icon解决数据同步一致性的问题icon
NFS SMB Agent

通过NFS、SMB、客户端等把日志文件挂载或传输到RDS本地。

数据比对修复工具

如果由于不可预期的异常而导致两端数据不一致,可以使用RDS提供的数据比对修复工具对数据进行比对,并对差异数据进行修复。

日志采集

根据sequence号实时拷贝源端数据库新增的所有日志文件并暂存到本地。

交易装载

按照顺序,读取解析进程生成的数据文件,把交易数据还原后通过JDBC装载到目标库中。 自动判断是否装载成功。 如果在装载过程中发生异常,该数据文件会被保留并记录断点。 等故障恢复后,自动从断点处继续装载,装载失败的数据会被重新装载。 直至该数据文件内的数据全部被装载成功后,该数据文件才会从本地删除。对于装载失败后的处理机制,可以自由选择是停止装载还是跳过继续处理。

日志解析 数据合成

按sequence号顺序读取暂存到本地的日志文件,并严格按照日志文件中的scn号顺序解析并捕获增量数据。 捕获到的增量数据会落地成私有格式的数据文件暂存在本地,并对文件进行排序。 解析完成的日志文件会按照指定的备份策略保存到本地的备份文件夹中,以便在意外发生数据丢失的情况下再次解析来恢复数据。

icon解决数据灾备成本高的问题icon
部署成本低

通常1台独立服务器,通过交换机旁路部署即可。 基于TCP/IP网络,只传输指定的有变化的数据,降低对网络带宽的需求。 无需改造现有业务系统,无需改造当前网络结构。

使用成本低

B/S架构,全中文图形化界面,向导式配置流程,人机交互友好,使用门槛低,简单好用。

维护成本低

设备责任边界清晰,与业务弱关联,与数据库松耦合。 全流程图形化状态监控,异常实时报警。 原厂专业技术支持,全国7*24小时售后服务响应。

icon把灾备成本中心变成利润中心icon
icon业务系统可随时切换到备库icon

正常情况下,业务系统使用生产数据库处理业务数据;RDS把生产库的数据实时备份到灾备数据库中。 当生产数据库故障后,业务系统可随时切换到灾备数据库上继续运行。 当生产库恢复正常后,RDS把灾备数据库中的增量数据反向恢复到生产库,业务系统重新切换到生产库上继续运行。

icon同步技术对比1:基于数据库引擎 icon

RDS不但具备该技术的优势,还可解决所有劣势问题。

实现方式

通过触发器/全表扫描/时间戳/存储过程等技术,利用数据库引擎本身的处理能力,实现数据的采集及同步。

优势

数据同步的实时性较高。 目标端数据库始终可用,可用于查询分离、报表分析等用途。 可具备数据异构同步能力。 可具备同步数据的审计能力。

劣势

对数据库的性能影响严重,特别是在表数量多、数据量大的情况下,甚至会造成数据库不可用。 只能同步DML数据或部分DML数据,无法同步DDL数据,同步的数据不全面,无法用于数据库的整库热备。

icon同步技术对比2:基于应用分发icon

RDS不但具备该技术的优势,还可解决所有劣势问题。

实现方式

业务系统在处理业务数据时,把数据同时写入2个不同的数据库中。

优势

数据同步的实时性最高。 目标端数据库始终可用,可用于查询分离、报表分析等用途。

劣势

数据同步与业务系统强耦合,业务系统需要较大改造。 数据一致性无法保证。 历史数据无法同步。 如果做灾备的话,数据恢复困难。 数据审计能力完全依赖业务系统的功能设计。

icon灾备技术对比1:基于存储拷贝icon

RDS不但具备该技术的优势,还可解决所有劣势问题。

实现方式

通过拷贝数据库服务器磁盘数据块的技术,实现数据的采集及同步。

优势

数据同步的实时性较高。 数据同步较为全面。

劣势

只能冷备,备份数据只能用于恢复数据,无法二次利用,比如:查询分离、报表分析等。 执行数据恢复时,需要业务中断、数据库停机。 数据恢复粒度较粗,只能以数据块为单位恢复,无法精准恢复业务表数据;且数据恢复过程复杂、周期长、易出错。 对网络带宽要求很高,且通常无法实现距离较远的异地灾备。 不支持数据库异构。 同步数据的审计粒度较粗,无法审计到具体的业务数据。 对服务器的磁盘IO压力较大,且对磁盘的损耗也较大。

icon灾备技术对比2:基于日志文件备份icon

RDS不但具备该技术的优势,还可解决所有劣势问题。

实现方式

通过备份数据库的归档日志文件实现数据备份。

优势

数据可恢复性较好。 成本较低。

劣势

备份实时性最差。 只能冷备,备份数据只能用于恢复数据,无法二次利用,比如:查询分离、报表分析等。 执行数据恢复时,需要业务中断、数据库停机。 需要人工干预较多,且对操作人员的技术水平要求较高。 不支持数据库异构。 没有审计能力。

icon历史数据在线迁移及无缝切换icon
无需停止数据库,不影响前台业务正常使用,即可把源端数据库中的历史数据在线迁移到目标库。历史数据迁移完成后,无需人工干预,即可自动切换到增量数据的采集复制。通常用于数据库的容灾备份及数据修复。
iconOracle数据库对象在线迁移icon
支持Oracle数据库12种对象在线迁移到目标库中,无需停止数据库,不影响前台业务的正常运行。可用于初始化目标端数据库,大幅降低施工的工作量及复杂度。
iconOracle数据库DDL数据采集icon

对于Oracle数据库,不但可采集DML数据,还可同时采集DDL数据。 采集的数据更丰富、更全面,可为大数据分析平台提供数据的操作细节信息,亦可成为数据库审计的有益辅助手段。

icon选择性数据复制及数据过滤 icon

可以只同步指定的数据,实现按需同步。

icon记录审计icon

实现数据同步行为的可追溯

icon数据对账icon

实现两端数据库数据总量及数据内容的核对,并对差异数据进行修复。

icon多任务并行而互不干扰 icon

单套产品可承载多个数据采集任务,每个任务都可独立控制运行,彼此之间互不干扰。 单套产品可同时接入多个及多种业务数据库,实现多个数据库的数据同时采集。

icon数据复制过程高度可控icon

全流程图形化状态监控,实时掌握数据同步运行情况。

icon支持异常报警icon

实时发现并解决异常问题。

icon运行环境自主诊断icon

提前发现风险,并及时发出预警信息。

icon故障处理及断点续传icon
icon支持同步任务调度策略icon
icon数据库异地容灾热备(医院)icon
实现了总院业务库的异地在线热备,提高业务系统的可用性和抗灾能力。 实现了总院和分院之间的数据实时共享。 实现了总院业务库的查询分离,把大量查询业务从总院业务库上迁移到分院备库上运行,大幅降低总院业务库的运行压力,提高业务库处理性能。
icon数据汇聚(住建部) icon
2014年,把全国省市的个人住房信息汇聚到住建部的中心机房,为国家制定房地产市场政策提供技术支撑。直接从生产库中无干扰数据采集。 实现了数据的高实时同步。 实现了各种复杂环境下的数据采集和汇聚。 实现了核心数据库的热备容灾。
icon跨网数据复制(边界接入类)icon

实现生产库数据的低干扰采集,并进行跨网实时复制交换

产品推荐 查看更多>>
    McAfee管理

    优化虚拟桌面和服务器的安全性McAfee Management for Optimized Virtual Environments (MOVE) AntiVirus 可为内部部署和云端部署的虚拟桌面和服务器提供先进的病毒防护功能。

    高效稳定

    安全可靠

    浪潮云Web应用防火墙

    Web应用防火墙(简称WAF)用于针对web网站的常见攻击进行监测和阻断。支持发现SQL注入、XSS跨站等web攻击行为。

    功能完备

    安全可靠

    Cloudflare应用程序安全系统

    Cloudflare确保应⽤和API安全、⾼效,阻⽌DDoS攻击,拦截机器⼈,检测异常和恶意负载,并监控浏览器供应链攻击。采⽤统⼀架构、从头开始构建的⽹络。每项安全服务运⾏于每个服务中⼼上。 保护任何云、SaaS、API 或其他现代应⽤程序⼯具。

    API安全

    统⼀架构

    托管规则

    数据分析