全民突击荣蒋飞|全民突击合作模式战力未达到要求|

R7-DIP 数据集成交互产品

数据集成交互产品是一款能够对来自不同数据源和不同结构形成的海量数据进行实时采集,传输,处理加工与交互整合的高效工具。

翱旗在线
导航

01

什么是R7-DIP数据集成交互产品
WHAT IS R7-DIP
R7-DIP

数据交互产品示意图

R7-DIP 数据集成交互产品是一款能够对来自于不同数据源和不同结构形式的海量数据进行实时采集、传输、处理加工与交互整合的高效工具。主要应用在数据采集抽取、数据容灾、数据集中与分发、实时数据共享交换等工作场景。能够对结构化和非结构化数据,特别是对数据库中数据的变化进行实时感知,进行自动化的传输和加工转换。对收集的数据进行溯?#30784;?#28165;?#30784;?#23500;集、提取、解析,真正有效为用户解决现有信息化系统中的多源异构数据融合问题。

R7-DIP 具有业界最强的多源异构数据实时集成交互能力,架构上采用非侵入式、集中管控,对业务系统无干扰,大幅度降低运维难度和成本,是目前?#30340;?#39046;先的数据传输和集成产品。同时R7-DIP具有无代码、可视化的统一管理运维界面,所见即所得,提供高易用与低成本的管理运维体验。


02

数据集成交互产品特点
R7-DIP FEATURES

1.实时、高速、海量数据交互

实时感知数据源数据变化,秒级数据同步,在用户真实业务环境下可达200G/小时高速实时交互,有效提高数据流通的实效性。既可运行于物联网的小型数据源,也可运行于当前企业数据中心的大型集?#28023;?#33021;够有效支持DT时代下的数据整合与数据预处理。

2.全?#30784;?#24322;构数据支撑

全面支持结构化、非结构化及半结构化数据类型。数据源不仅可?#28798;?#25345;绝大多数关系型数据库,还支持来自不同格式、架构、协议、速度和大小的动态、异类和分布式数据源,例如机器/传感器、地理位置设备、点击流、文件、社交订阅?#30784;?#26085;志文件、?#35745;?#21644;视频等。

3.无插件、非侵入、安全无干扰

R7-DIP采取中间部署架构,所有相关组件均运行在独立的服务器中,不在数据源端和目标端安装任何插件。只要网络可达,即可实现数据捕获与装载,对网络带宽需求低。无需进行定制化二次接口开发,对生产环境改造少,对业务系统几乎没有影响和干扰。

4.全程可视化实现“眼神运维”

R7-DIP提供统一的数据管理配置平台,在web界面中对所有数据流转流程进行拖拽式的配置与管理,所见即所得。提供多维度可视化监控界面,自动错误告警及处理机制让用户做到“眼神运维”。从源端到目标端的安全型路由,提供离散型用户授权和详细的实时可视化监管链与元数据,实现数据溯源,同时可以扩展到多个节点来应对数据量的变化。


03


案例分享
CASE SHARE

双活数据中心—国家电网

协同办公系统是国家电网公司 SG186 八大业务应用中涉及面最广、使用?#39318;?#39640;的系统,其成功实施对于 SG186 的应用推广具有十分重要的意义。系统实现了公司各级单位间综合办公业务的网络化管理、信息的互联互通、企业知识资产的统一规范和集成管理。

面临挑战
1)要求将协同办公系统建设为异地双活数据中心模式,两个数据中心均要对外提供服务,实现数据的实时双向备份,保证应用的?#20013;?#24615;和数据的安全性。
2)协同办公系统需要将应用级灾备目标调整为异地远距双活,RPO(Recovery Point Objective,复原点目标)由1小时缩短为5分钟,RTO(Recovery Time Objective,复原时间目标)由4小时缩短为20分钟,以提高服务水平。
3)在协同办公系统中,当本地生产系统发生局部?#25910;?#26102;,可通过本地?#25910;?#24212;急平台快速恢复系统运行。
4)可通过异地远距双活系统快速接管本地应用,保障业务在中断可控时间内,转?#39057;?#23545;端继续工作。

R7-DIP

国家电网协同办公系统应用双活数据复制项目

客户价值
1)实现国家电网协同办公系统真正意义的业务双活。
2)数据复制软件实时的双向业务复制,实现数据容灾的功能,满足协同系统对RTO/RPO时间的要求。
3)当协同办公系统任一端出现系统?#25910;?#26102;,可以通过对端快速的接管系统,保障业务的正常运行。
4)R7-DIP数据库复制软件自身具备HA高可用性,中间部署架构,全程可视化配置和管理,降低运维压力的同时提高了系统的稳定性。


数据集中与分发—四川国税

四川省国税局自2006年以来,逐步实现了主要应用系统的省级集中,省局的各项管理决策系统从不同的生产系统分别调用数据,省局采用物化视图的方式将综合征管软件的数据向各市(州)局分发。随着税收征管改革的不断深入,特别是四川省风?#23637;?#29702;工作的不断?#24179;?#30465;局需要实时将分散在各应用系统中的税收业务类生产数据进行统一收集、整理、加工和分发。

面临挑战
1)采用实时模式将汇聚的税务生产类数据,向电子征管档案系统等4个省级集中管理类应用系统推送。
2)采用非实时模式按数据管辖权限分别向21个市(州)局单位分发,满足省局和各市(州)局数据分析应用的需求。

R7-DIP

四川省国税核心业务系统数据分发方式

客户价值
1)数据分发到各市(州)局单位中,各单位?#28798;?#36827;行数据查询,完全避免省国税的I/O、带宽等资源?#21152;茫?#38477;低对生产业务的影响。
2)数据实时集中分发,管理类系统和各单位所得税务生产数据均为实时数据,在满足管理需求的同?#38381;?#25569;税务数据最新动态。
3)R7-DIP提供的全程可视化管理配?#23186;?#38754;,让集中分发平台可及时响应各种自定义查询需求 。
4)数据复制采用日志解析原理,一次解析,全局分发,大大减少资源消耗。
5)提高集中分发数据的时效性、?#26082;?#24615;,支持大规模数据分发处理条件。


内外网数据交互—苏州交巡警

苏州交巡警于2012年已初步建立《智能交通设备维护管理系统》,通过该系统,交巡警支队能及时、?#26082;?#25484;握设备运行情况,对设备?#25910;?#20316;出智能诊断,上报通知维保单位,并监督其维修进度,进而对设备维保单位进行科学考核,以保障设备的高效运行,提高智能交通设备的使用效率,进一步?#24179;?#33487;州交巡警支队?#32753;?#25216;强警”建设,并打到服务科学化、权利阳光化的社会效应。

面临挑战
1)缩短设备检修周期。设备厂商通过外网进行查询检修,内网用户负责审核,大大缩短了设备检修周期。
2)项目搭建了一个互为灾备的系统。在拆分成了内部、外部两个系统以后,两个系统的数据是相互实时复制的,每个系统都可以作为另一个系统的备份系统,当任何一个出现问题时都能够接管业务。
3)降低应用系统的调整难度。由于R7-DIP是通用软件,只需要通过简单的参数设置即可达成目标,让技术人?#22791;?#20851;注于生产系统运行。

R7-DIP

苏州交巡警内外数据交互

客户价值
1)缩短设备件检修周期。设备厂商通过外网进行查询检修,内网用户负者审核,大大缩短了设备检修周期。
2)项目搭建了一个互为灾备系统。在拆分成了内部、外部两个系统以后,两个系统的数据是相互实时复制的,每个系统都可以作为另一个系统备份系统,当任何一个出现问题时都能够接管业务。
3)降低应用系统的调整进度。由于R7-DIP是通用软件,只需要通过简单的参数设置即可达成目标,让技术人?#22791;?#20851;注于生产系统运行。


数据容灾—?#26412;?#38134;行

?#26412;?#38134;行在2011年推出手机银行“京彩生活”服务,“京彩生活”是?#26412;?#38134;?#24418;?#25163;机用户?#21487;?#25171;造的便捷金融服务平台,集产品、资讯和服务为一体,以“360度”的服务理念整合平台,力争成为新一代的“掌上银行柜台”。“移动银行”业务不仅可以使人们在任何时间、任何地点处理多种金融业务,而且使银行以更便利、高效而又较为安全的方式为客户提供传统和创新的服务。

面临挑战
1)为保证手机银行业务系统服务连续性和自身数据安全,需要建设对RTO\RPO要求较高的容灾系统。
2)容灾系统需要能够满足业务系统自身账户信息等结构化数据和文档等非结构化数据的实时备份。
3)容灾系统需要能够满足其他业务系统(如分析系统)的数据查询需求。

R7-DIP

?#26412;?#38134;行数据容灾

客户价值
1)DIP为客户提供了完整的结构化和非结构化数据的容灾解决方案 ,并且满足客户对于RPO/RTO提出的高要求。
2)为手机银行业务提供了服务连续性和数据安全性的可靠保证,自动化的运维和统一的管理界面解放用户生产力,提高服务质量和生产效率。


数据分发—中国人民财产保险

中国人保财险基于统一客户视图的营销管理系统(简称:营销管理系统)于2015年6月实现了全系?#25104;?#32447;,随着应用的不断深入,各应用单位相继提出了访?#35270;?#38144;管理系统数据(简称:营销数据)的需求,以便能够根据自身的管理要求实施?#30001;?#24320;发,更好地为本地的销售活动和销售管理提供更全面、更实时的支持。

面临挑战
1)由于营销管理系统是由总公司集中部署的系统,硬件设备、应用软件以及数据库?#25216;?#20013;部署在南中心,各分公司本地并不存储营销数据。而且营销数据量大(截至2015年6月30日,核心数据量为8T),要满足面向全国38家分公司分发数据的要求,采用集中部署模式的数据分发系統是实施成本最低且见效最快的方案。将数据从营销管理系统同?#38477;紻ATAGUARD分发数据库,增加生产系统数据安全系数。
2)分析DG分发库,实时分发到38个异地的目标端数据库中,满足夜间大批量新增数据在早上8:30前分发到各分公司目标数据库。
3)满足各自数据库的同步操作按需分配,互不影响。某一节点在复制过程中出现错误时可以通过增量方式恢?#30784;?
4)确保源端数据库和38个目标端数据库的数据安全。

R7-DIP

中国人民财产保险数据分发

客户价值
1)目前DG分发库存量数据为8T。平均每天日志量为600G左右。工作时间平均每天日志变化为130G左右。高峰平均日志变化值80G/小时,最高200G/小时,R7-DIP轻松应对,充分满足客户的数据分发需求。
2)数据实时分发到各省分公司数据库中,各单位可通过访?#39318;?#24049;的数据库进行数据查询,完全避免全国集中访问集团营销数据库。
3)TB级新增数据实时清洗,分发,确保各营销单位能够在晨会拿?#38477;?#19968;手的即时数据。
4)集中管理数据分发工作,解决了集团运维人数紧张,需管理全国38个分发节点的困?#22330;?
5)纯图形化管理,可以很直观的管理复杂的链路配置、数据清?#30784;?#36816;维监控。极大降低了学习成本和对运维人员的要求。


04

R7-DIP 实现原理
CORE Technology

·针对事务型数据库增量数据集成交互

R7-DIP通过对数据库的事务日志进行实时跟踪,分析日?#26223;?#21547;的数据内容,能够支持捕捉业界主流数据库的变化数据,可以进行清?#30784;?#36807;滤、加工转换和数据的实?#38381;?#21512;等功能。

·针对全源数据的集成交互

R7-DIP提供了一个可独立部署的分布式数据流通模块,在该流通模块中,提供百种标准化的数据流通组件,这些组件全面支持结构化、非结构化及半结构化数据类型,数据源不仅可?#28798;?#25345;绝大多数关系型数据库,还支持来自不同格式、架构、协议、速度和大小的动态、异类和分布式数据源,例如机器/传感器、地理位置设备、点击流、文件、社交订阅?#30784;?#26085;志文件、?#35745;?#21644;视频等。

R7-DIP

R7DIP 实现原理示意图

核心技术
1. IOAT-RC - 实时全源数据交互技术:百种标准化数据流通处理组件支持全源数据的交互。
2. CDC - ?#20013;?#25968;据复制技术:采?#23186;?#26512;数据库在线日志的方式完成增量数据的实时捕获和装载。
2. ETL - 批量处理技术:支持批量数据的复杂处理,如:字段?#25104;洹?#31867;型转换、字段运算、字符串处理、字符集处理、空值处理、日期转换、聚集运算、字段拆分、字段合并、表达式计算、大字段读写等。


05

R7-DIP 主要指标
R7-DIP MAIN INDICATORS

数据时延:<10秒

传输介质:TCP/IP网络

数据压缩传输:支持

集群部署:支持

最大处理日志量:>200GB/小时

对生产系统的影响:<5%

距离:无限制


06

支持的操作系统
SUPPORTED BY THE OPERATING SYSTEM
R7-DIP

07

R7-DIP 支持的数据源和目标
SUPPORTED BY THE DATA SOURCE AND GOAL

·端源

日志解析模式

Oracle 9i及以上版本

Microsoft SQL Server2005及以上版本

MySQL 5.1及以上版本

DB2 v9.5及以上版本

非日志解析模式支持多种数据源对接

·目标端

所有源端支持的数据库

国产数据库:达梦、南大通用Gbase、人大金仓、神州通用、KDB等

Sybase

Vertica

PostgreSQL

Altibase

ODBC兼容数据库

数据仓库

大数据系统HDFS、Hbase

消息队列(MQ、Kafka)

非日志解析模式的多种目标数据源(ftp、file、http、log、mongo等)

电话直呼
在线留言
企业地标
翱旗科技直拨热线
400-168-2700
还可输入字符200(限制字符200)
Top 全民突击荣蒋飞