潮数技术分享系列(二):数据库同步系统
ccwgpt 2024-11-25 10:24 44 浏览 0 评论
结构化数据 是指可以使用关系型数据库表示和存储,表现为二维形式的数据。 一般结构化数据保存在数据库中,做好数据库的同步、备份对于保护结构化数据是十分重要 的。
产品介绍
数据库同步系统是基于数据库日志捕获、解析、传递、加载技术的数据实时同步软件。数据库同步系统提供了同构&异构环境下低影响的数据同步功能。增加了实用且重要的功能,降低了数据库同步产品对生产系统的影响,扩展了数据库同步产品的使用场景和范围。
功能介绍
在线日志解析: 数据库同步系统通过在线分析事务日志获得SQL语句和数据,完成DataBase级别schema 级别或table级别的数据复制。数据库同步系统对日志的整合和传输以“事务”为单位,无需处理复杂的“回滚”机制。使用该技术,在拥有高性能的同时还能够更好的保证数据复制的一致性和完整性。
在线数据迁移: 数据库同步系统迁移数据时无需停止业务,通过SCN号控制机制,完整地将生产服务器数据复制到备份端服务器。可在7*24小时运行的业务上完成安全的、高性能的数据迁移工作。
中文图形监控管理报警: 数据库同步系统具有一个完整的监控客户端,可方便地监控软件的运行,系统资源占用等状态,而且可以对软件进行配置修改,不需要去配置复杂晦涩的配置文件。数据库同步系统还提供了字符操作模式,通过两种方式都可以对数据库同步系统进行日常维护和监控,满足了不同用户的使用习惯。
数据比对修复: 数据库同步系统在数据同步过程中可以用一条命令对实时同步的数据进行数据比对验证,将逐行逐字符地比对生产数据库和备份数据库的内容,并在数据库同步系统Agent(客户端)形成可读的txt报告文件,以便直观地查看数据比对结果。
备份数据库数据回滚: 数据库同步系统Agent 客户端会过滤生产数据库进行的Truncate,Drop,Delete操作,将遇到这些操作时,数据库同步系统Agent不会真正的删除数据,而是将该表Rename(重命名),使其变成数据库中的一张隐藏表,在需要时可以恢复表中数据。
历史数据库归档: 数据库同步系统历史数据库归档技术的主要目的是减少生产服务器的查询压力,历史数据库归档技术借助数据比对和数据验证方式,来验证主交易数据库和热容灾数据的历史数据库数据完全一致。数据验证完成后,可以Truncate掉主交易数据库的历史数据库数据而保留备份服务器的历史数据库数据,备份服务器始终处于OPEN状态,可以进行实时的查询。
数据抽取转换加载: 数据库同步系统ETL(Extraction Transformation Loading)数据抽取、转换、加载技术可以实现生产服务器和备份服务器数据类型的转换,SQL语句的过滤等功能,满足数据清洗需求。
跨数据库数据转换集成: 数据库同步系统能够将生产数据库的实施实时同步到informix数据库和Teradata数据库仓库中,能够在不修改当前业务系统的结构情况下,解决跨数据库平台的数据转换需求。
应用场景
作为报表数据源: 备用数据库Open状态,可读写,可供大部分报表使用。
作为抽取数据源: 备用数据库Open状态,可读写,可供数据抽取应用使用。
分担生产系统压力: 备用系统可以分担生产系统40%左右的系统负载。
数据库滚动升级: 给数据库大版本升级提供业务不间断的能力。
提供生产系统可靠性: 通过卸载部分生产压力到备用系统显著降低生产系统生成压力,避免高负载在极限情况下可能造成的异常事件,并且为保障单点SLA能力,主系统在灾难情况下能接管所有业务压力。
网络资源复用: 由于基于变化量的传输机制,网络带宽耗用仅传统方案的1/10,通过复用机制可提升网络资源的利用率。
业务拓展需求: 通过在线增加备用节点,可以拓展其他业务使用场景,例如结合上线增加和原库相同测试库,并进行回归测试。
产品部署方式
部署方式,如下图所示:
产品优势
高稳定性: 数据库同步系统独立于Oracle系统架构,不依赖于触发器,不占用Oracle资源,对生产系统低影响;
高可靠性: 数据库同步系统基于Oracle事务复制,只捕获提交的事务,过滤未提交的事务,保证数据一致性;
异构跨平台支持: 数据库同步系统源端支持异构源和目标系统,OS异构支持,DB异构支持,能适应各种复杂环境;
高灵活可扩展性: 数据库同步系统开放API,松耦合的模块化架构,易于被集成,并提供定制化开发服务;
毫秒级数据延迟: 数据库同步系统在事务开始发生时就捕获变化数据,事务一提交就马上发送到目标端;
支持范围
操作系统: Windows全系列、Linux及衍生版本、UNIX;
数据库源端: Oracle 9i/10g/11g/12c,Informix,DB2等;
数据库目标端: Oracle 9i/10g/11g/12c,MySql &分布式Mysql,Sql Server 数据库,HP 列式数据库Vertica,Teradata 数据仓库,国产数据库及任何支持JDBC接口的数据库。
- 上一篇:Oracle-架构、原理、进程
- 下一篇:ORACLE-锁
相关推荐
- css布局方案汇总(28个实例图文并茂)
-
简介布局在我们前端日常开发来说是非常重要的,一个好的布局能简化代码的同时还能提高网页的性能。常见的布局方法有浮动(float)布局、绝对定位(position)布局、表格布局(table)、弹性(fl...
- 十款免费的CSS框架加速Web开发
-
Pure这是Yahoo最新推出的一款CSS框架,它只有HTML和CSS,没有使用任何JavaScript语言。总大小只有4.4kb,但功能却非常丰富,支持响应式样式和各种导航、表格、表单、按钮、网格和...
- Tailwind CSS 是不是目前世上最好的CSS框架?
-
转载说明:原创不易,未经授权,谢绝任何形式的转载今天看了一篇国外大佬对TailwindCSS的看法,在这里分享给大家,看看大家是否赞同,以下是其相关内容的整理,由于翻译水平有限,欢迎大家讨论和指...
- 下一代 CSS 框架:Mojo CSS,为何如此受欢迎?
-
TailwindCSS推出即受到广大开发者的欢迎,当前Githubstar数已达77.8k。它是一个功能类优先(utility-first)的CSS框架,它提供了一系列功能类,让开发者...
- 常见的几种摄影构图方式
-
摄影构图,是一种在摄影画面中表现结构美、形式美的方式。构图能让摄影主体更加突出,画面更加有序。所以说,构图在摄影中是非常重要的一个环节。无论是前期构图还是后期构图,摄影者都要对构图有一个比较深的了解。...
- 风光摄影10大构图技巧,会用构图,照片更容易好看
-
风光摄影10大构图技巧,会用构图,照片更容易好看先解释一下,为什么会使用构图之后,照片更容易好看?因为,构图是根据很多好看的照片,总结出来的技巧,使用这些构图技巧,就相当于站在了巨人的肩膀上,也就是用...
- 掌握框式构图的摄影技巧,会让摄影爱好者的作品更有魅力!
-
很多摄影爱好者都知道摄影构图中有个框式构图,但大多数人对框式构图的摄影技巧,却一知半解。所以摄影爱好者们有必要更全面、深入的了解,并掌握框式构图,会对你摄影水平的提高更有帮助。【欢迎点击上方关注:金立...
- 这个构图很简洁,但为什么不耐看?
-
摄影爱好者最常犯的错就是过于复杂、主体不明确,但当遇到简单的场景往往又会出现单调、不耐看的状况。为什么会这样?说白了还是观察力不够。下面是本周的摄影入围习作,我们一起来看看这些照片中主体、陪体以及背景...
- 初学者需要记牢的八种常用构图法
-
作者:冯海军摄影中,构图很关键,决定照片是否成功,所以在构图上要加以重视和推敲,虽然说构图无定法,但是也有很多的规律可循,以下列举几种常用构图,会对初学者有很大的帮助。多彩刘卫洲摄苏州姑苏俱乐部(...
- 构图这件事不难!掌握14种构图模式就稳了
-
如果说视觉元素是视觉信息的载体,那么构图就是视觉元素的载体。没有适当形式的构图对视觉元素有机、有序地承载,平面设计将无法传达预定的设计意图和视觉信息。因此,对于平面设计而言,构图是平面设计不可或缺的重...
- 框架构图如何使用?
-
1分钟教你用手机拍大片。今天我们利用框架构图,在不同的运镜方法下拍摄。·首先将手机贴近地面,拍摄人物走过的画面。·然后利用3D效果的背景衬托,将手机贴近地面,以低角度仰拍人物。·最后我们用高清画质来呈...
- 面构图的5种超实用的构图形式 前景构图,框架构图,填充构图
-
面构图的5种超实用的构图形式。为什么有的人拍摄的照片好看又舒适?仔细观察会发现他们善用构图。大家好,今天带大家了解摄影中5种超实用的面构图形式。·一、前景构图。前景是构图中的神奇要素,可以提升照片的表...
- 一看就懂!跟着马格南的大师学构图
-
马格南图片社是迄今为止全球最重要的摄影图片社,其网站包涵了太多经典的名字和照片。细细品味这些经典图片,能够学到很多有用的构图手法。跟着大师走,总不会错吧?前后景的运用这似乎是非常常见的一种手法,仔细看...
- 这才是框架构图,有想法!能给你启发么?
-
框架构图大家并不陌生,但并不是有一个框就行了。框架构图用得不好,就很死板生硬,给人感觉很假。如果你理解透了,拍出的作品不会单调。今天就给大家分享一下框架构图,你看看有哪些妙用?1.广角与长焦的应用长焦...
- 7B小模型写好学术论文,新框架告别AI引用幻觉
-
ScholarCopilot团队投稿量子位|公众号QbitAI学术写作通常需要花费大量精力查询文献引用,而以ChatGPT、GPT-4等为代表的通用大语言模型(LLM)虽然能够生成流畅文本,但...
你 发表评论:
欢迎- 一周热门
- 最近发表
- 标签列表
-
- 若依框架 (41)
- MVC框架 (46)
- spring框架 (46)
- 框架图 (58)
- bootstrap框架 (43)
- flask框架 (53)
- quartz框架 (51)
- abp框架 (47)
- jpa框架 (47)
- scrapy框架 (52)
- beego框架 (42)
- java框架spring (43)
- grpc框架 (55)
- 前端框架bootstrap (42)
- orm框架有哪些 (43)
- ppt框架 (48)
- 内联框架 (52)
- winform框架 (46)
- gui框架 (44)
- cad怎么画框架 (58)
- ps怎么画框架 (47)
- ssm框架实现登录注册 (49)
- oracle v (42)
- oracle字符串长度 (48)
- oracle提交事务 (47)