常识:
Stream是oracle的消息队列(也叫oracle Advanced Queue)技术的一种扩展应用。Oracle的消息队列和其他队列产品功能类似,都是通过发布/订阅的方式来解决事件管理。流复制(Stream Replication)是基于消息队列的一个数据共享技术,他可以实现两个数据库之间数据库级、Schema级、table级的数据同步,并且这种同步可以是双向的。
Oracle高级复制(Oracle Advanced Replication)和流复制,前者是基于触发器的,后者是基于日志挖掘(Logminer)的,不一样的。
工作原理:
Stream搜集事件、把事件保存在队列中,然后把事件发送给不同的订阅者。
流复制:在源数据库有一个捕获进程(Capture Process),该进程利用Logminer技术从日志中提取DDL、DML语句(逻辑变更记录 LCR,一个LCR对应一个院子的行变更)。这些LCR会保存到源数据库的发送队列中,然后传播进程将这些LCR发送到目标数据库的接受队列,目标数据库根据LCR实现数据同步。
Streams 与 Data Guard
主要是为了数据共享 为了灾难恢复和高可用性
可以多方向同步 只能是单向的 primary->standby
粒度可以使数据库 schema 只能是数据库级别
table三个级别
支持异种平台间的同步 必须同种平台
参与复制的每个数据库都可以读写 只有primary可以读写,standby只能读
支持oracle和非oracle数据库间同步 只能是oracle间
配置流:
1.在source和target的tnsnames.ora都配置上对方的连接
2.修改数据库global_name如
源:alter database rename global_name to source.test.com.cn
目标:alter database rename global_name to target.test.com.cn
3.修改其他参数:
源数据库:
global_name=true
aq_tm_processes=2
job_queue_processes=10
logmnr_max_persistent_sessions=1
open_links=4
db_domain=test.com.cn
service_names=source.test.com.cn
目标数据库:
global_name=true
aq_tm_processes=2
job_queue_processes=10
logmnr_max_persistent_sessions=1
open_links=4
db_domain=test.com.cn
service_names=target.test.com.cn
4.在源数据库上创建到目的数据库的连接:
create database link target.test.com.cn connect to user identified by pwd using 'target_tns';
5.在源数据库上创建source队列:
begin
dbms_streams_adm.set_up_queue(
queue_table=>'source_queue_table',
queue_name=>'source_queue');
end;
6.在源数据库上创建capture进程:
dbms_streams_adm.add_schema_rules(
schema_name=>'product',
streams_type=>'capture',
streams_name=>'source_capture_stream',
queue_name=>'source_queue',
include_dml=>true,
include_dll=>true,
include_tagged_lcr=>false,
source_database=>null,
inclusion_rule=>true
);
end;
7.在源数据库上创建传播进程:
begin
dbms_streams_adm.add_schema_propagation_rules(
schema_name=>'product',
streams_name=>'propagation_product',
source_queue_name=>'test.source_queue', destination_queue_name=>'test.target_queue@target.test.com.cn',
include_dml=>true,
include_ddl=>true,
include_tagged_lcr=>false,
source_database=>'source.test.com.cn',
inclusion_rule=>true
);
end;
8.在目标数据库创建接受队列
begin
dbms_streams_adm_set_up_queue(
queue_table=>'target_queue_table',
queue_name=>'target_queue'
);
end;
9.创建apply进程:
begin
dbms_streams_adm.add_schema_rules(
schema_name=>'product',
streams_type=>'apply',
streams_name=>'target_apply_stream',
queue_name=>'target_queue',
include_dml=>true,
inlucde_ddl=>true,
inlucde_tagged_lcr=>false,
source_database=>'source.test.com.cn',
inclusion_rule=>true
);
end;
10.启动apply:
begin
dbms_apply_adm.start_apply(apply_name=>'target_apply_stream');
end;
11.从源数据库上导出数据:
exp user/pwd owner=product object_consistent=y file=product.exp grants=y
rows=y commit=y streams_instantiation=y
12.在目标数据库上导入数据:
imp user/pwd fromuser=product touser=product file=product.exp constraints=y ignore=y grants=y rows=y commit=y streams_instantiation=y
13.在源数据库上启动capture:
begin
dbms_capture_adm.start_capture (capture_name=>'source_capture_stream');
end;
分享到:
相关推荐
Oracle Stream是一种高级数据库同步工具,它在Oracle 9i及后续版本中被引入,以前称为Advanced Replication。Streams利用了Oracle的高级队列技术,通过解析归档日志,将数据库的DDL(数据定义语言)和DML(数据操纵...
Oracle Stream是Oracle数据库中的一种复制技术,主要设计用于提高数据库的高可用性。在Oracle 9i及之前的版本中,该功能被称为Advance Replication。通过Oracle Stream技术,可以实现数据库间的同步,包括整个数据库...
Oracle Stream 是 Oracle 提供的一种高可用性解决方案,旨在提高数据库的可用性和可靠性。通过解析归档日志,Oracle Stream 可以实现数据库之间的同步,复制数据库对象或整个数据库到另一个数据库中。该技术可以在不...
### Oracle Stream 详细配置知识点 #### 一、Oracle Stream配置背景与目的 Oracle Streams 是一个强大的数据复制和集成工具,可以实现数据的实时捕获、处理以及传送功能。通过使用Oracle Streams,用户能够轻松地在...
Oracle Stream 是Oracle数据库的一种高级数据流技术,它用于在数据库之间高效、可靠地移动数据,是构建实时数据复制、数据整合和数据仓库解决方案的关键组件。本文将深入探讨Oracle Stream的相关概念、架构及其配置...
### Step by step配置Oracle Stream #### 1. 引言 在现代企业的IT环境中,确保数据的高度可用性和一致性至关重要。Oracle Stream作为一种强大的工具,能够帮助实现数据库间的高效同步,不仅适用于灾难恢复方案,还...
Oracle Stream 是Oracle数据库提供的一种强大的高可用性和数据集成解决方案,其目标是确保数据在不同数据库间的实时或近实时同步。自Oracle 9i版本起,它替代了旧有的Advanced Replication,提供了更灵活、高效的...
Oracle Stream 是 Oracle 数据库提供的一种高级数据复制和流处理技术,它主要用于实现数据库之间的实时或近实时的数据同步,以确保数据的一致性和高可用性。本文将深入探讨 Oracle Stream 的核心概念、工作流程以及...
### 一步一步配置Oracle Stream #### 引言 Oracle Streams 是一种强大的工具,它提供了一种在数据库之间同步数据的方法,可以实现数据复制、合并、分区等功能。本文将详细介绍如何逐步配置 Oracle Streams,确保...
### Oracle Stream + AQ + JMS 搭建详解 #### 一、背景及目标 在当前数据密集型应用环境中,数据库变更数据的实时捕获与处理变得尤为重要。Oracle Stream技术结合Oracle的高级队列(Advanced Queuing, AQ)以及...
3. **Stream 基本部件的操作** - **队列操作**:包括查询、启动、停止、清除和删除队列及其表。 - **捕获进程操作**:涉及查询、启动、停止、修改参数、查看工作状态以及删除捕获进程。 - **捕获规则操作**:查看...
"Oracle Stream Concepts Administration" 主要涉及如何管理和配置Streams以实现高效、可靠的数据流管理。 首先,我们需要理解Oracle Streams的基本概念。它主要由三部分组成:Producers(生产者)、Consumers...
Oracle Stream Explorer (12c) 这是的 Dockerfile。 这个 Docker 容器的目的是为开发人员设置开发和集成测试环境。 重要提示:Oracle不支持任何环境中的Docker ,包括但不限于开发、集成和生产环境。如何建造请按照...
使用nginx代理oracle或者网站,实现地址的跳转以及网站的统一门户和负载均衡。
"[itpub.net]Step by step配置Oracle Stream.pdf"提供了一步一步的配置教程,对于初学者尤其有帮助。它详细阐述了每一步的操作,帮助你理解并实施Oracle Streams的配置。 6. **SQL脚本** "主数据库.sql"和"从...
### 流批一体Streamsets Data Collector(SDC)管道Oracle CDC实时同步配置详解 #### 一、概述 在大数据处理领域,Streamsets Data Collector (SDC)作为一种强大的数据集成工具,被广泛应用于各种复杂的数据流场景中...