`
samttsch
  • 浏览: 63804 次
  • 性别: Icon_minigender_1
  • 来自: 南京
社区版块
存档分类
最新评论

oracle stream

阅读更多
常识:
Stream是oracle的消息队列(也叫oracle Advanced Queue)技术的一种扩展应用。Oracle的消息队列和其他队列产品功能类似,都是通过发布/订阅的方式来解决事件管理。流复制(Stream Replication)是基于消息队列的一个数据共享技术,他可以实现两个数据库之间数据库级、Schema级、table级的数据同步,并且这种同步可以是双向的。
Oracle高级复制(Oracle Advanced Replication)和流复制,前者是基于触发器的,后者是基于日志挖掘(Logminer)的,不一样的。

工作原理:
Stream搜集事件、把事件保存在队列中,然后把事件发送给不同的订阅者。
流复制:在源数据库有一个捕获进程(Capture Process),该进程利用Logminer技术从日志中提取DDL、DML语句(逻辑变更记录 LCR,一个LCR对应一个院子的行变更)。这些LCR会保存到源数据库的发送队列中,然后传播进程将这些LCR发送到目标数据库的接受队列,目标数据库根据LCR实现数据同步。

Streams            与       Data Guard
主要是为了数据共享             为了灾难恢复和高可用性
可以多方向同步                 只能是单向的 primary->standby
粒度可以使数据库 schema      只能是数据库级别
table三个级别
支持异种平台间的同步           必须同种平台
参与复制的每个数据库都可以读写 只有primary可以读写,standby只能读
支持oracle和非oracle数据库间同步 只能是oracle间


配置流:
1.在source和target的tnsnames.ora都配置上对方的连接

2.修改数据库global_name如
源:alter database rename global_name to source.test.com.cn
目标:alter database rename global_name to target.test.com.cn

3.修改其他参数:
源数据库:
global_name=true
aq_tm_processes=2
job_queue_processes=10
logmnr_max_persistent_sessions=1
open_links=4
db_domain=test.com.cn
service_names=source.test.com.cn
目标数据库:
global_name=true
aq_tm_processes=2
job_queue_processes=10
logmnr_max_persistent_sessions=1
open_links=4
db_domain=test.com.cn
service_names=target.test.com.cn

4.在源数据库上创建到目的数据库的连接:
create database link target.test.com.cn connect to user identified by pwd using 'target_tns';

5.在源数据库上创建source队列:
begin
dbms_streams_adm.set_up_queue(
         queue_table=>'source_queue_table',
         queue_name=>'source_queue');
end;

6.在源数据库上创建capture进程:
dbms_streams_adm.add_schema_rules(
         schema_name=>'product',
         streams_type=>'capture',
         streams_name=>'source_capture_stream',
         queue_name=>'source_queue',
         include_dml=>true,
         include_dll=>true,
         include_tagged_lcr=>false,
         source_database=>null,
         inclusion_rule=>true
);
end;

7.在源数据库上创建传播进程:
begin
dbms_streams_adm.add_schema_propagation_rules(
         schema_name=>'product',
         streams_name=>'propagation_product',
         source_queue_name=>'test.source_queue',      destination_queue_name=>'test.target_queue@target.test.com.cn',
         include_dml=>true,
         include_ddl=>true,
         include_tagged_lcr=>false,
         source_database=>'source.test.com.cn',
         inclusion_rule=>true
);
end;

8.在目标数据库创建接受队列
begin
dbms_streams_adm_set_up_queue(
queue_table=>'target_queue_table',
queue_name=>'target_queue'
);
end;

9.创建apply进程:
begin
dbms_streams_adm.add_schema_rules(
schema_name=>'product',
streams_type=>'apply',
streams_name=>'target_apply_stream',
queue_name=>'target_queue',
include_dml=>true,
inlucde_ddl=>true,
inlucde_tagged_lcr=>false,
source_database=>'source.test.com.cn',
inclusion_rule=>true
);
end;

10.启动apply:
begin
    dbms_apply_adm.start_apply(apply_name=>'target_apply_stream');
end;

11.从源数据库上导出数据:
exp user/pwd owner=product object_consistent=y file=product.exp grants=y
rows=y commit=y streams_instantiation=y

12.在目标数据库上导入数据:
imp user/pwd fromuser=product touser=product file=product.exp constraints=y ignore=y grants=y rows=y commit=y streams_instantiation=y

13.在源数据库上启动capture:
begin
dbms_capture_adm.start_capture (capture_name=>'source_capture_stream');
end;

分享到:
评论

相关推荐

    Oracle Stream-安装配置

    Oracle Stream是一种高级数据库同步工具,它在Oracle 9i及后续版本中被引入,以前称为Advanced Replication。Streams利用了Oracle的高级队列技术,通过解析归档日志,将数据库的DDL(数据定义语言)和DML(数据操纵...

    Oracle Stream配置详细步骤

    Oracle Stream是Oracle数据库中的一种复制技术,主要设计用于提高数据库的高可用性。在Oracle 9i及之前的版本中,该功能被称为Advance Replication。通过Oracle Stream技术,可以实现数据库间的同步,包括整个数据库...

    oracle Stream

    Oracle Stream 是 Oracle 提供的一种高可用性解决方案,旨在提高数据库的可用性和可靠性。通过解析归档日志,Oracle Stream 可以实现数据库之间的同步,复制数据库对象或整个数据库到另一个数据库中。该技术可以在不...

    oracle stream详细配置

    ### Oracle Stream 详细配置知识点 #### 一、Oracle Stream配置背景与目的 Oracle Streams 是一个强大的数据复制和集成工具,可以实现数据的实时捕获、处理以及传送功能。通过使用Oracle Streams,用户能够轻松地在...

    Oracle Stream 深入探讨

    Oracle Stream 是Oracle数据库的一种高级数据流技术,它用于在数据库之间高效、可靠地移动数据,是构建实时数据复制、数据整合和数据仓库解决方案的关键组件。本文将深入探讨Oracle Stream的相关概念、架构及其配置...

    Step by step配置Oracle Stream

    ### Step by step配置Oracle Stream #### 1. 引言 在现代企业的IT环境中,确保数据的高度可用性和一致性至关重要。Oracle Stream作为一种强大的工具,能够帮助实现数据库间的高效同步,不仅适用于灾难恢复方案,还...

    Oracle_Stream_深入探讨

    Oracle Stream 是Oracle数据库提供的一种强大的高可用性和数据集成解决方案,其目标是确保数据在不同数据库间的实时或近实时同步。自Oracle 9i版本起,它替代了旧有的Advanced Replication,提供了更灵活、高效的...

    Oracle_Stream_深入探讨.doc

    Oracle Stream 是 Oracle 数据库提供的一种高级数据复制和流处理技术,它主要用于实现数据库之间的实时或近实时的数据同步,以确保数据的一致性和高可用性。本文将深入探讨 Oracle Stream 的核心概念、工作流程以及...

    一步一步配置Oracle Stream

    ### 一步一步配置Oracle Stream #### 引言 Oracle Streams 是一种强大的工具,它提供了一种在数据库之间同步数据的方法,可以实现数据复制、合并、分区等功能。本文将详细介绍如何逐步配置 Oracle Streams,确保...

    Oracle Stream + AQ + JMS 搭建步骤

    ### Oracle Stream + AQ + JMS 搭建详解 #### 一、背景及目标 在当前数据密集型应用环境中,数据库变更数据的实时捕获与处理变得尤为重要。Oracle Stream技术结合Oracle的高级队列(Advanced Queuing, AQ)以及...

    Oracle stream诊断

    3. **Stream 基本部件的操作** - **队列操作**:包括查询、启动、停止、清除和删除队列及其表。 - **捕获进程操作**:涉及查询、启动、停止、修改参数、查看工作状态以及删除捕获进程。 - **捕获规则操作**:查看...

    oracle_stream_concepts_administration_

    "Oracle Stream Concepts Administration" 主要涉及如何管理和配置Streams以实现高效、可靠的数据流管理。 首先,我们需要理解Oracle Streams的基本概念。它主要由三部分组成:Producers(生产者)、Consumers...

    docker-oracle-sx:这是 Oracle Stream Explorer 12c 的 Dockerfile

    Oracle Stream Explorer (12c) 这是的 Dockerfile。 这个 Docker 容器的目的是为开发人员设置开发和集成测试环境。 重要提示:Oracle不支持任何环境中的Docker ,包括但不限于开发、集成和生产环境。如何建造请按照...

    nginx配置代理oracle和网站

    使用nginx代理oracle或者网站,实现地址的跳转以及网站的统一门户和负载均衡。

    Oracle Streams配置文档

    "[itpub.net]Step by step配置Oracle Stream.pdf"提供了一步一步的配置教程,对于初学者尤其有帮助。它详细阐述了每一步的操作,帮助你理解并实施Oracle Streams的配置。 6. **SQL脚本** "主数据库.sql"和"从...

    流批一体Streamsets Data Collector(SDC)管道Oracle CDC实时同步配置文档

    ### 流批一体Streamsets Data Collector(SDC)管道Oracle CDC实时同步配置详解 #### 一、概述 在大数据处理领域,Streamsets Data Collector (SDC)作为一种强大的数据集成工具,被广泛应用于各种复杂的数据流场景中...

Global site tag (gtag.js) - Google Analytics