- 浏览: 853779 次
文章分类
- 全部博客 (365)
- java (124)
- spring mvc (21)
- spring (22)
- struts2 (6)
- jquery (27)
- javascript (24)
- mybatis/ibatis (8)
- hibernate (7)
- compass (11)
- lucene (26)
- flex (0)
- actionscript (0)
- webservice (8)
- rabbitMQ/Socket (15)
- jsp/freemaker (5)
- 数据库 (27)
- 应用服务器 (21)
- Hadoop (1)
- PowerDesigner (3)
- EJB (0)
- JPA (0)
- PHP (2)
- C# (0)
- .NET (0)
- html (2)
- xml (5)
- android (7)
- flume (1)
- zookeeper (0)
- 证书加密 (2)
- maven (1)
- redis (2)
- cas (11)
最新评论
-
zuxianghuang:
通过pom上传报错 Artifact upload faile ...
nexus上传了jar包.通过maven引用当前jar,不能取得jar的依赖 -
流年末年:
百度网盘的挂了吧???
SSO单点登录系列3:cas-server端配置认证方式实践(数据源+自定义java类认证) -
953434367:
UfgovDBUtil 是什么类
Java发HTTP POST请求(内容为xml格式) -
smilease:
帮大忙了,非常感谢
freemaker自动生成源代码 -
syd505:
十分感谢作者无私的分享,仔细阅读后很多地方得以解惑。
Nginx 反向代理、负载均衡、页面缓存、URL重写及读写分离详解
物化视图是Oracle令人激赏的功能之一,在OLAP和OLTP系统都有广泛应用。本系列文章对其进行由浅入深的案例讲解。本文侧重在最简单的ON DEMAND和ON COMMIT物化视图的讨论。
物化视图是一种特殊的物理表,“物化”(Materialized)视图是相对普通视图而言的。普通视图是虚拟表,应用的局限性大,任何对视图的查询,Oracle都实际上转换为视图SQL语句的查询。这样对整体查询性能的提高,并没有实质上的好处。
Oracle最早在OLAP系统中引入了物化视图的概念。但后来很多大型OLTP系统中,发现类似统计的查询是无可避免,而这些查询操作如果很频繁,对整体数据库性能是很致命的。于是Oracle开始不断的改进物化视图,使得其也开始合适OLTP系统。从Oracle 8i到现在,功能已经相对比较完备了。
本文是Oracle物化视图系列文章的第一篇,有两个主要目的,来体验一下创建ON DEMAND和ON COMMIT物化视图的方法。ON DEMAND和ON COMMIT物化视图的区别在于其刷新方法的不同,ON DEMAND顾名思义,仅在该物化视图“需要”被刷新了,才进行刷新(REFRESH),即更新物化视图,以保证和基表数据的一致性;而ON COMMIT是说,一旦基表有了COMMIT,即事务提交,则立刻刷新,立刻更新物化视图,使得数据和基表一致。
--获取数据库rdbms版本信息
- SQL> select * from v$version;
- BANNER
- --------------------------------------------------------------------------------
- Oracle Database 11g Enterprise Edition Release 11.1.0.6.0 - Production
- PL/SQL Release 11.1.0.6.0 - Production
- CORE 11.1.0.6.0 Production
- TNS for 32-bit Windows: Version 11.1.0.6.0 - Production
- NLSRTL Version 11.1.0.6.0 – Production
SQL> select * from v$version; BANNER -------------------------------------------------------------------------------- Oracle Database 11g Enterprise Edition Release 11.1.0.6.0 - Production PL/SQL Release 11.1.0.6.0 - Production CORE 11.1.0.6.0 Production TNS for 32-bit Windows: Version 11.1.0.6.0 - Production NLSRTL Version 11.1.0.6.0 – Production
创建ON DEMAND物化视图
下面创建一个最简单的物化视图,这个物化视图的定义很类似于普通视图的创建语句,只是多了一个materialized,但就是这个单词,造成了物化视图和普通视图(虚拟表)的天壤之别,也引申出后面很多的事情,呵呵。
本例中需要特别注意的是,Oracle给物化视图的重要定义参数的默认值处理,在下面的例子中会有特别说明。因为物化视图的创建本身是很复杂和需要优化参数设置的,特别是针对大型生产数据库系统而言。但Oracle允许以这种最简单的,类似于普通视图的办法来做,所以不可避免的会涉及到默认值问题。
像我们这样,创建物化视图时未作指定,则Oracle按ON DEMAND模式来创建。
从下例中可以看出:
1) 物化视图在某种意义上说就是一个物理表(而且不仅仅是一个物理表),这通过其可以被user_tables查询出来,而得到佐证;
2) 物化视图也是一种段(segment),所以其有自己的物理存储属性;
3) 物化视图会占用数据库磁盘空间,这点从user_segment的查询结果,可以得到佐证。
--创建物化视图
- SQL> create materialized view mv_testcf
- 2 as
- 3 select * from xiaotg.testcf;
- Materialized view created
SQL> create materialized view mv_testcf 2 as 3 select * from xiaotg.testcf; Materialized view created
--分析物化视图,以获得统计信息
SQL> analyze table xiaotg.mv_testcf compute statistics; Table analyzed
--查看物化视图的行数,发现和master表(TESTCF)一样
- SQL> select tl.table_name, tl.num_rows from user_tables tl where tl.table_name in ( 'TESTCF', 'MV_TESTCF' );
- TABLE_NAME NUM_ROWS
- ------------------------------ ----------
- MV_TESTCF 80000
- TESTCF 80000
SQL> select tl.table_name, tl.num_rows from user_tables tl where tl.table_name in ( 'TESTCF', 'MV_TESTCF' ); TABLE_NAME NUM_ROWS ------------------------------ ---------- MV_TESTCF 80000 TESTCF 80000
--查看物化视图的存储参数
- SQL> col segment_name for a24
- SQL> select sg.segment_name, sg.bytes, sg.blocks from user_segments sg where sg.segment_name = 'MV_TESTCF';
- SEGMENT_NAME BYTES BLOCKS
- ------------------------ ---------- ----------
- MV_TESTCF 9437184 1152
SQL> col segment_name for a24 SQL> select sg.segment_name, sg.bytes, sg.blocks from user_segments sg where sg.segment_name = 'MV_TESTCF'; SEGMENT_NAME BYTES BLOCKS ------------------------ ---------- ---------- MV_TESTCF 9437184 1152
查看物化视图关键定义
--查看物化视图的定义设置,请关注蓝色字体部分。
--这表明,默认情况下,如果没指定刷新方法和刷新模式,则Oracle默认为FORCE和DEMAND。
--其他的集中刷新方法和刷新模式以后将分别予以介绍。
- SQL> select mv.* from user_mviews mv where mv.MVIEW_NAME = 'MV_TESTCF';
- OWNERXIAOTG
- MVIEW_NAMEMV_TESTCF
- CONTAINER_NAMEMV_TESTCF
- QUERY
- QUERY_LEN80
- UPDATABLEN
- UPDATE_LOG
- MASTER_ROLLBACK_SEG
- MASTER_LINK
- REWRITE_ENABLEDN
- REWRITE_CAPABILITYGENERAL
- REFRESH_MODEDEMAND
- REFRESH_METHODFORCE
- BUILD_MODEIMMEDIATE
- FAST_REFRESHABLEDML
- LAST_REFRESH_TYPECOMPLETE
- LAST_REFRESH_DATE2008-9-9 15:02
- STALENESSFRESH
- AFTER_FAST_REFRESHFRESH
- UNKNOWN_PREBUILTN
- UNKNOWN_PLSQL_FUNCN
- UNKNOWN_EXTERNAL_TABLEN
- UNKNOWN_CONSIDER_FRESHN
- UNKNOWN_IMPORTN
- UNKNOWN_TRUSTED_FDN
- COMPILE_STATEVALID
- USE_NO_INDEXN
- STALE_SINCE
- NUM_PCT_TABLES0
- NUM_FRESH_PCT_REGIONS
- NUM_STALE_PCT_REGIONS
SQL> select mv.* from user_mviews mv where mv.MVIEW_NAME = 'MV_TESTCF'; OWNERXIAOTG MVIEW_NAMEMV_TESTCF CONTAINER_NAMEMV_TESTCF QUERY QUERY_LEN80 UPDATABLEN UPDATE_LOG MASTER_ROLLBACK_SEG MASTER_LINK REWRITE_ENABLEDN REWRITE_CAPABILITYGENERAL REFRESH_MODEDEMAND REFRESH_METHODFORCE BUILD_MODEIMMEDIATE FAST_REFRESHABLEDML LAST_REFRESH_TYPECOMPLETE LAST_REFRESH_DATE2008-9-9 15:02 STALENESSFRESH AFTER_FAST_REFRESHFRESH UNKNOWN_PREBUILTN UNKNOWN_PLSQL_FUNCN UNKNOWN_EXTERNAL_TABLEN UNKNOWN_CONSIDER_FRESHN UNKNOWN_IMPORTN UNKNOWN_TRUSTED_FDN COMPILE_STATEVALID USE_NO_INDEXN STALE_SINCE NUM_PCT_TABLES0 NUM_FRESH_PCT_REGIONS NUM_STALE_PCT_REGIONS
测试ON DEMAND物化视图的更新特性
物化视图最重要的功能和特性之一,就是其数据会随着基表(或称主表,master表,本例中为TESTCF)的变化而变,基表数据增了,物化视图数据会变多;基表数据删了,物化视图数据也会变少。
但怎么更新?或者说物化视图的数据怎么随着基表而更新?Oracle提供了两种方式,手工刷新和自动刷新,像我们这种,在物化视图定义时,未作任何指定,那当然是默认的手工刷新了。也就是说,通过我们手工的执行某个Oracle提供的系统级存储过程或包,来保证物化视图与基表数据一致性。
这是最基本的刷新办法了。但所谓的自动刷新,其实也就是Oracle会建立一个job,通过这个job来调用相同的存储过程或包,加以实现,这在本系列文章的第2篇会将以详细阐述。
下面将测试INSERT,UPDATE和DELETE的测试方法类似,大家有兴趣的话,可以自己试一试。
需要注意的是,下面暂不讨论如何刷新ON DEMAND物化视图,这是下一篇文章的内容。下面仅仅关注ON DEMAND物化视图的特性及其和ON COMMIT物化视图的区别,即前者不刷新(手工或自动)就不更新物化视图,而后者不刷新也会更新物化视图,——只要基表发生了COMMIT。
- 在基表插入测试数据
基表数据插入后,会发现,物化视图并不会随之更新。
--检查基表和物化视图是否有80001这一行记录。
- SQL> col id for a10;
- SQL> col name for a30;
- SQL> select * from xiaotg.testcf t where t.id = 80001 ;
- ID NAME
- ---------- ------------------------------
- SQL> select * from xiaotg.mv_testcf t where t.id = 80001 ;
- ID NAME
- ---------- ------------------------------
SQL> col id for a10; SQL> col name for a30; SQL> select * from xiaotg.testcf t where t.id = 80001 ; ID NAME ---------- ------------------------------ SQL> select * from xiaotg.mv_testcf t where t.id = 80001 ; ID NAME ---------- ------------------------------
--插入测试数据80001
--这时发现,基表有数据,但物化视图并没有
- SQL> insert into xiaotg.testcf
- 2 values ( 80001, 'xiaotg he he');
- 1 row inserted
- SQL> commit;
- Commit complete
SQL> insert into xiaotg.testcf 2 values ( 80001, 'xiaotg he he'); 1 row inserted SQL> commit; Commit complete
1.2.2 测试物化视图数据是否更新
从下面的实验可以看出,物化视图数据不会更新,即使等上1分钟、1小时、或者1天。
- SQL> select * from xiaotg.testcf t where t.id = 80001 ;
- ID NAME
- ---------- ------------------------------
- 80001 xiaotg he he
- SQL> select * from xiaotg.mv_testcf t where t.id = 80001 ;
- ID NAME
- ---------- ------------------------------
SQL> select * from xiaotg.testcf t where t.id = 80001 ; ID NAME ---------- ------------------------------ 80001 xiaotg he he SQL> select * from xiaotg.mv_testcf t where t.id = 80001 ; ID NAME ---------- ------------------------------
第一个ON COMMIT物化视图
最简单的ON COMMIT物化视图的创建,和上面创建ON DEMAND的物化视图区别不大。因为ON DEMAND是默认的,所以ON COMMIT物化视图,需要再增加个参数即可。
创建ON COMMIT物化视图
需要注意的是,无法在定义时仅指定ON COMMIT,还得附带个参数才行,本例中附带refresh force,关于这个参数的意思,以后将加以阐述。
--创建ON COMMIT物化视图
- SQL> create materialized view mv_testcf2
- 2 refresh force on commit
- 3 as
- 4 select * from xiaotg.testcf;
- Materialized view created
SQL> create materialized view mv_testcf2 2 refresh force on commit 3 as 4 select * from xiaotg.testcf; Materialized view created
--分析物化视图和基表
- SQL> analyze table xiaotg.mv_testcf2 compute statistics;
- Table analyzed
- SQL> analyze table xiaotg.testcf compute statistics;
- Table analyzed
SQL> analyze table xiaotg.mv_testcf2 compute statistics; Table analyzed SQL> analyze table xiaotg.testcf compute statistics; Table analyzed
--查看当前基表和物化视图的行数
- SQL> select tl.table_name, tl.num_rows from user_tables tl where tl.table_name in ( 'TESTCF', 'MV_TESTCF2' );
- TABLE_NAME NUM_ROWS
- ------------------------------ ----------
- MV_TESTCF2 80000
- TESTCF 80000
SQL> select tl.table_name, tl.num_rows from user_tables tl where tl.table_name in ( 'TESTCF', 'MV_TESTCF2' ); TABLE_NAME NUM_ROWS ------------------------------ ---------- MV_TESTCF2 80000 TESTCF 80000
查看物化视图关键定义
可以从DBA_MVIEWS中看出,刷新模式为COMMIT,这也是它和上面ON DEMAND物化视图的唯一区别。
- SQL> select mv.* from user_mviews mv where mv.MVIEW_NAME = 'MV_TESTCF';
- REFRESH_MODECOMMIT
- REFRESH_METHODFORCE
- BUILD_MODEIMMEDIATE
SQL> select mv.* from user_mviews mv where mv.MVIEW_NAME = 'MV_TESTCF'; REFRESH_MODECOMMIT REFRESH_METHODFORCE BUILD_MODEIMMEDIATE
测试ON COMMIT物化视图的更新特性
ON COMMIT物化视图会在基表一旦提交时,就会立刻更新物化视图本身,而且一般仅在物化视图数据也被更新后,基表数据才会事实的提交。
这意味着,这种模式可能会导致延迟基表数据的提交。。这点在下面的实验中体现得很清楚。
实验中,对基表TESTCF,平常的COMMIT在0.01秒内可以完成,但在有了ON COMMIT视图MV_TESTCF2后,居然要6秒。速度减低了很多倍。ON COMMIT视图对基表的影响可见一斑。
- 在基表中插入数据
- SQL> set timing on;
- SQL> insert into xiaotg.testcf ( id, name ) values ( 80002, ' xiaotg again he he ');
- 1 row inserted
- Executed in 0.015 seconds
- SQL> commit;
- Commit complete
- Executed in 6.985 seconds
- SQL> select * from xiaotg.testcf where id = 80002;
- ID NAME
- --------------------------------- --------------------------------------------------------------------------------
- 80002 xiaotg again he he
- Executed in 0 seconds
- SQL> col id for a10;
- SQL> col name for a40;
- SQL> select * from xiaotg.testcf where id = 80002;
- ID NAME
- ---------- ----------------------------------------
- 80002 xiaotg again he he
- Executed in 0.016 seconds
- SQL> select * from xiaotg.mv_testcf2 where id = 80002;
- ID NAME
- ---------- ----------------------------------------
- 80002 xiaotg again he he
- Executed in 0.031 seconds
SQL> set timing on; SQL> insert into xiaotg.testcf ( id, name ) values ( 80002, ' xiaotg again he he '); 1 row inserted Executed in 0.015 seconds SQL> commit; Commit complete Executed in 6.985 seconds SQL> select * from xiaotg.testcf where id = 80002; ID NAME --------------------------------- -------------------------------------------------------------------------------- 80002 xiaotg again he he Executed in 0 seconds SQL> col id for a10; SQL> col name for a40; SQL> select * from xiaotg.testcf where id = 80002; ID NAME ---------- ---------------------------------------- 80002 xiaotg again he he Executed in 0.016 seconds SQL> select * from xiaotg.mv_testcf2 where id = 80002; ID NAME ---------- ---------------------------------------- 80002 xiaotg again he he Executed in 0.031 seconds
测试基表正常情况下的COMMIT速度
发表评论
-
根据多年经验整理的《互联网MySQL开发规范》
2015-08-10 16:09 792写在前面:无规矩不成方圆。对于刚加入互联网的朋友们,肯定会接 ... -
Mysql一主多从和读写分离配置简记
2015-05-15 10:56 1422近期开发的系统中使用MySql作为数据库,由于数据涉及到Mo ... -
MySQL第二天早上第一次连接超时报错,解决方法
2015-02-03 15:36 728| 浏览:44 | 更新:2014- ... -
MYSQL 设置 FOR UPDATE 超时时间
2015-01-21 10:37 2628show global variables like &q ... -
如何设计动态(不定)字段的产品数据库表?--淘宝多产品属性字段设计方法
2014-07-17 13:46 1997项目组会议上讨论的关于不定字段数目的数据库表问 ... -
要想学好SQL语句必会的50题,也是考试常考的点
2014-05-28 10:46 613-- 一、创建教学系统的数据库,表,以及数据 ... -
关于MYSQL group by 分组按时间取最大值的实现方法!
2013-02-06 08:22 1176类如 有一个帖子的回复表,posts( id , tid , ... -
ORACLE之游标实战
2012-12-07 08:45 1196这是一个忙碌的季节,也是一个收获颇多的季节。在忙碌工作的同时, ... -
全国行政区域数据库(地市数据库)
2012-10-28 13:48 1094创建表格: -- Create table creat ... -
oracle 数据库字段按照拼音首字母排序
2012-10-27 13:00 15371、创建oracle存储过程(网上拿来的的) Sql ... -
ORACALE查询数据库按汉字拼音排序
2012-10-27 13:03 1331CREATE OR REPLACE FUNCTION PUB_ ... -
ORA-12519,TNS:no appropriate service handler found的问题
2012-10-18 15:47 7697Java代码 ORA-12519, TNS:n ... -
dbcp的基本配置
2012-10-18 15:41 10401. 引入dbcp (选择1.4)Java代码 <dep ... -
in和exists区别
2012-10-15 09:21 1227引子 in和exists的讨论从未间断过。之前有“今年是 ... -
ORACLE-分区表分区字段的update操作
2012-10-16 09:44 10892默认情况下,oracle的分区表对于分区字段是不允许进行u ... -
oracle分区表的建立方法(包含已经存在的表要分区)
2012-10-13 10:22 1570Oracle提供了分区技术以支持VLDB(Very L ... -
查询Oracle表实际物理使用大小
2012-10-13 09:54 1117Oracle中有两种含义的表大小一种是分配给一个表的物理空 ... -
Oracle tablespace (表空间)的创建、删除、修改、扩展及检查等
2012-10-13 09:39 1479oracle 数据库表空间的作用 1.决定数据库实体的空 ... -
Oracle异常ORA-01502: 索引或这类索引的分区处于不可用状态
2012-10-13 09:25 8037原因: 出现这个问题,可能有人move过表,或者disab ... -
Oracle中分区表的使用
2012-10-13 08:53 744前提: 查询分区:Select *From use ...
相关推荐
Oracle物化视图是数据库管理系统中的一个重要特性,尤其在处理大量数据和复杂查询的场景下,它可以极大地提升查询性能和数据一致性。物化视图与普通的视图不同,后者是逻辑上的虚表,其内容在查询时动态计算,而物化...
Oracle 物化视图创建和使用 Oracle 物化视图是一种预先计算并保存表连接或聚集等耗时较多的操作的结果,以提高查询性能。物化视图对应用程序透明,不会影响应用程序的正确性和有效性,但需要占用存储空间。基表发生...
Oracle物化视图是一种数据库对象,它存储了查询结果,以提供快速的数据访问,特别适合于需要频繁查询但计算过程复杂或涉及大量数据连接的场景。物化视图的使用可以显著提高查询性能,因为它避免了每次查询时的计算...
"Oracle 物化视图增量刷新的应用研究" Oracle 物化视图是 Oracle 公司提供的一种新技术,可以解决很多普通逻辑视图无法完成的功能。物化视图操作简单,支持增量刷新及全量刷新,可以支持复杂的表连接、聚合函数等...
Oracle物化视图是一种在数据库中预先计算并存储视图查询结果的数据对象,它与普通的视图不同,普通视图在查询时动态地基于基表数据生成结果,而物化视图则拥有自己的物理存储,提供了对数据的快速访问。在本篇循序渐...
"利用ORACLE物化视图建立报表数据库.pdf" 本文主要介绍了利用ORACLE物化视图建立报表数据库的方法和原理。报表数据库是指独立于生产数据库的数据库,用于存储和管理报表数据。通过建立报表数据库,可以实现工作负荷...
在Oracle 10g之前,要检查物化视图是否配置正确,需要使用DBMS_MVIEW包的EXPLAIN_MVIEW和EXPLAIN_REWRITE过程,这些过程只能简单地表明某个特性(如快速刷新或查询重写)可能适用于物化视图,但不会提供具体实现建议...
Oracle 物化视图 Oracle 物化视图是数据库对象,存储远程表的数据副本,也可以称为快照。物化视图可以查询表、视图和其他物化视图。通常情况下,物化视图被称为主表(在复制期间)或明细表(在数据仓库中)。 创建...
下面通过具体的步骤来展示如何创建和使用物化视图。 ##### 示例1:创建ONDEMAND物化视图 1. **创建表**: ```sql CREATE TABLE test1 (ID NUMBER PRIMARY KEY, NAME VARCHAR2(30)); ``` 这里创建了一个名为`...
### ORACLE9I 物化视图 #### 执行概览 随着数据库技术的发展,无论是数据仓库、数据集市还是在线事务处理(OLTP)系统,都承载着大量的等待被发现和理解的信息。然而,在海量数据中及时准确地查找并呈现这些信息...
总结,Oracle物化视图是一种提高数据库性能的重要手段,正确地设计和使用物化视图可以显著提升查询速度,降低系统负载。在实际应用中,需要根据具体业务需求和数据特点,合理规划物化视图的创建、刷新策略以及与其他...
### ORACLE使用物化视图和查询重写功能 #### 一、概述 在Oracle数据库中,物化视图和查询重写功能是提高查询效率和简化数据仓库管理的重要工具。物化视图是一种预计算的数据集合,它可以存储查询的结果集,而查询...
### Oracle物化视图介绍及应用详解 #### 一、物化视图概念与作用 在Oracle数据库中,物化...总之,Oracle物化视图是提高查询性能的有效工具之一,但其设计和使用需要根据具体的应用场景和需求进行仔细考虑和规划。
Oracle物化视图日志是一种强大的数据同步技术,尤其适用于分布式数据库和分布式应用系统之间的数据一致性维护。在当今信息化系统中,随着技术的快速发展,数据的分布性和实时性需求日益增强,数据同步成为了一个关键...
创建主键物化视图时,Oracle会使用主键来唯一标识记录,从而支持增量刷新。 - **示例**: ```sql CREATE MATERIALIZED VIEW mv_emp_pk REFRESH FAST START WITH SYSDATE NEXT SYSDATE + 1/48 WITH PRIMARY ...
### Oracle物化视图详解 #### 一、物化视图概述 Oracle物化视图是一种特殊类型的数据库对象,其核心功能在于预先计算并存储基于一个或多个表的查询结果,以此来加速后续的查询操作。与普通视图不同,普通视图在...
### Oracle如何根据物化视图日志快速刷新物化视图 #### 一、物化视图及其日志介绍 在Oracle数据库中,物化视图(Materialized View)是一种特殊的对象,它存储了预计算查询的结果,从而可以提高查询性能。物化视图...
物化视图是 Oracle 中的一种性能优化技术,它可以将复杂的查询结果存储在一个物化视图中,以便快速地检索数据。物化视图有三种刷新方式:COMPLETE、FAST 和 FORCE。 COMPLETE 刷新方式会删除表中所有的记录,然后...
Oracle物化视图是Oracle数据库中一种非常重要的特性,它提供了数据的一致性视图,通常用于实现数据的异步复制。本配置指导书主要针对Oracle高级复制中的物化视图,旨在帮助用户理解并成功配置物化视图,以满足在实际...