首页 / ORACLE / Oracle并行原理深入解析及案例精粹

Oracle并行原理深入解析及案例精粹

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了Oracle并行原理深入解析及案例精粹，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含11138字，纯文字阅读大概需要16分钟。

内容图文

一、简单介绍OLTP和OLAP系统的特点小结答：OLTP和OLAP是我们大家在日常生产库中最常用到的2种系统，简单的说OLTP是基于多事务短时

引言：首先说明并行技术属于大数据范畴，适合OLAP系统，在任务分割、数据块分割、资源充裕的场合应用较广，本次分享主要概括并行原理、实际应用、性能对比、并行直接加载、索引属性、特点小结等六个小点去重点阐述。下面的测试是我的笔记，这些笔记也参考了《让Oracle跑得更快2》作者：谭怀远一书的引导，在此向谭总表示感谢，向帮助过我们的人表示感谢 zhixiang yangqiaojie等好友，下面我们就开始快乐的旅途！

一、简单介绍OLTP和OLAP系统的特点小结

答：OLTP和OLAP是我们大家在日常生产库中最常用到的2种系统，简单的说OLTP是基于多事务短时间片的系统，内存的效率决定了数据库的效率。
OLAP是基于大数据集长时间片的系统，SQL执行效率决定了数据库的效率。因此说“并行parallel”技术属于OLAP系统范畴
二、并行技术实现机制和场合
答：并行是相对于串行而言的，一个大的数据块分割成n个小的数据块，同时启动n个进程分别处理n个数据块，最后由并行协调器coordinater整合结果返回给用户。实际上在一个并行执行的过程中还存在着并行进程之间的通信问题（并行间的交互操作）。上面也说过并行是属于大数据处理的技术适合OLAP，并不适合OLTP，因为OLTP系统中的sql执行效率通常都是非常高的。
三、测试并行技术在实际中的应用和规则
（1)在有索引的表leo_t上使用并行技术，但没有起作用的情况
创建一张表
LS@LEO> create table leo_t as select rownum id ,object_name,object_type from dba_objects;
在表id列上创建索引
LS@LEO> create index leo_t_idx on leo_t(id);
收集表leo_t统计信息
LS@LEO> execute dbms_stats.gather_table_stats(ownname=>'LS',tabname=>'LEO_T',method_opt=>'for all indexed columns size
2',cascade=>TRUE);
为表启动4个并行度
LS@LEO> alter table leo_t parallel 4;
启动执行计划
LS@LEO> set autotrace trace explain stat
LS@LEO> select * from leo_t where id=100; 使用索引检索的数据，并没有启动并行
Execution Plan 执行计划
----------------------------------------------------------
Plan hash value: 2049660393
-----------------------------------------------------------------------------------------
| Id | Operation | Name | Rows | Bytes | Cost (%CPU)| Time |
-----------------------------------------------------------------------------------------
| 0 | SELECT STATEMENT | | 1 | 28 | 2 (0)| 00:00:01 |
| 1 | TABLE ACCESS BY INDEX ROWID| LEO_T | 1 | 28 | 2 (0)| 00:00:01 |
|* 2 | INDEX RANGE SCAN | LEO_T_IDX | 1 | | 1 (0)| 00:00:01 |
-----------------------------------------------------------------------------------------
Predicate Information (identified by operation id):
---------------------------------------------------
2 - access("ID"=100)
Statistics 统计信息
----------------------------------------------------------
1 recursive calls
0 db block gets
4 consistent gets 4次一致性读，即处理4个数据块
0 physical reads
0 redo size
544 bytes sent via SQL*Net to client
381 bytes received via SQL*Net from client
2 SQL*Net roundtrips to/from client
0 sorts (memory)
0 sorts (disk)
1 rows processed
说明：我们在这个表上启动了并行但没有起作用是因为CBO优化器使用了B-tree索引来检索的数据直接就定位到rowid（B-tree索引特点适合重复率比较低的字段），所以才发生了4个一致性读，发现使用索引效率非常高，资源代价比较小没有使用并行的必要了。
（2)读懂一个并行执行计划
LS@LEO> select object_type,count(*) from leo_t group by object_type; 对象类型分组统计
35 rows selected.
Execution Plan 并行执行计划
----------------------------------------------------------
Plan hash value: 852105030
------------------------------------------------------------------------------------------------------------------
| Id | Operation | Name | Rows | Bytes | Cost (%CPU)| Time | TQ |IN-OUT| PQ Distrib |
------------------------------------------------------------------------------------------------------------------
| 0 | SELECT STATEMENT | | 10337 | 111K| 6 (17)| 00:00:01 | | | |
| 1 | PX COORDINATOR | | | | | | | | |
| 2 | PX SEND QC (RANDOM) | :TQ10001 | 10337 | 111K| 6 (17)| 00:00:01 | Q1,01 | P->S | QC (RAND) |
| 3 | HASH GROUP BY | | 10337 | 111K| 6 (17)| 00:00:01 | Q1,01 | PCWP | |
| 4 | PX RECEIVE | | 10337 | 111K| 6 (17)| 00:00:01 | Q1,01 | PCWP | |
| 5 | PX SEND HASH | :TQ10000 | 10337 | 111K| 6 (17)| 00:00:01 | Q1,00 | P->P | HASH |
| 6 | HASH GROUP BY | | 10337 | 111K| 6 (17)| 00:00:01 | Q1,00 | PCWP | |
| 7 | PX BLOCK ITERATOR | | 10337 | 111K| 5 (0)| 00:00:01 | Q1,00 | PCWC | |
| 8 | TABLE ACCESS FULL| LEO_T | 10337 | 111K| 5 (0)| 00:00:01 | Q1,00 | PCWP | |
------------------------------------------------------------------------------------------------------------------
Statistics 统计信息
----------------------------------------------------------
44 recursive calls
0 db block gets
259 consistent gets 259次一致性读，即处理259个数据块
0 physical reads
0 redo size
1298 bytes sent via SQL*Net to client
403 bytes received via SQL*Net from client
4 SQL*Net roundtrips to/from client
1 sorts (memory)
0 sorts (disk)
35 rows processed
ps -ef | grep oracle 从后台进程上看也能发现起了4个并行进程和1个协调进程
oracle 25075 1 0 22:58 ? 00:00:00 ora_p000_LEO
oracle 25077 1 0 22:58 ? 00:00:00 ora_p001_LEO
oracle 25079 1 0 22:58 ? 00:00:00 ora_p002_LEO
oracle 25081 1 0 22:58 ? 00:00:00 ora_p003_LEO
oracle 25083 1 0 22:58 ? 00:00:00 ora_p004_LEO
说明：在进行分组整理的select中，会处理大量的数据集（发生了259次一致性读），这时使用并行来分割数据块处理可以提高效率，因此oracle使用了并行技术，解释一下并行执行计划步骤，并行执行计划应该从下往上读，当看见PX（parallel execution）关键字说明使用了并行技术
1.首先全表扫描
2.并行进程以迭代iterator的方式访问数据块，并将扫描结果提交给父进程做hash group
3.并行父进对子进程传递过来的数据做hash group操作
4.并行子进程（PX SEND HASH）将处理完的数据发送出去，子和父是相对而言的，我们定义发送端为子进程，接收端为父进程
5.并行父进程（PX RECEIVE）将处理完的数据接收
6.按照随机顺序发送给并行协调进程QC（query coordinator）整合结果（对象类型分组统计）
7.完毕后QC将整合结果返回给用户
说明并行执行计划中特有的IN-OUT列的含义（指明了操作中数据流的方向）
Parallel to Serial（P->S）: 表示一个并行操作向一个串行操作发送数据，通常是将并行结果发送给并行调度进程QC进行汇总
Parallel to Parallel（P->P）：表示一个并行操作向另一个并行操作发送数据，一般是并行父进程与并行子进程之间的数据交流。
Parallel Combined with parent(PCWP): 同一个从属进程执行的并行操作，同时父操作也是并行的。
Parallel Combined with Child(PCWC): 同一个从属进程执行的并行操作，同时子操作也是并行的。
Serial to Parallel（S->P）: 表示一个串行操作向一个并行操作发送数据，如果select部分是串行操作，就会出现这个情况
（3）介绍4个我们常用的并行初始化参数
parallel_min_percent 50% 表示指定SQL并行度最小阀值才能执行，如果没有达到这个阀值，oracle将会报ora-12827错误
parallel_adaptive_multi_user TRUE 表示按照系统资源情况动态调整SQL并行度，已取得最好的执行性能
parallel_instance_group 表示在几个实例间起并行
parallel_max_servers 100 表示整个数据库实例的并行进程数不能超过这个值
parallel_min_servers 0 表示数据库启动时初始分配的并行进程数，如果我们设置的并行度小于这个值，并行协调进程会按我们的并行度来分配并行进程数，如果我们设置的并行度大于这个值，并行协调进程会额外启动其他的并行进程来满足我们的需求
（4）使用hint方式测试DML并行查询性能
首先说一下什么时候可以使用并行技术
1.对象属性：在创建的时候，就指定了并行关键字，长期有效
2.sql强制执行：在sql中使用hint提示方法使用并行，临时有效，它是约束sql语句的执行方式，本次测试就是使用的hint方式
LS@LEO> select /*+ parallel(leo_t 4) */ count(*) from leo_t where object_name in (select /*+ parallel(leo_t1 4) */ object_name from
leo_t1);
Execution Plan 执行计划
----------------------------------------------------------
Plan hash value: 3814758652
-------------------------------------------------------------------------------------------------------------------
| Id | Operation | Name | Rows | Bytes | Cost (%CPU)| Time | TQ |IN-OUT| PQ Distrib |
-------------------------------------------------------------------------------------------------------------------
| 0 | SELECT STATEMENT | | 1 | 94 | 16 (0)| 00:00:01 | | | |
| 1 | SORT AGGREGATE | | 1 | 94 | | | | | |
| 2 | PX COORDINATOR | | | | | | | | |
| 3 | PX SEND QC (RANDOM) | :TQ10002 | 1 | 94 | | | Q1,02 | P->S | QC (RAND) |
| 4 | SORT AGGREGATE | | 1 | 94 | | | Q1,02 | PCWP | |
|* 5 | HASH JOIN SEMI | | 10337 | 948K| 16 (0)| 00:00:01 | Q1,02 | PCWP | |
| 6 | PX RECEIVE | | 10337 | 282K| 5 (0)| 00:00:01 | Q1,02 | PCWP | |
| 7 | PX SEND HASH | :TQ10000 | 10337 | 282K| 5 (0)| 00:00:01 | Q1,00 | P->P | HASH |
| 8 | PX BLOCK ITERATOR | | 10337 | 282K| 5 (0)| 00:00:01 | Q1,00 | PCWC | |
| 9 | TABLE ACCESS FULL| LEO_T | 10337 | 282K| 5 (0)| 00:00:01 | Q1,00 | PCWP | |
| 10 | PX RECEIVE | | 10700 | 689K| 11 (0)| 00:00:01 | Q1,02 | PCWP | |
| 11 | PX SEND HASH | :TQ10001 | 10700 | 689K| 11 (0)| 00:00:01 | Q1,01 | P->P | HASH |
| 12 | PX BLOCK ITERATOR | | 10700 | 689K| 11 (0)| 00:00:01 | Q1,01 | PCWC | |
| 13 | TABLE ACCESS FULL| LEO_T1 | 10700 | 689K| 11 (0)| 00:00:01 | Q1,01 | PCWP | |
-------------------------------------------------------------------------------------------------------------------
并行先扫描子查询leo_t1表，然后对主查询leo_t表进行扫描，，按照随机顺序发送到并行协调进程QC整合结果，最后将结果返回给用户
Predicate Information (identified by operation id):
---------------------------------------------------
5 - access("OBJECT_NAME"="OBJECT_NAME")
Note
-----
- dynamic sampling used for this statement
Statistics 统计信息
----------------------------------------------------------
28 recursive calls
0 db block gets
466 consistent gets 466次一致性读，即处理了446个数据块
0 physical reads
0 redo size
413 bytes sent via SQL*Net to client
381 bytes received via SQL*Net from client
2 SQL*Net roundtrips to/from client
2 sorts (memory)
0 sorts (disk)
1 rows processed

Oracle并行原理深入解析及案例精粹 - 文章图片

内容总结

以上是互联网集市为您收集整理的Oracle并行原理深入解析及案例精粹全部内容，希望文章能够帮你解决Oracle并行原理深入解析及案例精粹所遇到的程序开发问题。如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容，请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

扫描二维码推送至手机访问。

本文链接：https://qyyshop.com/info/548939.html

来源：【匿名】

【上一篇】Oracle的recyclebin 【下一篇】Oracle Faq(Oracle TAF的配置)

更多 ►

【Oracle并行原理深入解析及案例精粹】教程文章相关的互联网学习教程文章

Oracle中Clob类型处理解析：ORA-01461:仅可以插入LONG列的LONG值赋值【代码】

感谢原作者：破剑冰-Oracle中Clob类型处理解析上一篇分析：ORA-01461: 仅能绑定要插入 LONG 列的 LONG 值　　最近为Clob字段在插入数据时发现当字符的字节数（一个半角字符一个字节，一个全角字符两个字节）在2000-4000之间时报错（ORA-01461:仅可以插入LONG列的LONG值赋值）。经过不断查找资料和自己的试验该问题终于得到解决，下边我将自己的心得给大家做一个分享。准备系统环境 xp+.net2.0+oracle9i表结构（由于是测试，表结构...

Oracle OCP认证考试题库解析052-1

QUESTION 1You notice that the performance of the database has degraded because of frequent checkpoints.Which two actions resolve the issue? (Choose two.)A. Disable automatic checkpoint tuningB. Check the size of the redo log file size and increase the size if it is smallC. Set the FAST_START_MTTR_TARGET parameter as per the advice given by the MTTR AdvisorD. Decrease the number of redo log members...

Oracle HS (Heterogeneous Services)深入解析及协同Gateway工作流程(转)【图】

异构的数据源同Oracle Database做交互原理。图1上图是一张Oracle 异构连接处理的架构图，其中我们可以看到主要的非数据源模块包括有HS(Heterogeneous Service), Agent. 还有一个远程数据库，我们假设它是异构的数据源。可以看到，Oracle是不能直接同这些异构数据源作交互，Oracle是需要通过Heterogeneous Services协同Agent才能和异构数据源作数据交互。Heterogeneous Services ComponentHS是Oracle Database的一个组件，它用于同N...

Oracle12c 新概念CDB与PDB 解析【代码】【图】

转载自：http://www.cnblogs.com/siyunianhua/p/4004361.html原文章标题：Oracle 12c创建用户时出现“ORA-65096: invalid common user or role name”的错误这篇文章主要介绍CDB和PDB的基本管理，资料来源oracle官方。基本概念：Multitenant Environment：多租户环境CDB（Container Database）：数据库容器PD（Pluggable Database）：可插拔数据库CDB与PDB关系图 COMMON USERS(普通用户)：经常建立在CDB层，用户名以C##或c##开...

深入解析Oracle笔记一

oracle 11g 必需的后台进程：PMON、DBWn、LGWR、CKPT、SMON、VKTMPMON：进程监控进程1、实例第一个启动的后台进程2、监控其他oracle后台进程的职责，必要时重启这些后台进程3、向TNS监听器注册实例DBWn：数据库写进程1、将内存种变更的数据写入磁盘数据文件2、最多配置20个数据库写进程 DBW0--DBW9, DBWa--DBWjLGWR：日志写进程1、管理SGA中的Redo Log Buffer，将其中的内容连续写出到在线的日志文件中2、Redo中记录的是可以重演的...

对与oracle解析的观察

1.比较硬解析：SQL> create table t as select * from dba_objects;表已创建。已用时间: 00: 00: 00.92SQL> set linesize 1000SQL> set autotrace onSQL> set timing onSQL> select count(*) from t; COUNT(*)---------- 79691已用时间: 00: 00: 00.24执行计划----------------------------------------------------------Plan hash value: 2966233522-------------------------------------------------------------------|...

本地安装ORACLE数据库之后，连接远程数据库，提示无法解析指定的连接标识符【图】

因为之前，oracle 数据库都在服务器上边，所以，在本地都是安装的都是oracle客户端，然后在装pl/sql。最近由于某些原因，需要在本地安装oracle数据库，安装以后，连接远程的数据库，老是提示“无法解析指定的连接标识符”，如下图：最后，解决办法在这里 http://www.cnblogs.com/psforever/p/3929064.html原文：http://www.cnblogs.com/qxynotebook/p/7801923.html

ORACLE 解析xml字符串-转载的

1.xml字符串/*<orderlist> <order> <orderid>1</orderid> <ordernumber>857544544</ordernumber> <orderprice>54</orderprice> </order> <order> <orderid>2</orderid> <ordernumber>858544544</ordernumber> <orderprice>63</orderprice> </order> <order> <orderid>3</orderid> <ordernumber>454854555</ordernumb...

Oracle SQL的硬解析和软解析

我们都知道在Oracle中每条SQL语句在执行之前都需要经过解析，这里面又分为软解析和硬解析。在Oracle中存在两种类型的SQL语句，一类为 DDL语句(数据定义语言)，他们是从来不会共享使用的，也就是每次执行都需要进行硬解析。还有一类就是DML语句(数据操纵语言)，他们会根据情况选择要么进行硬解析，要么进行软解析。 DML:INSERT,UPDATE,DELETE,SELECTDDL:CREATE,DROP,ALTER 一. SQL 解析过程 Oracle对此SQL将进行几个步骤的处理过程...

ORACLE ROWNUM解析[转]

一、对rownum的说明关于Oracle 的 rownum 问题，很多资料都说不支持SQL语句中的“>、>=、=、between...and”运算符，只能用如下运算符号“<、<=、!=”，并非说用“>、>=、=、between..and”时会提示SQL语法错误，而是经常是查不出一条记录来，还会出现似乎是莫名其妙的结果来。其实，只要理解好了这个 rownum 伪列的意义就不应该感到惊奇。 rowid 与 rownum 虽都被称为伪列，但它们的存在方式是不一样的： rowid 是物...

Oracle 解析Cron表达式函数【代码】

创建自定义数组cron_type_number本方法中用到了自定义数组，需要单独创建createorreplace type cron_type_number astableofnumber(4); 创建函数cron_getnexttimeafter() 1createorreplacefunction cron_getnexttimeafter(cron varchar2,start_time varchar2default to_char(sysdate,‘yyyy-MM-dd hh24:mi:ss‘))2returnvarchar2 3as 4 result_time varchar2(1024);--返回结果 5 type l_cron_type_number istableofnumber(4) in...

解析如何查看Oracle数据库中某张表的字段个数

Oracle中查询某个表的总字段数，要用SQL语句，或者在PL/SQL里面复制代码代码如下:select count(column_name) from user_tab_columns where table_name=‘T_B_AUDITOR‘能够查出来指定的那张表的字段数。下面是通过大致查看：select tname,count(*) from col group by tname;复制代码代码如下:64 T_A_BOOKSTAGEINFO 465 T_B_AUDITOR 1466 T_B_BOOKMANAGEMENT 1367 T_B_BOOKSTATUSCONFIG 568 T_B_CODETREEINFO 869 T_B...

解决使用OCI连接oracle LNK2019: 无法解析的外部符号的问题

据我所知，在使用OCI连接Oracle时出现LNK2019: 无法解析的外部符号问题的情况有两种：一.没有引入附加依赖项，右键项目->属性->配置属性->链接器->输入中添加oraocci11.lib（视数据库版本而定）。或在程序之中添加 #pragma comment(lib , "oraocci11.lib").二.64位的机器，64位的oracle数据库，编译为win32。应该编译为64位的程序（在属性，配置管理器中修改）。这个问题真是疏忽了。原文：http://www.cnblogs.com/WonderHow/p/400...

Oracle中Clob类型处理解析（转）

转：原文：http://blog.csdn.net/pojianbing/article/details/2789426 最近利用NHibernate映射类型为Clob字段在插入数据时发现当字符的字节数（一个半角字符一个字节，一个全角字符两个字节）在2000-4000之间时报错（ORA-01461:仅可以插入LONG列的LONG值赋值）。经过不断查找资料和自己的试验该问题终于得到解决，下边我将自己的心得给大家做一个分享。准备系统环境 xp+.net2.0+oracle9i 表结构（由于是测试，表结构随便建了一...

解析Oracle中多表级联删除的方法

表间的关系比较复杂，数据量又比较多，一个个删绝对会出大问题。于是实验了几种解决的办法，现小结一下。方法一：创建约束时设定级联删除（但一般由于各种原因或出于各种考虑在创建数据库时没有设定级联删除）SQL语句：复制代码代码如下:CREATE TABLE "U_WEN_BOOK"."FARTAB" ("FAR_ID" NUMBER(10) NOT NULL,"FAR_NAME" VARCHAR2(10), "OTHER_NAME" VARCHAR2(10), CONSTRAINT "PK_FER" PRIMARY KEY("FAR_ID")) CREATE TABLE "U_WEN...

ORACLE - 最热教程

Oracle11g 创建数据库中问题处理（必须...Oracle 查看索引表空间 Navicat报错-ORA-28547：connection to...oracle 查看最大连接数 Oracle中合并数据集(多行变一行)Navicat如何添加oracle的oci.dll插件，...oracle如何将am,pm时间字符串改为时间格...for update造成的Oracle锁表与解锁 phppdooracle中文乱码的快速解决方法_P...Oracle分区表新增主分区及子分区语句

首页 / ORACLE / Oracle并行原理深入解析及案例精粹

Oracle并行原理深入解析及案例精粹

内容导读

内容图文

内容总结

内容备注

内容手机端

【Oracle并行原理深入解析及案例精粹】教程文章相关的互联网学习教程文章

Oracle中Clob类型处理解析：ORA-01461:仅可以插入LONG列的LONG值赋值【代码】

Oracle OCP认证考试题库解析052-1

Oracle HS (Heterogeneous Services)深入解析及协同Gateway工作流程(转)【图】

Oracle12c 新概念CDB与PDB 解析【代码】【图】

深入解析Oracle笔记一

对与oracle解析的观察

本地安装ORACLE数据库之后，连接远程数据库，提示无法解析指定的连接标识符【图】

ORACLE 解析xml字符串-转载的

Oracle SQL的硬解析和软解析

ORACLE ROWNUM解析[转]

Oracle 解析Cron表达式函数【代码】

解析如何查看Oracle数据库中某张表的字段个数

解决使用OCI连接oracle LNK2019: 无法解析的外部符号的问题

Oracle中Clob类型处理解析（转）

解析Oracle中多表级联删除的方法

ORACLE - 相关标签

ORACLE - 最新教程

ORACLE - 最热教程