fetch bulk collect into 批量效率的读取游标数据

通常我们获取游标数据是用 fetch some_cursor into var1, var2 的形式，当游标中的记录数不多时不打紧。然而自 Oracle 8i 起，Oracle 为我们提供了 fetch bulk collect 来批量取游标中的数据。它能在读取游标中大量数据的时候提高效率，就像 SNMP 协议中，V2 版比 V1 版新加了 GET-BULK PDU 一样，也是用来更高效的批量取设备上的节点值。
　　fetch bulk collect into 的使用格式是：fetch some_cursor collect into col1, col2 limit xxx。col1、col2 是声明的集合类型变量，xxx 为每次取数据块的大小（记录数），相当于缓冲区的大小，可以不指定 limit xxx 大小。下面以实际的例子来说明它的使用，并与逐条取记录的 fetch into 执行效率上进行比较。测试环境是 Oracle 10g　 10.2.1.0，查询的联系人表 sr_contacts 中有记录数 1802983 条，游标中以 rownum 限定返回的记录数。

　　使用 fetch bulk collect into 获取游标数据

Java代码

1. declare　　　　
2. 　　--声明需要集合类型及变量，参照字段的type来声明类型　　　　　　
3. 　typeid_typeistableofsr_contacts.sr_contact_id%type;　　　
4. 　v_idid_type;　　　　　　　　　　　　
5. 　typephone_typeistableofsr_contacts.contact_phone%type;　　　
6. 　v_phonephone_type;　　　　　　　　　　　　
7. 　typeremark_typeistableofsr_contacts.remark%type;　　　　　
8. 　v_remarkremark_type;　　　
10. 　　cursorall_contacts_curisselectsr_contact_id,contact_phone,remarkfromsr_contactswhererownum<=100000;　　　　　　
12. begin　　　　
13. 　　　openall_contacts_cur;　　　　　
14. 　　　loop　　　　　
15. 　　　　　　　fetchall_contacts_curbulkcollectintov_id,v_phone,v_remarklimit256;　　　　　
16. 　　　　　　　foriin1..v_id.countloop--遍历集合　　　　　
17. 　　　　--用v_id(i)/v_phone(i)/v_remark(i)取出字段值来执行你的业务逻辑　　　　　　　
18. 　　　　　　　endloop;　　　　　
19. 　　　　　　　exitwhenall_contacts_cur%notfound;--exit不能紧接fetch了，不然会漏记录　　　　　
20. 　　　endloop;　　　　　
21. 　　　closeall_contacts_cur;　　　　　
22. end;　　　

　

　　使用 fetch into 逐行获取游标数据

1. declare　
3. 　　--声明变量，参照字段的type来声明类型　　　
4. 　v_idsr_contacts.sr_contact_id%type;　　
5. 　v_phonesr_contacts.contact_phone%type;　　
6. 　v_remarksr_contacts.remark%type;　　　
8. 　　cursorall_contacts_curisselectsr_contact_id,contact_phone,remarkfromsr_contactswhererownum<=100000;　　　
10. begin　
11. 　　　　　　
12. 　　　openall_contacts_cur;　　
13. 　　　loop　　
14. 　　　　　　　fetchall_contacts_curintov_id,v_phone,v_remark;　　
15. 　　　　　　　exitwhenall_contacts_cur%notfound;　　　　　　
16. 　　　　　　　--用v_id/v_phone/v_remark取出字段值来执行你的业务逻辑　　
17. 　　　　　　　null;--这里只放置一个空操作，只为测试循环取数的效率　　
18. 　　　endloop;　　
19. 　　　closeall_contacts_cur;　　
20. end;

　

　　执行性能比较

　　看看测试的结果，分别执行五次所耗费的秒数：

　　当 rownum <= 100000 时：

　　fetch bulk collect into 耗时：0.125秒, 0.125秒, 0.125秒, 0.125秒, 0.141秒

　　fetch into 耗时：　　　　　　1.266秒, 1.250秒, 1.250秒, 1.250秒, 1.250秒

　　当 rownum <= 1000000 时：

　　fetch bulk collect into 耗时：1.157秒, 1.157秒, 1.156秒, 1.156秒, 1.171秒

　　fetch into 耗时：　　　　　　12.128秒, 12.125秒, 12.125秒, 12.109秒, 12.141秒

　　当 rownum <= 10000 时：

　　fetch bulk collect into 耗时：0.031秒, 0.031秒, 0.016秒, 0.015秒, 0.015秒

fetch into 耗时：　　　　　　　　　　　　　　　　 0.141秒, 0.140秒, 0.125秒, 0.141秒, 0.125秒

　　当 rownum <= 1000 时：

　　fetch bulk collect into 耗时：0.016秒, 0.015秒, 0.016秒, 0.016秒, 0.015秒

　　fetch into 耗时：　　　　　　0.016秒, 0.031秒, 0.031秒, 0.032秒, 0.015秒

　　从测试结果来看游标的记录数越大时，用 fetch bulk collect into 的效率很明显示，趋于很小时就差不多了。

　　注意了没有，前面使用 fetch bulk collect into 时前为每一个查询列都定义了一个集合，这样有些繁琐。我们之前也许用过表的 %rowtype 类型，同样的我们也可以定义表的 %rowtype 的集合类型。看下面的例子，同时在这个例子中，我们借助于集合的 first、last 属性来代替使用 count　 属性来进行遍历。

1. declare　
2. 　　--声明需要集合类型及变量，参照字段的type来声明类型　　　
3. 　typecontacts_typeistableofsr_contacts%rowtype;　　
4. 　v_contactscontacts_type;　　　
5. 　　cursorall_contacts_curis--用rownum来限定取出的记录数来测试　　　
6. 　　　　select*fromsr_contactswhererownum<=10000;　　　
8. begin　
9. 　　　　　　
10. 　　　openall_contacts_cur;　　
11. 　　　loop　　
12. 　　　　　　　fetchall_contacts_curbulkcollectintov_contactslimit256;　　
13. 　　　　　　　foriinv_contacts.first..v_contacts.lastloop--遍历集合　　
14. 　　　　　　　　　　　--用v_contacts(i).sr_contact_id/v_contacts(i).contact_phone/v_contacts(i).remark　　
15. 　　　　　　　　　　　--的形式来取出各字段值来执行你的业务逻辑　　　
16. 　　　　　　　endloop;　　
17. 　　　　　　　exitwhenall_contacts_cur%notfound;　　
18. 　　　endloop;　　
19. 　　　closeall_contacts_cur;　　
20. end;　

　　
关于 limit 参数

　　你可以根据你的实际来调整 limit 参数的大小，来达到你最优的性能。limit 参数会影响到 pga 的使用率。而且也可以在 fetch bulk 中省略 limit 参数，写成

fetch all_contacts_cur bulk collect into v_contacts;

　　有些资料中是说，如果不写 limit 参数，将会以数据库的 arraysize　 参数值作为默认值。在 sqlplus 中用 show arraysize　 可以看到该值默认为 15，set arraysize 256 可以更改该值。而实际上我测试不带 limit 参数时，外层循环只执行了一轮，好像不是 limit 15，所以不写 limit 参数时，可以去除外层循环，begin-end 部分可写成：

1. begin　
2. 　　　openall_contacts_cur;　　
3. 　　　fetchall_contacts_curbulkcollectintov_contacts;　　
4. 　　　foriinv_contacts.first..v_contacts.lastloop--遍历集合　　
5. 　　　　　　　--用v_contacts(i).sr_contact_id/v_contacts(i).contact_phone/v_contacts(i).remark　　
6. 　　　　　　　--的形式来取出各字段值来执行你的业务逻辑　　
7. 　　　　　　　null;--这里只放置一个空操作，只为测试循环取数的效率　　
8. 　　　　　　　dbms_output.put_line(2000);　　
9. 　　　endloop;　　
10. 　　　closeall_contacts_cur;　　
11. end;　

bulk collect 的其他用法(总是针对集合)

　　select into 语句中，如：

SELECT sr_contact_id,contact_phone BULK COLLECT INTO v_id,v_phone
　　　　 FROM sr_contacts WHERE ROWNUM <= 100;
dbms_output.put_line('Count:'||v_id.count||', First:'||v_id(1)||'|'||v_phone(1));

　　returning into 语句中，如：

DELETE FROM sr_contacts WHERE sr_contact_id < 30
　　　 RETURNING sr_contact_id, contact_phone BULK COLLECT INTO v_id, v_phone;
dbms_output.put_line('Count:'||v_id.count||', First:'||v_id(1)||'|'||v_phone(1));

　　forall 的 bulk dml 操作，它大大优于 for 集合后的操作

fetch all_contacts_cur bulk collect into v_contacts;
forall i in 1 .. v_contacts.count
--forall i in v_contacts.first .. v_contacts.last　　
--forall i in indices of v_contacts --10g以上,可以是非连续的集合　　
insert into sr_contacts(sr_contact_id,contact_phone,remark)
　　　 values(v_contacts(i).sr_contact_id,v_contacts(i).contact_phone,v_contacts(i).remark);　

　　 --或者是单条的 delete/update 操作