oracle 海量数据insert问题

xuelu2000

big_table@ORA10GR1> alter table big_table parallel;

Table altered.

big_table@ORA10GR1> alter session enable parallel dml;

Session altered.

cc59

2W要一分钟,太不正常了.

wxhoracle

无需调整.... 索引少点, 即可!!!!
再不行, 分成多表...

ziliu0305

建议：适时的做下表分析

killkill_shadow

我家的PC机，CPU 双核 2.93GHz ，SATA 7200RPM 500GB ， SQL Server 2008 ， C# 自己写的客户端，每秒都可以做到Insert 3000多条的成绩。
按照LZ的要求，平均每秒也就插入300~400条左右。
我相信Oracle在这方面不会比SQL Server差的。

yulihua49

原帖由 killkill_shadow 于 2009-11-13 14:10 发表
我家的PC机，CPU 双核 2.93GHz ，SATA 7200RPM 500GB ， SQL Server 2008 ， C# 自己写的客户端，每秒都可以做到Insert 3000多条的成绩。
按照LZ的要求，平均每秒也就插入300~400条左右。
我相信Oracle在这方面不会比SQL Server差的。

档次比你低点，1.6G，oracle，每秒5000多，逐条插入。
打开游标，绑定变量，用游标插入。

[ 本帖最后由 yulihua49 于 2009-11-14 15:51 编辑 ]

secooler

有可能的话，可以考虑使用SQL*Loader或使用外部表辅助加载。

本着“少写”的原则来提速。
例如：
减少日志写（nolog）
较少索引写（去掉表的索引）

yulihua49

原帖由 secooler 于 2009-11-18 09:56 发表
有可能的话，可以考虑使用SQL*Loader或使用外部表辅助加载。

本着“少写”的原则来提速。
例如：
减少日志写（nolog）
较少索引写（去掉表的索引）

如果表里有3千万，再插入200万，可能部分有重复，sqlldr玩的就困难点。
数组插入，如何处理个别重复记录，我还没学会。
有时数据库还在运行中，不允许停止，也不能随便删索引。
这种情况只能逐条插入，有问题逐条处理（更新 or 丢弃 or 记日志）。
打开游标，绑定变量是最快的。
上面每秒5000多，是在54个字段的表，一个复合主键的情况，数据与数据库同机，供参考。
同表sqlldr的插入速度是6000多每秒，但受限制太大。

[ 本帖最后由 yulihua49 于 2009-11-18 10:45 编辑 ]

secooler

如果原表中存在数据，并且是生产不允许停机的情况下，可以考虑先将数据加载到一个中间表，然后再找一个合适的维护窗口做合并。

whmng

都说的比较有理