高分 求助 向oracle 数据库 怎么插入数据 使查询时速度快

我要建两个表通过一个字段关联向第一个表中插入100W数据另一个1000我怎么才能快速插入数据关键查询的时候怎么能快速查询要求查询大数据表中全部数据和小表中关联数据最好3分... 我要建两个表 通过一个 字段关联 向第一个表中插入100W数据 另一个1000 我怎么才能快速插入数据 关键 查询的时候怎么能快速查询 要求 查询 大数据表中全部数据和 小表中 关联数据 最好3分内 能查出结果 可以么 我用的这个
select a.*,b.c_xname from sdy_db_testb a left join sdy_db_testc b on 1=1 and b.c_testa=a.c_testa; 语句 应该没问题吧 可是为什么查的速度很慢 而且 我用最简单的select * from tablename 这种语句查询 100W数据的表 速度都慢的 可以 是我插入的方法不对还是 表结构有问题
我数据大的表 建表结构如下
create table sdy_db_testb (
N_id number unique;

C_testa varchar2(30) DEFAULT to_char(0) NOT NULL,
N_testb number,
D_testc date DEFAULT SYSDATE NOT NULL
)
请 快点告诉我 很着急 谢谢
索引设置过了 达不到要求
根据cpu开并行,不写日志都可以啊 是 什么意思啊
展开
 我来答
小海豚58
2011-01-03 · 超过12用户采纳过TA的回答
知道答主
回答量:28
采纳率:0%
帮助的人:0
展开全部
逐条数据插入INSERT

数据导入的最简单方法就是编写 INSERT 语句,将数据逐条插入数据库。这种方法只适合导入少量数据,如 SQL*Plus 脚本创建某个表的种子数据。该方法的最大缺点就是导入速度缓慢,占用了大量的 CPU 处理时间,不适合大批量数据的导入;而其主要优点就是导入构思简单又有修改完善的弹性,不需要多做其它的准备就可以使用。如果你有很多时间没法打发,又想折磨一下数据库和 CPU,那这种方法正适合你。

为了与其它方法做比较,现将十万条记录通过此方法导入到 CALLS 表中,总共消耗 172 秒,其中导入进程占用 CPU 时间为 52 秒。

逐条数据插入 INSERT,表暂无索引

为什么上一种方法占用了较多的 CPU 处理时间,关键是 CALLS 表中已创建了索引,当一条数据插入到表中时,Oracle 需要判别新数据与老数据在索引方面是否有冲突,同时要更新表中的所有索引,重复更新索引会消耗一定的时间。因此提高导入速度的好办法就是在创建表时先不创建索引或者在导入数据之前删除所有索引,在外部文件数据逐条插入到表中后再统一创建表的索引。这样导入速度会提高,同时创建的索引也很紧凑而有效,这一原则同样适用于位图索引(Bitmap Index)。对于主要的和唯一的关键约束(key constraints),可以使之先暂时失效(disabling)或者删除约束来获得同样的效果,当然这些做法会对已经存在的表的外键约束产生相关的影响,在删除前需要通盘斟酌。

需要说明的是,这种方法在表中已存在很多数据的情况下不太合适。例如表中已有九千万条数据,而此时需要追加插入一千万条数据,实际导入数据节省的时间将会被重新创建一亿条数据的索引所消耗殆尽,这是我们不希望得到的结果。但是,如果要导入数据的表是空的或导入的数据量比已有的数据量要大得多,那么导入数据节省的时间将会少量用于重新创建索引,这时该方法才可以考虑使用。 加快索引创建是另一个需要考虑的问题。为了减少索引创建中排序的工作时间,可以在当前会话中增加 SORT_AREA_SIZE 参数的大小,该参数允许当前会话在内存的索引创建过程中执行更多的排序操作。同样还可以使用 NOLOGGING 关键字来减少因创建索引而生成的 REDO 日志量,NOLOGGING 关键字会对数据库的恢复和 Standby 备用数据库产生明显的影响,所以在使用之前要仔细斟酌,到底是速度优先还是稳定优先。

运用这种方法,先删除 CALLS 表的主键和不唯一的索引,然后逐条导入数据,完成后重新创建索引( 表在导入数据前是空的)。该方法总共消耗 130 秒,包括重建索引的时间,其中导入进程占用 CPU 时间为 35秒。

这种方法的优点是可以加快导入的速度并使索引更加紧凑有效;缺点是缺乏通用性,当你对表增加新的复杂的模式元素(索引、外键等)时你需要添加代码、修改导入执行程序。另外针对 7*24 在线要求的数据库在线导入操作时,删除表的索引会对在线用户的查询有很大的性能影响,同时也要考虑,主要或唯一的关键约束条件的删除或失效可能会影响到引用它们的外键的使用。

批量插入,表暂无索引

在Oracle V6 中 OCI 编程接口加入了数组接口特性。数组操作允许导入程序读取外部文件数据并解析后,向数据库提交SQL语句,批量插入 SQL 语句检索出的数据。Oracle 仅需要执行一次 SQL 语句,然后在内存中批量解析提供的数据。批量导入操作比逐行插入重复操作更有效率,这是因为只需一次解析 SQL 语句,一些数据绑订操作以及程序与数据库之间来回的操作都显著减少,而且数据库对每一条数据的操作都是重复可知的,这给数据库提供了优化执行的可能。其优点是数据导入的总体时间明显减少,特别是进程占用 CPU 的时间。

需要提醒的是,通过 OCI 接口确实可以执行数据批量导入操作,但是许多工具和脚本语言却不支持使用此功能。如果要使用该方法,需要研究你所使用的开发工具是否支持 OCI 批量操作功能。导入程序需要进行复杂的编码并可能存在错误的风险,缺乏一定的弹性。

运用上述方法,程序将外部数据提取到内存中的数组里,并执行批量插入操作(100行/次),保留了表的删除/重建索引操作,总的导入时间下降到 14 秒,而进程占用 CPU 的时间下降到7秒,可见实际导入数据所花费的时间显著下降了 95%。
今至电子科技有限公司
2024-08-23 广告
数据库备份是确保数据安全与业务连续性的关键环节。我们上海今至电子科技有限公司高度重视数据保护,定期执行全面的数据库备份策略。这包括使用先进工具和技术,对关键业务数据进行自动化备份,并存储在安全可靠的外部存储介质或云端。通过定期验证备份的完整... 点击进入详情页
本回答由今至电子科技有限公司提供
JG_陈
2011-01-03 · TA获得超过206个赞
知道小有建树答主
回答量:651
采纳率:100%
帮助的人:359万
展开全部
查询速度慢,跟你的插入没多大关系
大表sdy_db_testb的C_testa字段建索引;
把select a.*,b.c_xname from sdy_db_testb a left join sdy_db_testc b on 1=1 and b.c_testa=a.c_testa改成
select a.*,b.c_xname from sdy_db_testc a left join sdy_db_testb b on 1=1 and b.c_testa=a.c_testa;
即左边的为小表,这样就快 了;
不知道你的需求是否要把大表的数据都取出来
如果是都需要取出来的话,慢是必然的!因为要读的块数无法减少,IO开销你怎么优化都是无用的
本回答被提问者采纳
已赞过 已踩过<
你对这个回答的评价是?
评论 收起
rpfax31
2011-01-04 · TA获得超过3200个赞
知道小有建树答主
回答量:2049
采纳率:33%
帮助的人:955万
展开全部
只10000条记录不应该这么慢
你先试着手工插入
truncate table D2;
然后insert into D2 select * from D1 where rownum=1;

如果可行的话,你1000条插一次

insert into D2 select * from D1 where rownum>1 and rownum<=1000;
已赞过 已踩过<
你对这个回答的评价是?
评论 收起
342706466
2011-01-03 · 超过16用户采纳过TA的回答
知道答主
回答量:78
采纳率:0%
帮助的人:34万
展开全部
你应该看看优化的书了 我不知道 不写日志好像是怎么写个NO LOGGING 我忘记添在哪里了 你自己去搜吧
本回答被网友采纳
已赞过 已踩过<
你对这个回答的评价是?
评论 收起
liuchaoghq
2011-01-03
知道答主
回答量:2
采纳率:0%
帮助的人:3278
展开全部
根据cpu开并行,不写日志都可以啊
已赞过 已踩过<
你对这个回答的评价是?
评论 收起
收起 4条折叠回答
收起 更多回答(5)
推荐律师服务: 若未解决您的问题,请您详细描述您的问题,通过百度律临进行免费专业咨询

为你推荐:

下载百度知道APP,抢鲜体验
使用百度知道APP,立即抢鲜体验。你的手机镜头里或许有别人想知道的答案。
扫描二维码下载
×

类别

我们会通过消息、邮箱等方式尽快将举报结果通知您。

说明

0/200

提交
取消

辅 助

模 式