12
返回列表 发新帖
楼主: ivan__zhang

[原创] 如何提高批量插入数据的速度

[复制链接]
论坛徽章:
131
乌索普
日期:2017-09-26 13:06:30马上加薪
日期:2014-11-22 01:34:242014年世界杯参赛球队: 尼日利亚
日期:2014-06-17 15:23:23马上有对象
日期:2014-05-11 19:35:172014年新春福章
日期:2014-04-04 16:16:58马上有对象
日期:2014-03-08 16:50:54马上加薪
日期:2014-02-19 11:55:14马上有对象
日期:2014-02-19 11:55:14马上有钱
日期:2014-02-19 11:55:14马上有房
日期:2014-02-19 11:55:14
11#
发表于 2007-5-30 23:53 | 只看该作者
最初由 ivan__zhang 发布
[B]你说的BULK INSERT 只能适合批量导入文件中的数据,而我导入的是页面上输入的数据。比如说,有表中的字段为:StartDate,EndDate,定单号,我在页面上输入,StartDate为2007-5-1,EndDate为2008-5-1号,那么我在程序中就要拆分成365条数据导入到DB中。怎样提高插入速度呢? [/B]


这个拆分的逻辑能不能方到存储过程里呢

使用道具 举报

回复
论坛徽章:
0
12#
 楼主| 发表于 2007-6-1 14:30 | 只看该作者
最初由 dzmjerry 发布
[B]

如果批量数据调用存储过程,连接是个耗资源的问题,要开好了执行完再关;
如果数据量很大能不能把数据存为SQL脚本格式再一次性提交执行一下,执行起来会很快,至少比重复调用SP快 [/B]


你是说我把数据拆成一条条的SQL语句保存到一个.sql文件中,然后通过程序依次性插入到DB中?但这样的速度会有很大的提高吗?因为写到.sql文件中也是耗时间的。

使用道具 举报

回复
论坛徽章:
0
13#
 楼主| 发表于 2007-6-1 14:33 | 只看该作者
最初由 justforregister 发布
[B]

这个拆分的逻辑能不能方到存储过程里呢 [/B]


这个方法值得考虑。感谢各位提出的建议。如果还有什么好建议请继续不吝赐教

使用道具 举报

回复
论坛徽章:
63
水瓶座
日期:2015-12-21 12:42:05马上有车
日期:2014-02-20 16:34:05马上加薪
日期:2014-02-19 11:55:14马上有对象
日期:2014-02-19 11:55:14马上有钱
日期:2014-02-19 11:55:14马上有房
日期:2014-02-19 11:55:14马上有车
日期:2014-02-19 11:55:14马上有车
日期:2014-02-18 16:41:112014年新春福章
日期:2014-02-18 16:41:11雪铁龙
日期:2013-12-10 11:21:27
14#
发表于 2007-6-1 19:35 | 只看该作者
看来还得从整个流程的逻辑上考虑

使用道具 举报

回复
论坛徽章:
0
15#
发表于 2008-7-4 06:09 | 只看该作者
可以考虑将多个 sql 写到一个 大的sql 里面一次执行,即:sql 批量执行。

使用道具 举报

回复
论坛徽章:
63
水瓶座
日期:2015-12-21 12:42:05马上有车
日期:2014-02-20 16:34:05马上加薪
日期:2014-02-19 11:55:14马上有对象
日期:2014-02-19 11:55:14马上有钱
日期:2014-02-19 11:55:14马上有房
日期:2014-02-19 11:55:14马上有车
日期:2014-02-19 11:55:14马上有车
日期:2014-02-18 16:41:112014年新春福章
日期:2014-02-18 16:41:11雪铁龙
日期:2013-12-10 11:21:27
16#
发表于 2008-7-4 15:08 | 只看该作者
不会循环调用存储过程了吧?业务逻辑能放到存储过程都放到存储过程,减少通过网络调用的次数。

使用道具 举报

回复

您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

TOP技术积分榜 社区积分榜 徽章 团队 统计 知识索引树 积分竞拍 文本模式 帮助
  ITPUB首页 | ITPUB论坛 | 数据库技术 | 企业信息化 | 开发技术 | 微软技术 | 软件工程与项目管理 | IBM技术园地 | 行业纵向讨论 | IT招聘 | IT文档
  ChinaUnix | ChinaUnix博客 | ChinaUnix论坛
CopyRight 1999-2011 itpub.net All Right Reserved. 北京盛拓优讯信息技术有限公司版权所有 联系我们 未成年人举报专区 
京ICP备16024965号-8  北京市公安局海淀分局网监中心备案编号:11010802021510 广播电视节目制作经营许可证:编号(京)字第1149号
  
快速回复 返回顶部 返回列表