查看: 661|回复: 12

sqlite 导入csv比oracle方便

[复制链接]
论坛徽章:
401
紫蛋头
日期:2012-05-21 10:19:41迷宫蛋
日期:2012-06-06 16:02:49奥运会纪念徽章:足球
日期:2012-06-29 15:30:06奥运会纪念徽章:排球
日期:2012-07-10 21:24:24鲜花蛋
日期:2012-07-16 15:24:59奥运会纪念徽章:拳击
日期:2012-08-07 10:54:50奥运会纪念徽章:羽毛球
日期:2012-08-21 15:55:33奥运会纪念徽章:蹦床
日期:2012-08-21 21:09:51奥运会纪念徽章:篮球
日期:2012-08-24 10:29:11奥运会纪念徽章:体操
日期:2012-09-07 16:40:00
发表于 2019-6-10 15:32 | 显示全部楼层 |阅读模式
sqlite> create table t1 as select 2 a, 'a1' b;
sqlite> .tables
t1
sqlite> .separator ","
sqlite> .output t1.csv
sqlite> select * from t1
   ...> ;
sqlite> .output stdout
sqlite> .exit

[oracle@RJKFC-TEST3-140725 sqlite-amalgamation-3270200]$ cat t1.csv
2,a1
[oracle@RJKFC-TEST3-140725 sqlite-amalgamation-3270200]$ ./sqlite3
SQLite version 3.27.2 2019-02-25 16:06:06
Enter ".help" for usage hints.
Connected to a transient in-memory database.
Use ".open FILENAME" to reopen on a persistent database.
sqlite> create table t2(a int,b varchar(10));
sqlite> .separator ","
sqlite> .import t1.csv t2
sqlite> select * from t2;
2,a1
认证徽章
论坛徽章:
8
2009新春纪念徽章
日期:2009-01-04 14:52:28祖国60周年纪念徽章
日期:2009-10-09 08:28:002010新春纪念徽章
日期:2010-03-01 11:07:24ITPUB9周年纪念徽章
日期:2010-10-08 09:32:25ITPUB十周年纪念徽章
日期:2011-11-01 16:23:262013年新春福章
日期:2013-02-25 14:51:24沸羊羊
日期:2015-03-04 14:51:522015年新春福章
日期:2015-03-06 11:57:31
发表于 2019-6-10 16:46 | 显示全部楼层
呵呵,它们本来也不是一个量级的东西,适用场景也不同,所谓尺有所短寸有所长。

使用道具 举报

回复
论坛徽章:
533
奥运会纪念徽章:垒球
日期:2008-09-15 01:28:12生肖徽章2007版:鸡
日期:2008-11-17 23:40:58生肖徽章2007版:马
日期:2008-11-18 05:09:48数据库板块每日发贴之星
日期:2008-11-29 01:01:02数据库板块每日发贴之星
日期:2008-12-05 01:01:03生肖徽章2007版:虎
日期:2008-12-10 07:47:462009新春纪念徽章
日期:2009-01-04 14:52:28数据库板块每日发贴之星
日期:2009-02-08 01:01:03生肖徽章2007版:蛇
日期:2009-03-09 22:18:532009日食纪念
日期:2009-07-22 09:30:00
发表于 2019-6-11 03:32 | 显示全部楼层
能把CSV当外部表来跑SQL吗?

使用道具 举报

回复
论坛徽章:
401
紫蛋头
日期:2012-05-21 10:19:41迷宫蛋
日期:2012-06-06 16:02:49奥运会纪念徽章:足球
日期:2012-06-29 15:30:06奥运会纪念徽章:排球
日期:2012-07-10 21:24:24鲜花蛋
日期:2012-07-16 15:24:59奥运会纪念徽章:拳击
日期:2012-08-07 10:54:50奥运会纪念徽章:羽毛球
日期:2012-08-21 15:55:33奥运会纪念徽章:蹦床
日期:2012-08-21 21:09:51奥运会纪念徽章:篮球
日期:2012-08-24 10:29:11奥运会纪念徽章:体操
日期:2012-09-07 16:40:00
 楼主| 发表于 2019-6-11 08:07 | 显示全部楼层
newkid 发表于 2019-6-11 03:32
能把CSV当外部表来跑SQL吗?

需要一个插件
https://cloud.tencent.com/developer/section/1420071

使用道具 举报

回复
论坛徽章:
401
紫蛋头
日期:2012-05-21 10:19:41迷宫蛋
日期:2012-06-06 16:02:49奥运会纪念徽章:足球
日期:2012-06-29 15:30:06奥运会纪念徽章:排球
日期:2012-07-10 21:24:24鲜花蛋
日期:2012-07-16 15:24:59奥运会纪念徽章:拳击
日期:2012-08-07 10:54:50奥运会纪念徽章:羽毛球
日期:2012-08-21 15:55:33奥运会纪念徽章:蹦床
日期:2012-08-21 21:09:51奥运会纪念徽章:篮球
日期:2012-08-24 10:29:11奥运会纪念徽章:体操
日期:2012-09-07 16:40:00
 楼主| 发表于 2019-6-11 08:19 | 显示全部楼层
〇〇 发表于 2019-6-11 08:07
需要一个插件https://cloud.tencent.com/developer/section/1420071

更多说明
http://blog.sina.com.cn/s/blog_4fc2fb600102y67b.html

使用道具 举报

回复
论坛徽章:
401
紫蛋头
日期:2012-05-21 10:19:41迷宫蛋
日期:2012-06-06 16:02:49奥运会纪念徽章:足球
日期:2012-06-29 15:30:06奥运会纪念徽章:排球
日期:2012-07-10 21:24:24鲜花蛋
日期:2012-07-16 15:24:59奥运会纪念徽章:拳击
日期:2012-08-07 10:54:50奥运会纪念徽章:羽毛球
日期:2012-08-21 15:55:33奥运会纪念徽章:蹦床
日期:2012-08-21 21:09:51奥运会纪念徽章:篮球
日期:2012-08-24 10:29:11奥运会纪念徽章:体操
日期:2012-09-07 16:40:00
 楼主| 发表于 2019-6-11 09:11 | 显示全部楼层
完全不记得以前贴过
http://www.itpub.net/thread-2066306-1-1.html

使用道具 举报

回复
论坛徽章:
401
紫蛋头
日期:2012-05-21 10:19:41迷宫蛋
日期:2012-06-06 16:02:49奥运会纪念徽章:足球
日期:2012-06-29 15:30:06奥运会纪念徽章:排球
日期:2012-07-10 21:24:24鲜花蛋
日期:2012-07-16 15:24:59奥运会纪念徽章:拳击
日期:2012-08-07 10:54:50奥运会纪念徽章:羽毛球
日期:2012-08-21 15:55:33奥运会纪念徽章:蹦床
日期:2012-08-21 21:09:51奥运会纪念徽章:篮球
日期:2012-08-24 10:29:11奥运会纪念徽章:体操
日期:2012-09-07 16:40:00
 楼主| 发表于 2019-6-11 09:47 | 显示全部楼层
在linux上
[abcdeuser@localhost ~]$ ls
sqlite-amalgamation-3280000  sqlite-amalgamation-3280000.zip
[abcdeuser@localhost ~]$ mv sqlite-amalgamation-3280000 sqlite
[abcdeuser@localhost ~]$ cd sqlite
[abcdeuser@localhost sqlite]$ ls
shell.c  sqlite3.c  sqlite3.h  sqlite3ext.h
[abcdeuser@localhost sqlite]$ gcc shell.c sqlite3.c -lpthread -ldl
[abcdeuser@localhost sqlite]$ ll
total 9952
-rwxrwxr-x 1 abcdeuser
user 1198337 Jun 11 09:26 a.out
-rw-r--r-- 1 abcdeuser abcdeuser  527983 Apr 17 04:06 shell.c
-rw-r--r-- 1 abcdeuser abcdeuser 7864301 Apr 17 04:06 sqlite3.c
-rw-r--r-- 1 abcdeuser abcdeuser  559572 Apr 17 04:06 sqlite3.h
-rw-r--r-- 1 abcdeuser abcdeuser   33981 Apr 17 04:06 sqlite3ext.h
[abcdeuser@localhost sqlite]$ mv a.out sqlite3
[abcdeuser@localhost sqlite]$ mv ../csv.c .
[abcdeuser@localhost sqlite]$ gcc -g -fPIC -shared csv.c -o csv.so
csv.c:42:24: error: sqlite3ext.h: No such file or directory
[abcdeuser@localhost sqlite]$ gcc -g -fPIC -shared csv.c -o csv.so -I .
[abcdeuser@localhost sqlite]$ ll
total 10024
-rw-rw-r-- 1 abcdeuser abcdeuser   28486 Jun 11 09:27 csv.c
-rwxrwxr-x 1 abcdeuser abcdeuser   44022 Jun 11 09:29 csv.so
-rw-r--r-- 1 abcdeuser abcdeuser  527983 Apr 17 04:06 shell.c
-rwxrwxr-x 1 abcdeuser abcdeuser 1198337 Jun 11 09:26 sqlite3
-rw-r--r-- 1 abcdeuser abcdeuser 7864301 Apr 17 04:06 sqlite3.c
-rw-r--r-- 1 abcdeuser abcdeuser  559572 Apr 17 04:06 sqlite3.h
-rw-r--r-- 1 abcdeuser abcdeuser   33981 Apr 17 04:06 sqlite3ext.h
[abcdeuser@localhost sqlite]$ ./sqlite3
SQLite version 3.28.0 2019-04-16 19:49:53
Enter ".help" for usage hints.
Connected to a transient in-memory database.
Use ".open FILENAME" to reopen on a persistent database.
sqlite> .load ./csv
sqlite> CREATE VIRTUAL TABLE csv USING csv(filename=../t.csv);
sqlite> select * from csv;
name|age
tom|23
cat|34

使用道具 举报

回复
论坛徽章:
401
紫蛋头
日期:2012-05-21 10:19:41迷宫蛋
日期:2012-06-06 16:02:49奥运会纪念徽章:足球
日期:2012-06-29 15:30:06奥运会纪念徽章:排球
日期:2012-07-10 21:24:24鲜花蛋
日期:2012-07-16 15:24:59奥运会纪念徽章:拳击
日期:2012-08-07 10:54:50奥运会纪念徽章:羽毛球
日期:2012-08-21 15:55:33奥运会纪念徽章:蹦床
日期:2012-08-21 21:09:51奥运会纪念徽章:篮球
日期:2012-08-24 10:29:11奥运会纪念徽章:体操
日期:2012-09-07 16:40:00
 楼主| 发表于 2019-6-11 09:54 | 显示全部楼层
https://sqlite.org/csv.html
去掉标题行
sqlite> CREATE VIRTUAL TABLE csv USING csv(filename=../t.csv header=true);
Error: table csv already exists
sqlite> drop table csv;
sqlite> CREATE VIRTUAL TABLE csv USING csv(filename=../t.csv header=true);
Error: cannot open '../t.csv header=true' for reading
sqlite> CREATE VIRTUAL TABLE csv USING csv(filename=../t.csv , header=true);
sqlite> select * from csv;
tom|23
cat|34

使用道具 举报

回复
论坛徽章:
401
紫蛋头
日期:2012-05-21 10:19:41迷宫蛋
日期:2012-06-06 16:02:49奥运会纪念徽章:足球
日期:2012-06-29 15:30:06奥运会纪念徽章:排球
日期:2012-07-10 21:24:24鲜花蛋
日期:2012-07-16 15:24:59奥运会纪念徽章:拳击
日期:2012-08-07 10:54:50奥运会纪念徽章:羽毛球
日期:2012-08-21 15:55:33奥运会纪念徽章:蹦床
日期:2012-08-21 21:09:51奥运会纪念徽章:篮球
日期:2012-08-24 10:29:11奥运会纪念徽章:体操
日期:2012-09-07 16:40:00
 楼主| 发表于 2019-6-11 10:01 | 显示全部楼层
查看表结构
sqlite> .schema csv
CREATE VIRTUAL TABLE csv USING csv(filename=../t.csv , header=true)
/* csv(name,age) */

使用道具 举报

回复
论坛徽章:
76
山治
日期:2019-03-27 22:55:03秀才
日期:2016-01-25 15:02:04双子座
日期:2016-01-19 20:35:54秀才
日期:2016-01-13 12:14:26秀才
日期:2015-12-25 15:31:10秀才
日期:2015-12-18 09:28:57秀才
日期:2015-12-14 14:56:09秀才
日期:2015-12-14 14:51:16秀才
日期:2015-11-30 09:13:06处女座
日期:2015-11-27 12:27:01
发表于 2019-6-13 17:57 | 显示全部楼层
12.2以上的sqlldr express方式也很方便

使用道具 举报

回复

您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

TOP技术积分榜 社区积分榜 徽章 团队 统计 知识索引树 积分竞拍 文本模式 帮助
  ITPUB首页 | ITPUB论坛 | 数据库技术 | 企业信息化 | 开发技术 | 微软技术 | 软件工程与项目管理 | IBM技术园地 | 行业纵向讨论 | IT招聘 | IT文档
  ChinaUnix | ChinaUnix博客 | ChinaUnix论坛
CopyRight 1999-2011 itpub.net All Right Reserved. 北京盛拓优讯信息技术有限公司版权所有 联系我们 
京ICP备09055130号-4  北京市公安局海淀分局网监中心备案编号:11010802021510 广播电视节目制作经营许可证:编号(京)字第1149号
  
快速回复 返回顶部 返回列表