12
返回列表 发新帖
楼主: 〇〇

infobright 3.52导入性能

[复制链接]
论坛徽章:
407
紫蛋头
日期:2012-05-21 10:19:41迷宫蛋
日期:2012-06-06 16:02:49奥运会纪念徽章:足球
日期:2012-06-29 15:30:06奥运会纪念徽章:排球
日期:2012-07-10 21:24:24鲜花蛋
日期:2012-07-16 15:24:59奥运会纪念徽章:拳击
日期:2012-08-07 10:54:50奥运会纪念徽章:羽毛球
日期:2012-08-21 15:55:33奥运会纪念徽章:蹦床
日期:2012-08-21 21:09:51奥运会纪念徽章:篮球
日期:2012-08-24 10:29:11奥运会纪念徽章:体操
日期:2012-09-07 16:40:00
11#
 楼主| 发表于 2011-2-15 12:19 | 只看该作者
IEE

使用道具 举报

回复
论坛徽章:
407
紫蛋头
日期:2012-05-21 10:19:41迷宫蛋
日期:2012-06-06 16:02:49奥运会纪念徽章:足球
日期:2012-06-29 15:30:06奥运会纪念徽章:排球
日期:2012-07-10 21:24:24鲜花蛋
日期:2012-07-16 15:24:59奥运会纪念徽章:拳击
日期:2012-08-07 10:54:50奥运会纪念徽章:羽毛球
日期:2012-08-21 15:55:33奥运会纪念徽章:蹦床
日期:2012-08-21 21:09:51奥运会纪念徽章:篮球
日期:2012-08-24 10:29:11奥运会纪念徽章:体操
日期:2012-09-07 16:40:00
12#
 楼主| 发表于 2011-2-15 12:44 | 只看该作者
mysql> load data infile '/user1/app/ren.csv' into table ren fields terminated by ',' lines terminated by '\n';
Query OK, 1242612226 rows affected, 1 warning (2 hours 49 min 18.12 sec)
Records: 1242612226  Deleted: 0  Skipped: 0  Warnings: 0

mysql> commit;
Query OK, 0 rows affected (0.46 sec)

mysql>
mysql> show warnings;
+-------+------+------------------------------------------------------------------------------------+
| Level | Code | Message                                                                            |
+-------+------+------------------------------------------------------------------------------------+
| Note  | 1105 | Query contains syntax that is unsupported in Infobright and which will be ignored. |
+-------+------+------------------------------------------------------------------------------------+
1 row in set (0.18 sec)

mysql> select floor(id/1E16),count(*) from rki.hu group by floor(id/1E16) order by 1;
select floor(id/1E16),count(*) from rki.ren group by floor(id/1E16) order by 1;

+----------------+----------+
| floor(id/1E16) | count(*) |
+----------------+----------+
+----------------+----------+
31 rows in set (3 min 8.44 sec)

mysql> select floor(id/1E16),count(*) from rki.ren group by floor(id/1E16) order by 1;
+----------------+----------+
| floor(id/1E16) | count(*) |
+----------------+----------+
+----------------+----------+
31 rows in set (8 min 55.98 sec)

使用道具 举报

回复
论坛徽章:
5
祖国60周年纪念徽章
日期:2009-10-09 08:28:002011新春纪念徽章
日期:2011-02-18 11:42:472012新春纪念徽章
日期:2012-01-04 11:54:262014年新春福章
日期:2014-02-18 16:43:09马上有钱
日期:2014-02-18 16:43:09
13#
发表于 2011-2-15 13:14 | 只看该作者
原帖由 〇〇 于 2011-2-12 15:41 发表
[root@redflag11012601 ~]# mkfifo --mode=0666 /user1/pipehu.csv
[root@redflag11012601 ~]# gzip --stdout -d /user1/app/hu.csv.gz > /user1/pipehu.csv &
[1] 10990
[root@redflag11012601 ~]# mysql-ib
Welcome to the MySQL monitor.  Commands end with ; or \g.
Your MySQL connection id is 4
Server version: 5.1.40 build number (revision)=IB_3.5.2_r11794_12019(iee_eval - commercial)

Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.

mysql> use rk;
Database changed
mysql> set autocommit=off;
Query OK, 0 rows affected (0.00 sec)

mysql>
mysql> set @BH_DATAFORMAT='txt_variable';
Query OK, 0 rows affected (0.00 sec)

mysql> load data infile '/user1/pipehu.csv' into table hu fields terminated by ',' lines terminated by '\n';
Query OK, 351233699 rows affected, 1 warning (1 hour 18 min 4.56 sec)
Records: 351233699  Deleted: 0  Skipped: 0  Warnings: 0

mysql> commit;
Query OK, 0 rows affected (0.01 sec)

mysql> load data infile '/user1/app/ren.csv' into table ren fields terminated by ',' lines terminated by '\n';









OO大神,我看您这是用IEE,我也下载了一个IEE 也生成了license ,但是总启动不了的说,提示license不生效。。。请教一下 你是怎么弄的?

使用道具 举报

回复
论坛徽章:
5
祖国60周年纪念徽章
日期:2009-10-09 08:28:002011新春纪念徽章
日期:2011-02-18 11:42:472012新春纪念徽章
日期:2012-01-04 11:54:262014年新春福章
日期:2014-02-18 16:43:09马上有钱
日期:2014-02-18 16:43:09
14#
发表于 2011-2-15 13:18 | 只看该作者
[root@rhel ]# /etc/init.d/mysqld-ib start
Starting MySQL........[FAILED]

110214 17:10:28 mysqld_safe mysqld from pid file /usr/local/infobright-3.5.2-x86_64/data/ZJCRNOPCOL1.pid ended
110215 13:10:04 mysqld_safe Starting mysqld daemon with databases from /usr/local/infobright-3.5.2-x86_64/data
110215 13:10:05 [Warning] options --log-slow-admin-statements, --log-queries-not-using-indexes and --log-slow-slave-statements have
no effect if --log_slow_queries is not set
Loading configuration for Infobright instance ...
Option: AllowMySQLQueryPath, value: 1.
Option: AutoConfigure, value: 0.
Option: CacheFolder, value: /usr/local/infobright-3.5.2-x86_64/cache.
Option: ControlMessages, value: 0.
Option: InternalMessages, value: 0.
Option: KNFolder, value: BH_RSI_Repository.
Option: KNLevel, value: 99.
Option: LicenseFile, value: <unknown>.
Option: LoaderMainHeapSize, value: 800.
Option: PushDown, value: 1.
Option: ServerMainHeapSize, value: 10000.
Option: UseMySQLImportExportDefaults, value: 0.
Infobright instance configuration loaded.
110215 13:10:05 [ERROR] Error: License verification failed!
110215 13:10:05 [ERROR] You are not licensed to run this version of the IEE.
110215 13:10:05 [ERROR] Plugin 'BRIGHTHOUSE' init function returned error.
110215 13:10:05 [ERROR] Plugin 'BRIGHTHOUSE' registration as a STORAGE ENGINE failed.
110215 13:10:05 [ERROR] Unknown/unsupported table type: brighthouse
110215 13:10:05 [ERROR] Aborting

110215 13:10:05 [Note] /usr/local/infobright-3.5.2-x86_64/bin/mysqld: Shutdown complete

110215 13:10:05 mysqld_safe mysqld from pid file /usr/local/infobright-3.5.2-x86_64/data/ZJCRNOPCOL1.pid ended



错误信息贴上

使用道具 举报

回复
论坛徽章:
407
紫蛋头
日期:2012-05-21 10:19:41迷宫蛋
日期:2012-06-06 16:02:49奥运会纪念徽章:足球
日期:2012-06-29 15:30:06奥运会纪念徽章:排球
日期:2012-07-10 21:24:24鲜花蛋
日期:2012-07-16 15:24:59奥运会纪念徽章:拳击
日期:2012-08-07 10:54:50奥运会纪念徽章:羽毛球
日期:2012-08-21 15:55:33奥运会纪念徽章:蹦床
日期:2012-08-21 21:09:51奥运会纪念徽章:篮球
日期:2012-08-24 10:29:11奥运会纪念徽章:体操
日期:2012-09-07 16:40:00
15#
 楼主| 发表于 2011-2-15 16:38 | 只看该作者
你把lic文件复制到/usr/local/infobright

使用道具 举报

回复
论坛徽章:
5
祖国60周年纪念徽章
日期:2009-10-09 08:28:002011新春纪念徽章
日期:2011-02-18 11:42:472012新春纪念徽章
日期:2012-01-04 11:54:262014年新春福章
日期:2014-02-18 16:43:09马上有钱
日期:2014-02-18 16:43:09
16#
发表于 2011-2-15 16:44 | 只看该作者
问题解决了  是lic文件格式问题。。。我用二进制方式传上去的,还有问题。。。。

使用道具 举报

回复

您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

TOP技术积分榜 社区积分榜 徽章 团队 统计 知识索引树 积分竞拍 文本模式 帮助
  ITPUB首页 | ITPUB论坛 | 数据库技术 | 企业信息化 | 开发技术 | 微软技术 | 软件工程与项目管理 | IBM技术园地 | 行业纵向讨论 | IT招聘 | IT文档
  ChinaUnix | ChinaUnix博客 | ChinaUnix论坛
CopyRight 1999-2011 itpub.net All Right Reserved. 北京盛拓优讯信息技术有限公司版权所有 联系我们 未成年人举报专区 
京ICP备16024965号-8  北京市公安局海淀分局网监中心备案编号:11010802021510 广播电视节目制作经营许可证:编号(京)字第1149号
  
快速回复 返回顶部 返回列表