[原创]关于Infobright 的几种数据格式

2019独角兽企业重金招聘Python工程师标准>>>

如果大家用到INFOBRIGHT，对这个字眼就不陌生了。 

 

目前有4种格式。

1. binary.

2. txt_variable

3. mysql

4. infobright

 

代表什么意思呢，我来详细解释下。

BINARY 代表二进制数据。 也就是说，原始数据是以特定格式的二进制来保存。 具体格式，可以参见官方的白皮书，很容易下载到。

 

TXT_VARIABLE 代表 CSV格式文本。默认的列分隔符为“；”。 

 

MYSQL 代表和MYSQL兼容的CSV格式文本。默认分隔符为“水平制表符“。

 

INFOBRIGHT 呢，代表分布式导入工具（DLP）生成的中间结果集， 只能用来导入DLP的中间数据。

 

 

这几种格式的载入速度按照以下顺序，由高到低排列：

INFOBRIGHT   --->   BINARY ---> TXT_VARIABLE ---> MYSQL。

可以看到MYSQL载入最慢。 但是MYSQL能打印出来更多的错误信息以供调试。

 

 

设置方法：

set @bh_dataformat = '随便一种';

即可。

 

 

 

 

本文出自 “上帝，咱们不见不散！” 博客，请务必保留此出处http://yueliangdao0608.blog.51cto.com/397025/887262

转载于:https://my.oschina.net/u/585111/blog/219477