ETL工具及ELT初探

ETL,是英文 Extract-Transform-Load 的缩写,用来描述将数据从来源端经过抽取(extract)、转换(transform)、加载(load)至目的端的过程。ETL 是构建数据仓库的重要一环,用户从数据源抽取出所需的数据,经过数据清洗,最终按照预先定义好的数据仓库模型,将数据加载到数据仓库中去。

一 ETL工具
【国外】

1. datastage
点评:最专业的ETL工具,价格不菲,使用难度一般

2. informatica
点评:专业程度如Datastage旗鼓相当,价格似乎比Datastage便宜。

3. kettle
点评:业界最有名的开源ETL工具。开源当然就免费,免费的有些东西使用就不是很方便。

4. ODI
点评:oracle数据库厂商提供的工具,有局限性,与oracle数据库耦合太深。

5.Cognos

6.sqoop
这个是一同事推荐的工具,具体还不了解。开源是肯定的:)

【国内】
7. beeload
点评: 最好的国产ETL工具,但产品化程度还有一定距离。


二 专业调度工具
有人说: ETL是BI的基础,而调度是ETL的灵魂,可见调度的重要性!
调度原本是ETL技术的一个分支,但这些年, 调度越来似乎有走独立工具的趋势。虽然在ETL工具有调度功能,但与独立调度工具相比,ETL工具的调度就显得很弱了。

【国外】
1. Control-M
点评:你当了大哥太多年,确实有点寂寞。不论是你的规模、价格、使用难度,都很伟大,但我一界平民,你对我只是传说。

【国内】
2. taskctl
点评:调度新秀。专业,而且设计独特、体验友好。易安装、易使用,看好其前景。

3. ETS
点评:专业化有待提升

4. Moia
点评:产品与项目是有区别的,不要总是在产品化与客户化之间徘徊。

5. ETL-Plus
点评:功能全,遗憾的是东南倒塌。

猜你喜欢

转载自blog.csdn.net/chenyunqiang/article/details/80936323
今日推荐