大数据时代的集成利器
ETL工具
https://blog.csdn.net/little_bee_2004/article/details/80006047
在信息时代大数据环境下，基于分布式的开源Hadoop架构日渐流行。在为大数据存储和处理提供便利的同时，它对企业的数据访问、数据整合和数据质量管理都提出了更高的要求。
为此，国产数据集成软件厂商北京灵蜂软件有限公司日前宣布，推出最新版本的企业级数据集成软件BeeDI，并添加对Hadoop数据接口的支持。新版软件能够帮助客户实现对非结构化、半结构化数据的整合，为驾驭大数据奠定坚实的基础。
大数据时代的集成利器
以开源为主导的Hadoop由于其扩展性好，且成本较低而受到了企业的青睐，成为了大数据时代的主要数据存储技术。然而如何在已有的数据分析与商业智能框架之中，将Hadoop大数据系统集成进来成为了许多企业为之苦恼的难题。围绕Hadoop的生态体系也提供了一些开源工具来实现传统数据与大数据的集成，如Sqoop等。但由于熟悉开源技术的人不多，且缺少商业上的技术支持，使得这些工具很难胜任企业级应用。
为了解决大数据与传统数据库、数据仓库的集成问题，灵蜂在最新版本的数据集成软件BeeDI中加入了对Hadoop数据接口的支持。用户使用BeeDI就可以将存储在Hadoop分布式文件系统（HDFS）中的数据集成到企业数据仓库之中，利用已有的分析和报表工具来处理各种类型的数据，为指导企业高管做出正确决策提供强有力的保证。
国产ETL工具BeeDI产品功能：
1 数据转换、2 数据联邦、3 数据同步、（日志捕获、时间戳、触发器、全表比对）
4 大数据集成、5 文件同步、6 工作流调度、
7 Webservce、8 脚本调试、9 作业调试、
10 远程调度、11 集群调度、12 数据安全、13 日志记录
BeeDI既支持任意关系数据库或文本文件数据到Hadoop系统的传输，也支持将HDFS文本文件及HBase的数据传输到任意关系数据库或文本文件。
BeeDI是一款由灵蜂纵横自主研发的国产数据集成软件，集数据抽取、清洗、转换及装载于一体，通过标准化企业各个业务系统产生的数据，向数据仓库提供高质量的数据。BeeDI可以提供跨库数据联邦、基于数据库日志的数据同步等功能，支持同一数据流向多个接口的分发，同时也支持多个数据流的合并，是一款完全面向数据仓库、大数据应用的企业级数据集成产品。
与目前一些商业化与开源数据集成工具相比，BeeDI具备以下优势：
l 广泛的数据接口。BeeDI支持包括Oracle、DB2、SQL Server、Sybase、Teradata、MySQL、以及支持国产数据库：达梦（DM）与人大金仓（Kingbase）等主流数据库、数据仓库产品，同时支持文本文件、XML、Web Service等数据源；如今通过添加Hadoop接口（Hive、HBase）支持，BeeDI将具备应对结构化、非结构化以及半结构化等各种类型的数据集成能力。
l 完备的功能集合。BeeDI不只是一款简单的ETL工具，通过完善、成熟、易用的功能集合，包括数据同步、数据联邦、大数据集成、工作流调度、脚本调试以及日志解析等功能，它可以胜任企业各种各样的数据集成与处理需求。
l 本地化的技术服务。除了产品功能强大之外，BeeDI还能给为客户提供最符合本地化需求的服务。凭借灵蜂纵横丰富的技术团队，客户可以得到从基础培训，到技术支持再到定制化开发的全方位服务。同国外厂商相比，灵蜂纵横能够更贴近中国客户的实际需求，为客户创造更多价值。
BeeDI根据客户实际需求，分为三个发行版本，分别为标准版、企业版、集群版。其中BeeDI SE（标准版）采用单机程序架构，任务的设计、运行及监控集成在一个模块内部，适合小规模部署和入门级应用。BeeDI EE（企业版）采用C/S架构，功能更加完备，服务器端包含任务运行和本地监控两个模块。更加适合大规模部署和企业级应用场景。BeeDI EE（集群版），实现了ETL任务在多台服务器上的自由迁移，集群版包括客户端、资源管理器、任务服务器。
北京灵蜂纵横软件有限公司表示：“通过完善对Hadoop数据接口的支持，BeeDI将更好地满足客户在大数据时代的数据集成需求。在‘互联网+’与‘国人核心技术’的浪潮之下，灵峰纵横也将努力抓住机遇，为客户提供更好的产品与服务，为国产软件的发展贡献力量。”
---------------------
作者：little_bee_2004
来源：CSDN
原文：https://blog.csdn.net/little_bee_2004/article/details/80006047
版权声明：本文为博主原创文章，转载请附上博文链接！