大數據時代的集成利器
ETL工具
https://blog.csdn.net/little_bee_2004/article/details/80006047
在信息時代大數據環境下，基於分佈式的開源Hadoop架構日漸流行。在爲大數據存儲和處理提供便利的同時，它對企業的數據訪問、數據整合和數據質量管理都提出了更高的要求。
爲此，國產數據集成軟件廠商北京靈蜂軟件有限公司日前宣佈，推出最新版本的企業級數據集成軟件BeeDI，並添加對Hadoop數據接口的支持。新版軟件能夠幫助客戶實現對非結構化、半結構化數據的整合，爲駕馭大數據奠定堅實的基礎。
大數據時代的集成利器
以開源爲主導的Hadoop由於其擴展性好，且成本較低而受到了企業的青睞，成爲了大數據時代的主要數據存儲技術。然而如何在已有的數據分析與商業智能框架之中，將Hadoop大數據系統集成進來成爲了許多企業爲之苦惱的難題。圍繞Hadoop的生態體系也提供了一些開源工具來實現傳統數據與大數據的集成，如Sqoop等。但由於熟悉開源技術的人不多，且缺少商業上的技術支持，使得這些工具很難勝任企業級應用。
爲了解決大數據與傳統數據庫、數據倉庫的集成問題，靈蜂在最新版本的數據集成軟件BeeDI中加入了對Hadoop數據接口的支持。用戶使用BeeDI就可以將存儲在Hadoop分佈式文件系統（HDFS）中的數據集成到企業數據倉庫之中，利用已有的分析和報表工具來處理各種類型的數據，爲指導企業高管做出正確決策提供強有力的保證。
國產ETL工具BeeDI產品功能：
1 數據轉換、2 數據聯邦、3 數據同步、（日誌捕獲、時間戳、觸發器、全表比對）
4 大數據集成、5 文件同步、6 工作流調度、
7 Webservce、8 腳本調試、9 作業調試、
10 遠程調度、11 集羣調度、12 數據安全、13 日誌記錄
BeeDI既支持任意關係數據庫或文本文件數據到Hadoop系統的傳輸，也支持將HDFS文本文件及HBase的數據傳輸到任意關係數據庫或文本文件。
BeeDI是一款由靈蜂縱橫自主研發的國產數據集成軟件，集數據抽取、清洗、轉換及裝載於一體，通過標準化企業各個業務系統產生的數據，向數據倉庫提供高質量的數據。BeeDI可以提供跨庫數據聯邦、基於數據庫日誌的數據同步等功能，支持同一數據流向多個接口的分發，同時也支持多個數據流的合併，是一款完全面向數據倉庫、大數據應用的企業級數據集成產品。
與目前一些商業化與開源數據集成工具相比，BeeDI具備以下優勢：
l 廣泛的數據接口。BeeDI支持包括Oracle、DB2、SQL Server、Sybase、Teradata、MySQL、以及支持國產數據庫：達夢（DM）與人大金倉（Kingbase）等主流數據庫、數據倉庫產品，同時支持文本文件、XML、Web Service等數據源；如今通過添加Hadoop接口（Hive、HBase）支持，BeeDI將具備應對結構化、非結構化以及半結構化等各種類型的數據集成能力。
l 完備的功能集合。BeeDI不只是一款簡單的ETL工具，通過完善、成熟、易用的功能集合，包括數據同步、數據聯邦、大數據集成、工作流調度、腳本調試以及日誌解析等功能，它可以勝任企業各種各樣的數據集成與處理需求。
l 本地化的技術服務。除了產品功能強大之外，BeeDI還能給爲客戶提供最符合本地化需求的服務。憑藉靈蜂縱橫豐富的技術團隊，客戶可以得到從基礎培訓，到技術支持再到定製化開發的全方位服務。同國外廠商相比，靈蜂縱橫能夠更貼近中國客戶的實際需求，爲客戶創造更多價值。
BeeDI根據客戶實際需求，分爲三個發行版本，分別爲標準版、企業版、集羣版。其中BeeDI SE（標準版）採用單機程序架構，任務的設計、運行及監控集成在一個模塊內部，適合小規模部署和入門級應用。BeeDI EE（企業版）採用C/S架構，功能更加完備，服務器端包含任務運行和本地監控兩個模塊。更加適合大規模部署和企業級應用場景。BeeDI EE（集羣版），實現了ETL任務在多臺服務器上的自由遷移，集羣版包括客戶端、資源管理器、任務服務器。
北京靈蜂縱橫軟件有限公司表示：“通過完善對Hadoop數據接口的支持，BeeDI將更好地滿足客戶在大數據時代的數據集成需求。在‘互聯網+’與‘國人核心技術’的浪潮之下，靈峯縱橫也將努力抓住機遇，爲客戶提供更好的產品與服務，爲國產軟件的發展貢獻力量。”
---------------------
作者：little_bee_2004
來源：CSDN
原文：https://blog.csdn.net/little_bee_2004/article/details/80006047
版權聲明：本文爲博主原創文章，轉載請附上博文鏈接！