国产xxxx99真实实拍_久久不雅视频_高清韩国a级特黄毛片_嗯老师别我我受不了了小说

資訊專欄INFORMATION COLUMN

kettle 開源etl數(shù)據(jù)抽取工具

nevermind / 1071人閱讀

摘要:相比其他開源的工具和其他商業(yè)的工具,對比下來還是比較強大和好用。

1.為什么要使用數(shù)據(jù)抽取

(1)為了不妨礙業(yè)務(wù)數(shù)據(jù)的讀取和寫入,需要進行數(shù)據(jù)的抽取,抽取到另外數(shù)據(jù)庫表進行讀取
(2)對某些總計數(shù)據(jù)可以進行預(yù)先計算, 抽取到另外數(shù)據(jù)庫表
(3)隨訪業(yè)務(wù)數(shù)據(jù)庫為mongodb , 統(tǒng)計程序編程效率低,需要轉(zhuǎn)成sql 類數(shù)據(jù)庫提高效率

2.工具

使用 kettle 開源etl工具
網(wǎng)址:http://community.pentaho.com/projects/data-integration/

3.使用方法

總體來講,就是這么個步驟:
選擇數(shù)據(jù)輸入——中間數(shù)據(jù)處理——最后數(shù)據(jù)輸出

比如從mongodb 同步到 sqlserver過程如下:

(1)選擇核心對象中的bigdata MongoDB Input (數(shù)據(jù)輸入)

(2)進行數(shù)據(jù)處理 (這里篩選了需要抽取的字段)

(3)選擇插入更新輸出

4.總結(jié)

數(shù)據(jù)輸入的形式很多,各種形式的數(shù)據(jù)都可以做為一手?jǐn)?shù)據(jù)源, kettle 數(shù)據(jù)轉(zhuǎn)換的功能也很強大, 還可以進行 java ,javascript 等腳本的編寫來進行高級的數(shù)據(jù)處理, 最后得到需要的數(shù)據(jù)。
相比其他開源的etl工具和其他商業(yè)的etl工具,對比下來 kettle還是比較強大和好用。

文章版權(quán)歸作者所有,未經(jīng)允許請勿轉(zhuǎn)載,若此文章存在違規(guī)行為,您可以聯(lián)系管理員刪除。

轉(zhuǎn)載請注明本文地址:http://specialneedsforspecialkids.com/yun/18847.html

相關(guān)文章

  • kettle下轉(zhuǎn)移mongo中數(shù)據(jù)到mysql中

    摘要:是一款國外開源的工具,純編寫,可以在上運行,數(shù)據(jù)抽取高效穩(wěn)定。 Kettle是一款國外開源的ETL工具,純java編寫,可以在Window、Linux、Unix上運行,數(shù)據(jù)抽取高效穩(wěn)定。作為一個數(shù)據(jù)抽取工具,在建立數(shù)據(jù)倉庫的過程中,免不了需要從不同的數(shù)據(jù)源中抽取到集中的數(shù)據(jù)倉庫中,下面就拿mongodb抽取到mysql為例,簡述抽取數(shù)據(jù)的步驟: 新建轉(zhuǎn)換:test 在test中新建M...

    Riddler 評論0 收藏0
  • kettle下轉(zhuǎn)移mongo中數(shù)據(jù)到mysql中

    摘要:是一款國外開源的工具,純編寫,可以在上運行,數(shù)據(jù)抽取高效穩(wěn)定。 Kettle是一款國外開源的ETL工具,純java編寫,可以在Window、Linux、Unix上運行,數(shù)據(jù)抽取高效穩(wěn)定。作為一個數(shù)據(jù)抽取工具,在建立數(shù)據(jù)倉庫的過程中,免不了需要從不同的數(shù)據(jù)源中抽取到集中的數(shù)據(jù)倉庫中,下面就拿mongodb抽取到mysql為例,簡述抽取數(shù)據(jù)的步驟: 新建轉(zhuǎn)換:test 在test中新建M...

    beanlam 評論0 收藏0
  • 數(shù)據(jù)倉庫的直白概述

    摘要:如銷售數(shù)據(jù)跟部門表,客戶表之間的關(guān)系。而查詢,又是這三者之間的粘合劑,它表達了用戶的需求,經(jīng)過引擎的解析,根據(jù)數(shù)據(jù)模型的描述,從數(shù)據(jù)倉庫找到所需要的數(shù)據(jù)。 本文來自網(wǎng)易云社區(qū) 作者:王攀 我們知道,大部分公司都擁有了自己的財務(wù),OA,CRM 等系統(tǒng)。這些系統(tǒng)都有自己的獨立數(shù)據(jù)庫,記錄著企業(yè)運行情況某個方面的數(shù)據(jù)。但是單獨看這些系統(tǒng)的報表,并不一定能對企業(yè)運行情況有全面客觀的了解。就像只...

    sorra 評論0 收藏0

發(fā)表評論

0條評論

最新活動
閱讀需要支付1元查看
<