NiFi精品文章

• 

  《從0到1學(xué)習(xí)Flink》—— Flink Data transformation(轉(zhuǎn)換)

  ...kafka、Amazon Kinesis Streams、RabbitMQ、Twitter Streaming API、Apache NiFi 等，當(dāng)然你也可以定義自己的 source。 2、Transformation：數(shù)據(jù)轉(zhuǎn)換的各種操作，有 Map / FlatMap / Filter / KeyBy / Reduce / Fold / Aggregations / Window / W...

  oujie 2019-08-16 14:24 評(píng)論0 收藏0
• 

  《從0到1學(xué)習(xí)Flink》—— Apache Flink 介紹

  ...kafka、Amazon Kinesis Streams、RabbitMQ、Twitter Streaming API、Apache NiFi 等，當(dāng)然你也可以定義自己的 source。 2、Transformation：數(shù)據(jù)轉(zhuǎn)換的各種操作，有 Map / FlatMap / Filter / KeyBy / Reduce / Fold / Aggregations / Window / W...

  flyer_dev 2019-08-16 13:36 評(píng)論0 收藏0
• 

  OPPO數(shù)據(jù)中臺(tái)之基石：基于Flink SQL構(gòu)建實(shí)數(shù)據(jù)倉(cāng)庫(kù)

  ...源基本是手機(jī)、日志文件以及 DB 數(shù)據(jù)庫(kù)，我們基于 Apache NiFi 打造了高可用、高吞吐的接入系統(tǒng)，將數(shù)據(jù)統(tǒng)一落入 HDFS，形成原始層；緊接著，基于 Hive 的小時(shí)級(jí) ETL 與天級(jí)匯總 Hive 任務(wù)，分別負(fù)責(zé)計(jì)算生成明細(xì)層與匯總層；最后...

  jeffrey_up 2019-07-24 10:55 評(píng)論0 收藏0
• 

  Flink實(shí)戰(zhàn)(八) - Streaming Connectors 編程

  ...lasticsearch (sink) Hadoop FileSystem (sink) RabbitMQ (source/sink) Apache NiFi (source/sink) Twitter Streaming API (source) Google PubSub (source/sink) 要在應(yīng)用程序中使用其中一個(gè)連接器，通常需要其他第三方組件，例如數(shù)據(jù)存儲(chǔ)或消息隊(duì)列的服務(wù)...

  beita 2019-08-19 10:11 評(píng)論0 收藏0