Flume 拡張機能 カタログ¶
このドキュメントでは、Apache Flume の上に Cygnus 用に開発された拡張機能のカタログについて詳しく説明します。
対象とする読者¶
Flume 拡張機能カタログは、Cygnus を使用するすべての FIWARE ユーザのための基本的なドキュメントです。Twitter のようなデータを扱うために、Flume テクノロジに追加された利用可能なコンポーネントについて説明します。
ソフトウェア開発者は、Cygnus/Flumeの新しいコンポーネント(特にシンク)の作成を指導する可能性があるため、このカタログにも興味があるかもしれません。
ドキュメントの構造¶
このドキュメントでは、Twitter Source と Twitter HDFS sink について説明します。TwitterSource は、Twitterからデータを収集するためのソースです。このドキュメントでは、TwitterSource 設定と機能について説明します。TwitterHDFSSink シンクは、現在 cygnus-twitter エージェントによってサポートされている唯一のものです。このドキュメントには、TwitterHDFSSink 機能(Flumeイベント内の情報がストレージ・データ構造にどのようにマップされるかを含みます)、構成、ユースケース、実装の詳細が記載されています。