Apache SeaTunnel - 分散型・高性能データ統合プラットフォーム

• 大規模データをオフラインまたはリアルタイムで同期・変換するためのプラットフォーム

• Apacheインキュベータープロジェクト（旧名 Waterdrop）

• 使いやすく、柔軟に設定可能なローコード開発

• リアルタイムストリーミングをサポート

• オフラインのマルチソースデータ分析

• 高性能なデータ処理

• SQLでデータの集約および処理が可能

• Spark Structured Streaming をサポート

• Spark 2.x をサポート

• 対応プラグイン

→ Input : Fake, File, Hdfs, Kafka, S3, Socket,..

→ Filter : Add, Checksum, Convert, Date, Drop, Grok, Json, Kv, Lowercase, Remove, Rename, Repartition, Replace, Sample, Split, Sql, Table, Truncate, Uppercase, Uuid,..

→ Output : ElasticSearch, File, Hdfs, Jdbc, Kafka, Mysql, S3, Stdout,..