Amphi - オープンソースのPython ETL

• さまざまなソースや形式からデータを抽出・準備・整理するよう設計されたPythonベースのETL
  • 構造化ファイルと非構造化ファイルの両方に対応（CSV、Parquet、PDF、Word、HTML など）
• データサイエンティストとデータエンジニアの双方が、直感的なローコードインターフェースでパイプラインを簡単に開発しながら、どこでもデプロイできるPythonコードを生成できるよう支援することを目標
  • GUIでデータパイプラインを設計し、オンプレミス/クラウドのどこにでもデプロイできるネイティブPythonコードを生成
• ファイルからデータベースへのデータ統合、データサイエンスおよびLLMベースのシステム向けのデータ抽出と準備、APIの検索と拡張で優れた性能を発揮

[xguru]

Hacker Newsのコメント

• Amphiは、構造化データと非構造化データ向けのローコードETLツールで、ファイル統合、データ準備、データ移行、AI作業向けのデータパイプライン作成に役立つ。Pythonコードを生成するため、どこにでもデプロイ可能。
• 非専門家がデータ作業を簡単にできるようにすることが、常に良いとは限らない。PythonやSQLを書くのが難しいなら、別の仕事を考えた方がよい。
• タイトルは変更すべき。オープンソースではなく、Elastic License v2ライセンス。
• オープンソースではない。タイトルが誤解を招く。
• ETLという略語を知らない人向けに、Webサイトに説明を追加した方がよい。
• オープンソースのPython ETLツールなら、dlthub.comとhub.meltano.comの方が良い選択肢。Meltanoを実際に使っていて満足している。
• Amphiが、pandasに似たrapidsai dask_cudfフレームワークをサポートしているのか気になる。
• アイデアは良いが、ドキュメントでは高水準の抽象化が誤っている。データパイプラインでは、テーブルのように振る舞うものを定義し、変換を適用できるべき。無料ツールである点は評価できる。
• Dagsterには満足しているが、Amphiも興味深い。
• Amphiのようなツールがどのように生まれたのか気になる。すでに多くのオープンソースPython ETLツールがある中で、このツールが特定の問題を解決するために作られたのか、それとも情熱プロジェクトなのか知りたい。