AlphaClip – AIベースの動画背景除去＆音声分離ツール
(youtube.com)1. 自己紹介
こんにちは。
前回 eBook リーダー（Folio）をご紹介した個人開発者です。
動画編集をしていると、クロマキーなしで背景を消したくなったり、
音楽からボーカルだけ、あるいは特定の楽器だけを抽出したくなることがありますが、
1つのツールで背景除去と音声分離を両方解決しようという考えで自分で作ることになりました。
2. サービスの一行要約
AlphaClip は、動画から AI で背景を自動除去し、音声を個別トラック（ボーカル・ドラム・ベース・ギターなど）に分離できるデスクトップアプリです。
3. サービス紹介
AlphaClip（Habom）は、動画のポストプロダクションに焦点を当てた AI ツールです。
- 動画から背景を AI で自動除去（白または黒の背景を推奨）
- 音声を個別トラック（ボーカル、ドラム、ベース、ギターなど）に分離
- クロマキー機材がなくてもきれいな背景除去が可能
- After Effects の背景除去機能を、より簡単に自動化
キャラクター動画制作、音楽編集、動画のポストプロダクション用途に活用できます。
4. 主な機能
🎬 動画背景除去
- AI ベースの自動背景除去
- クロマキーなしで被写体のみを抽出
- GPU（CUDA）高速化対応で処理速度を向上
🎵 音声分離
- ボーカル / ドラム / ベース / ギターなど個別トラックを抽出
- 音楽から必要な楽器だけを分離可能
🎞️ キャラクター動画生成
- AI を活用した最終的なキャラクター動画の生成
5. 技術スタック
- Python（バイブコーディングベースの開発）
- CUDA（GPU 高速化）
- AI モデル（背景除去 / 音声分離）
6. 開発中に苦労した点
- CUDA 設定による GPU 活用の最適化
- 背景除去品質と処理速度のバランス
- バイブコーディング開発1週目ゆえの残存エラーへの対応
7. 現在の状況
- バイブコーディングで約1週間開発を進行
- 機能実装を中心に進めており、一部エラーが残っています
- 当面は無料公開し、改善を続ける予定
- 今後はタロットカードアプリ向けに、アニメーションキャラクター・背景（78枚）の制作へ活用する計画
- 小さなプロジェクトを集めて、1つの自動化パイプラインを作ることが最終目標
現在進行中の案件が2〜4件ほど同時並行になっているため、少し選択と集中が必要そうです！
簡単に言うと、
- RVC、わかりやすく言えば speech-to-speech の学習/推論を使ったキャラクター音声変更
- 下の market ページも1か月ほどかけて決済まで実装済みですが、今後も改善作業を続ける予定
- アプリ通知管理ツール（APNs/FCM）、ファネル分析ツール（google analysis相当）
これ以外にもありますが、時間がかかっても1つずつゆっくりご紹介していきます！！
8. 望んでいること
- 実際のユーザーフィードバック（不具合報告大歓迎!! 動画や SNS でいつでも歓迎です！）
- 動画編集ワークフローについてのご意見
足りない点や改善アイデアがあれば、気軽にお知らせください！
動画も楽しく見ていただければうれしいです！
このプログラムを活用して、下の動画を作ってみました。ぜひ楽しく（？）ご覧ください :)
Demo動画
https://www.youtube.com/watch?v=lZhiMreW94Q
- 動画内で cpu/gpu をモニタリングするツールも一緒にマーケットへ掲載してあります!!
（alphaclip Habom tools を作っていて、休憩中（？）に30分〜1時間ほどで作りました!!）
⬇️ ダウンロードリンク
📥 ダウンロード: https://market.habom.kr
まだコメントはありません。