Tokuin - LLMのトークン使用量とAPIコスト見積もり用Rust CLIツール

• OpenAI、Claude、Gemini、OpenRouterなど複数のLLMプロバイダー/モデルに対して、トークン数・APIコストをすばやく高精度に見積もるクロスプラットフォームCLIツール
• モデルごとのトークン計算に対応し、モデル別のトークン単価に基づいてAPI呼び出しコストを自動算出
• 単一プロンプトだけでなく、JSON chat形式、役割別(system/user/assistant)のトークン内訳、複数モデル間のトークン・コスト比較、Markdown minify、diffモード、watchモードなど、実践的なワークフローに合った機能を提供
• load-test機能を有効にすると、OpenAI・Anthropic・OpenRouter・カスタムエンドポイントに対して同時実行数・レイテンシ・エラー率・トークン・コストを一度に測定する負荷テストランナーとして動作
  • dry-runモードで実際の呼び出しなしにコスト予測が可能
• 多様な入出力形式をサポート
  • 入力: プレーンテキストおよびJSONチャットフォーマットの両方を処理でき、ファイル入力、標準入力、**プロンプト比較(diff)**機能を提供
  • 出力: text/json/csv/Prometheus/markdownなど多様な出力フォーマットをサポート
• カスタム価格ファイル(TOML)を通じて、モデルごとの価格変動に対応しながらコスト見積もりの精度を維持可能
• トークナイザー・モデル定義・パーサー・出力・HTTP/プロバイダー・シミュレーターがモジュール化された構造のため、新しいモデル・新しいプロバイダーの追加やCI/自動化パイプライン統合に適した設計