17 ポイント 投稿者 GN⁺ 2025-05-21 | 3件のコメント | WhatsAppで共有
  • OpenAI Codex は、GitHub 連携を基盤としたマルチタスク型コードエージェントで、自然言語で複数の作業を並列に指示できるインターフェースを提供する
  • ユーザーは1日分の作業を素早くまとめて投入し、ブランチ作成や PR のオープンまで任せることができ、モバイルでも利用可能なため、最終的にはリモート中心のワークフローを支援できる
  • ただし現時点では、エラー処理の不十分さ、コード品質の不安定さ、既存ブランチの更新の難しさ、サンドボックスのネットワーク遮断などの問題があり、主要なリファクタリング作業には不向き
  • Codex は小規模な保守作業の自動化には有用で、反復可能な作業を素早く処理するのに実用的
  • 今後、モデル改善、複数モデルのミキシング、高度な統合機能が導入されれば、ハイレベルなオーケストレーションツールへ発展する可能性がある

OpenAI Codex の動作方式

  • OpenAI Codex はチャットベースの UIで、招待または月額 $200 の Pro サブスクリプションで利用できる
  • ユーザーは多要素認証を経て、Codex GitHub アプリを各組織ごとに承認する必要があり、Codex はリポジトリを独自のサンドボックスに複製して、コマンド実行やブランチ作成を代行する
  • 数十の公開・非公開リポジトリを管理している場合、複数プロジェクトの切り替えや作業キュー管理の効率性は高い
  • 1〜2 個のリポジトリしか管理しないのであれば、既存の LLM や AI 機能付きエディタを使うほうが軽量な選択肢かもしれない

Codex の強み

  • 複数作業の並列処理とインターフェース

    • 作業ごとにリポジトリ・ブランチ指定が可能で、1日分の業務を自然言語で並列登録する流れが自然
    • Codex は多数の作業を同時に処理する使い方を推奨しており、これは自身の作業習慣とよく合っている
  • 柔軟なワークフローとモバイル対応

    • Codex はスマートフォンでもモバイルフレンドリーに動作し、オフィス外でも効率的に作業できる可能性が高い
    • 業務開始時に複数の仕事を登録し、外出先でも継続して計画や進捗を管理する理想的なユースケースを目指している
  • チャットベースのフィードバックと PR 作成

    • 進行中の作業のログや状態をチャットインターフェースで簡単に確認でき、追加指示も可能
    • 変更内容に満足すれば、Codex が**Pull Request(以下 PR)**を作成し、説明文も自動で完成させる
    • ステップごとの実行ログやコマンド履歴を確認できる点も良い

改善が求められる点

  • 不十分なエラー処理

    • 作業開始や PR 作成が失敗した場合に対する明確なフィードバックの欠如により、使い勝手が低下している
  • コード品質と単発作業の実行

    • Codex モデルは GPT-3 系列で 12 以上の言語をサポートしているが、並列実行時の満足度は 40〜60% 程度にとどまる
    • 軽微な保守業務には有用だが、大規模リファクタリングでは PR の反復生成となり、利用効率が落ちる
  • ブランチ内の継続更新に未対応

    • 既存の PR やブランチに継続的にコミットを連携しにくいため、多段階のリファクタリング作業は非効率
    • 現時点では、単一の作業でそのまま渡せるような簡単な仕事に Codex を使うのが適している
  • 実行サンドボックスのネットワークアクセス制約

    • 意図的な設計により外部ネットワークへアクセスできないため、パッケージ更新や依存関係処理など、実務上のさまざまな作業に制約がある
    • 例: 外部パッケージのインストールを依頼しても動作しない
    • このような作業は依然としてローカルで直接処理するか、既存の Bot(Dependabot など)の機能に頼る必要がある

Did it unlock insane productivity gains for me?

  • まだ爆発的な生産性向上は感じていない
  • Codex が真の生産性革新につながるには
    • より多くの作業を単発で解決できるよう、カスタム設計やアルゴリズム改善が求められる
    • 既存ブランチ上の PR 更新フローの改善
    • 委任・統合管理能力の強化と、複数の OpenAI API との統合拡張
    • Codex がハイレベルなオーケストレーターへ進化する必要がある
  • 現在の Codex はルーチンな保守や小規模アップデートの自動化に活用度が高い
  • 大規模な機能開発やリファクタリングには、IDE と LLM 支援の協業のほうが適している

Final Thoughts

  • Codex は静かに期待できるツール
  • 今後洗練されていく機能を踏まえると、業務の出発点や調整ツールとして定着する可能性は高い
  • 今は軽く反復的な作業に集中しつつ、改善を待つ段階

3件のコメント

 
yangeok 2025-05-23

まだ200ドルを投じる雰囲気ではなさそうです

 
GN⁺ 2025-05-21
Hacker Newsの意見
  • 私はPlus加入者で、Codexを試してみたくてProにアップグレードしたが、正直なところ自分の経験ではやや期待外れな結果だった。
    UXもまだしっかり固まっていない感じで、結果が出るまでどれくらいかかるのか分からず、もどかしさがある。
    Codexの非同期的な特性のおかげで、複数の作業を同時に回せるのはせめてもの救い。
    もう一つの不満は、このツールを有用に使うには環境を別途指定しなければならない点だ。
    テストに必要なコンテナを動かせず、有用性が大きく下がる問題がある。
    環境が完全にインターネットから隔離されていて、活用度が制限されている。
    ChatGPTのo3が強力なのは、Webを活用して情報検索まで自力でできるからだが、Codexにはそういう部分が不足している。
    比較するとClaudeもよく使うが、GitHubレポジトリをソースにプロジェクトを作ると、複雑なReactアプリでも見慣れないバグをうまく見つけてくれる。
    Geminiもコンテキストウィンドウが広く、この手の機能をよく支援している。
    もちろんOpenAIが目指している方向も理解はしている。
    Codexが本当に同僚のように複数の作業を引き受けて解決してくれることを期待しているが、現時点ではプルリクエストに集中しすぎている印象だ。
    なので再びPlusにダウングレードして、もう少し様子を見るつもりだ。

    • コンテナ対応はぜひ必要だと思う。
  • 私はOpenAIで働いているがCodexチームではなく、複数のプロジェクトでCodexをうまく使ってきた経験がある。
    私の作業スタイルは次のようなものだ。
    常に同じプロンプトを複数回実行して、それぞれ異なる結果を出させる。
    複数の実装を比較して最も良いものを見つけ、プロンプトをどう変えればより良い結果に導けたかを考える。
    モデルが間違えた部分をプロンプトに反映して、反復的に適用する。
    このように作業を小さな単位に分割して並列実験を繰り返せば、膨大なプロジェクトでも数時間で、プロンプト調整とコードレビューだけで終えられる。
    API変換作業だけでなく、Tritonカーネルのような深いコードにもこのやり方は非常に有用だ。

    • 「複数の実装の中から一番良いものを選び、プロンプトで何をもっとすれば良い結果に導けたかを考える」
      非専門家としては、何が「最善」なのかをどう見分けるのか気になる。
      結局、正しい方向を見つけるにはその分野の専門性が必要で、こういう点がLLMがソフトウェアエンジニアの仕事を奪えない根拠だと思う。

    • 手作業でやっているそのやり方自体が、実は強化学習(RL)の基礎になり得ると思う。
      UIでこの体験を少し整えて実データとして使えば、良い学習データセットになりそうだ。

    • この方法が、実際に自分でコードを書くよりどれくらい速いのか気になる。

    • プロンプトを新しく変えたときに重要な点が変わるなら、それまでの作業を捨てることがあるのか気になる。
      小さな変化が結果に大きな影響を与えるし、事前例のない問題ならなおさら難しそうだ。
      この作業スタイルを繰り返すと、かえって疲れたり本質から遠ざかったりするとも思う。
      自分には非効率に感じられるが、他の人はこういう反復作業にもっと高い忍耐力があるのか気になる。

  • 私は自分のチームでCodexに関するレビューをpodで共有した (https://latent.space/p/codex)。
    一気にコードを書くことには非常に優れたモデルだ (OpenAI SWE課題に合わせてoneshot向けに特にファインチューニングされていることをpodで確認した)。
    相対的に統合機能が不足している (例: ブラウザ統合がなく、GitHub連携も不十分 — 毎イテレーションごとに新しいプルリクエストを開くよう促されるので、既存ブランチに後続コミットを積むのが不便で不満)。
    それでも、この種の統合機能は時間とともに改善されていくと期待している。
    1時間あたり同時に60個のCodexインスタンスを回せるのは、Devin(同時5個)やCursor(バックグラウンドエージェント登場前は同時1個)とは質的に違う差だと思う。
    私はCodexモデルの性能差を目立って感じなかったが、OpenAIではCodexがGPT-3から派生したと説明している一方、実際にはo3のファインチューニングだ。

    • 「o3ファインチューニング」という主張自体が紛らわしいと思う。
      OpenAIも命名規則が混乱を招いていて、この問題はAI企業の大半が抱えている。
      CodexはもともとGPT-3ベースの旧モデルだったが、今はCLIやツールなど複数の場所で同じ名前を再利用している。
      Googleも同じように「Gemini Ultra」をモデル名とサブスクリプション商品名の両方に使って混乱を招いている。

    • 私にとって最も不便なのはネットワークアクセス制限だ。

      1. git fetch、upstream同期、統合バグ修正ができない
      2. 外部ライブラリを新たに取得して統合実験ができない
        setup scriptでapt installもできないようにドメインを塞いでいるようだ
        エージェントもコード全体の文脈把握より、とりあえずgit grepをしようとする傾向があり (UI上で見える)、いまひとつだと感じる。
    • Claude Codeと比べてどう違うのか気になる。

  • 複数のレポジトリを素早く変更できる機能は本当に素晴らしいと思う。
    多数のサンプルアプリを一緒に管理していて、READMEのフォーマット変更やリンク差し替えが20か所以上になると本当に退屈だ。
    こういう雑務をCodexに任せて、あとでマージボタンだけ押せるなら私はとても幸せだと思う。

    • 私もまったく同じ気持ちだ。
      近いうちにそう進化すると予想している。
      当面はCodexで軽微な保守作業をばらまきつつ、大規模リファクタリングや重要な開発は引き続きIDEでやることになりそうだ。
  • この種のツールを、非開発者がコード変更に活用できるのか気になる。
    コンテンツ修正や簡単なCSS変更などは本当に自分でやりたくないし、テストも見た目で確認できるので、自分はコードレビューだけすれば十分だ。
    非開発者がチケットを見て作業を始め、結果について「これで良さそう」と言い、私がレビューする形。
    バックログにある些細なバグ修正や機能改善には理想的なワークフローだと思う。

    • AI Assistのようなツールは、結局は最高のローコードプラットフォームになり得ると思う。
      こうしてソフトウェアエンジニアが本当に置き換えられる日が来るのではないかと期待している。

    • ただ、コンテンツ変更でさえ深い検討が必要なことは多い。
      少し規模が大きくなるだけで上流・下流の依存関係があり、フィールドを1つ追加するだけでもシステム全体で気にすべき点が多い。
      CSSのような小さな変更も些細に見えるが、実際にどれほど小さいかは利用者には分かりにくい。

    • アクセシビリティ、マルチプラットフォーム(モバイル/デスクトップ)など無数の問題も、すぐに速いペースで学ぶことになるだろう。
      この流れは、人々をソフトウェアエンジニアリングへ「インバウンド」させるファネルのようにさえ見える。

  • 小さな作業なら40〜60%の成功率でもかなり悪くないと思う。
    もっと複雑で深い論理が必要な作業では苦戦するという話は参考になる。

    • 私のテスト基準では、少しでも批判的思考が必要な作業になるとCodexは完全に迷走する。
      現時点の性能は、ひどいジュニアエンジニア程度だ。
      例えば変更を指示したとき、コンパイラ警告を消すためにクラスの値を一括でnullableに変えてしまう。
      見かけ上は動き、コンパイルも通るが、データ整合性まで失われる完全に誤った結果だ。
      こうした事例はかなり多い。
      コードベース全体をCodexに無監督で任せると、技術的負債がすぐに積み上がると思う。
  • Codexが、私たちが席を外している間にうまく働いてくれるだろうという期待は、あまりに楽観的に感じる。
    多くの人にとって「席を外しているのに効率的に働く」とは、実のところ「失業者の列」と地続きだと思う。

    • 開発者たちがこうした変化を喜んでいる現象自体が不思議だ。
      いつか私たちがただ座ってエージェントが全部やるのを眺めながら給料をもらえる日が来る、と錯覚しているような空気に驚く。
      仕事が楽になったとしても、結局は仕事そのものが消える方向に進む可能性がある。

    • 生産性向上の歴史を見ると、労働者がより多くの自由時間を享受した前例はほとんどない。
      結局は株主と経営陣の利益、残った従業員1人あたりの業務増加、残りは失業というパターンだ。

    • 当面は失業に至るまで、まだ時間がかかる気がする。
      こうしたモデルが90〜95%水準で幅広い種類の作業をきちんとこなすには、膨大な努力が要ると思う。
      何事も最初の60〜70%は簡単でも、最後の5〜10%が本当に難しいからだ。
      上で触れられているように、複数回実行して多様な結果を出し、それを選別するのは現状でははるかに高コストで、すべての作業に一律適用するには推論コストも大きい。
      いずれある時点で、コードレビューも機械が書いたコードであるほど必須になるだろう。
      小規模プロジェクトや小さな機能なら機械の作業を信頼してもよいかもしれないが、長期間保守されるコードベースなら、人間が構造設計とレビューを続ける必要がある。
      AIはさまざまな方法をより速く探索する助けにはなるが、最終判断は依然として人間の役割であり、品質維持のために自ら設計やレビューを行うべきだと思う。
      近い将来、エンジニアリングチームはバックグラウンドエージェントを積極的に活用する方法を模索することになりそうだ。
      今のようにすべてを強力なモデルに丸投げする方式には懐疑的だ。
      現在のAIコードレビュー作業はかなりもどかしいので、より良いワークフローが必要だ。
      今後数年は、「バックグラウンドエージェント」そのものが会社ごとに必須のインフラ(Infra)として定着していくだろう。
      大半の企業はこうしたエージェント基盤を自前でホスティングするより、APIとして利用すると予想される。
      エージェントベースのエンジニアリング基盤はまだ非常に初期段階であり、新たな仕事の機会も多く生まれると思う (今後3〜5年で)。

    • 楽観的に見れば、何かを安く作れるようになるほど(たとえばコード)、かえってそれに対する需要が増えるという面もある。
      非開発者が管理者のような立場になる可能性はあるが、実際には重要な仕事ほど、より信頼できる人間に任せたいと人々が考える傾向があることも経験している。

    • ソフトウェア開発者を馬、CodexやClaude Codeのような新しいモデルエージェントを自動車にたとえられるのではないかと思う。
      一部の馬は自動車の運転手になり、一部はもはや荷車を引く必要がなくなって失業する、という構図が当てはまるのか考えてしまう。

  • 対応言語の一覧がまとまっている場所を見つけられなかった。
    公式紹介やレビューのどこにもきちんと書かれておらず、たいていはWebページの誤字修正のような例でしか説明していない。

  • 1週間もあればgptel-toolでさっと作れそうなレベルに見える。

 
horace 2025-05-27

下働きとして使うなら良さそうですね!