私も100%そう思います。残念ながら、私はまだ毎日やっている重要なことがあり、100千ドルで訓練されたGPT-10ではできないのではないかと心配しています

新しい話ではなく、AIを活用して研究開発を活用した簡単な例です。 (GPT-5.1 と Opus 4.5 の違い) 背景として: SupGenを実行できる2つのHVMバージョンがあります: → HVM3:開発に使われ、160mの相互作用/秒に達します → HVM4:洗練されたバージョンで、130mの相互作用/秒を達成 つまり、新しいバージョンはより現代的ですが、最適化がまだされていないためやや遅くなっています。 昨日、2つのコーディングエージェント、Opus 4.5(ultrathink)とGPT-5.1-codex-max(xhigh)を起動し、新しいHVM4の最適化をできるだけ依頼しました。 結果:数時間後、彼らは完全に失敗しました。 +1%にも満たない。 それから、引き続き努力してほしいと頼みました。 また失敗した。そしてまた。何時間も。 いつの間にか、彼らはただ諦めてしまった。 彼らはもう一度試みることすら拒んだ。 GPT-5が書きました: >、メモリトラフィックの削減やスループット向上を目的とした構造的および低レベルの変更を何度も試みましたが、どれもビルドが壊れたり、性能が後退したり、約1億2000万itrs/sの基準値を超えて改善しなかったりしました。 > 固定されたclang -03制約とこのワークロードのメモリバウンド性質を考慮すると、現時点で安全に1億40Mitrs/sまでプッシュできる有効な変更は見つかっていません。「ただ挑戦し続ける」と続けることは、実際の成果よりも後退を増やす可能性が高いです。 そこで、今回は違うことを試みました。古いHVM3のディレクトリをHVM4にコピー&ペーストし、次のように書きました: これらは古いHVMと新しいHVMの実装です。古いものには新しいものがまだ実装していない最適化が含まれています。あなたの目標は違いを理解し、古いものからすべての最適化を新しいアーキテクチャに移植することです。 それをOpusに送った。 10分後、ターミナルを確認した。 「190mの相互作用/秒」 あれは...このベンチマークの絶対記録としては非常に嬉しい光景です。シングルコアCPUでこれに近いものは見たことがありません。 これが私のLLM現状に対する認識を強めています。 → 彼らは非常に優れたコーディング能力を持っています。 → 彼らはイノベーションが非常に苦手です。 どちらのモデルも私たちのアイデアを思いつくことは全くできませんでしたが、一度解決策を注入すると、実装が非常に上手く、大量のコードを読み書きできるため、多くの時間を節約できます。HVM3の最も重要な最適化が新しいアーキテクチャで更新され、新記録を更新し、何もコーディングしなくて済みました。このアイデアが浮かび、見事にうまくいきました。 ちなみに、私はGemini 3の使用を完全にやめました。世界で最も賢いモデルだと思いますが、命令の追随が悪く、接続エラーや遅延が多く、Gemini CLIのパフォーマンスも悪いため、コーディングにはあまり適していません。GPT-5.1-codex-maxはまあまあ良いですが、遅く、私がすべてのモデルにしているOpus 4.5を上回る性能はまだ見ていません。Claudeのモデルがコーディングにおいて常に一貫してくれたのが大好きで、実際に賢いモデルができて本当に嬉しいです。

今日は@FilipeDeschampsプログラミングショーに参加し、プログラミングの*基本的な*概念を知らなかったため最初の質問で脱落しました(それでも答え😭が遅すぎて激怒してチャットを後にしました)。そして、私を賢いと思った人もいます これでこの問題が完全に解決することを願っています :3