DeepSeek-V4 技術アーキテクチャが事前に公開されました! 現在の大型モデルMoEアーキテクチャはAIの推論能力と知識を各専門家に統合していることは誰もが知っています。では、専門家は推論のためだけにAIを使い、特定の領域に大量の外部知識を蓄え、『攻殻機動隊』で描かれたサイボーグのように、実際には電子脳+外部記憶で構成されたアーキテクチャを形成することは可能でしょうか? DeepSeekはこれを成し遂げました!