Andrej Karpathy 支援在使用 LLM 的 AI 軟體開發中引入一個與“上下文工程”相關的新術語。 長期以來，這個詞似乎非常必要。每次我向人們解釋我們如何開發 Nethermind AuditAgent 時，除了使用領域專業知識（web3 安全）和使用最好的 AI 模型（來自 OpenAI、Anthropic 和 Google）和 LLM 工具外，其中一個關鍵方面就是“上下文工程”。 有時會有一句話 「context is the king」 ，這確實是真的。LLM，無論是大型高級 LLM 還是優化的小型 LLM，都是一個強大的工具，但就像任何工具一樣，如果它落入壞人之手，您得到的結果將遠不如正確使用它們時那麼有希望。上下文管理（或工程）確實是一個複雜且沒有得到充分描述的領域，它不斷發展，它實際上是作為快速工程概念的延伸出現的，而提示工程的概念已經有一些負面含義。 總的來說，Andrej 列出了與上下文工程相關的主要方面（在第二張截圖中），但在每個具體任務中，人們主要通過反覆試驗來取得出色的結果，每次都單調地嘗試選擇在這個解決問題階段真正需要的正確上下文元素，為每個階段收集基準，查看指標，將數據集劃分為測試， 驗證，依此類推。 您如何看待「上下文工程」？