私たちは分散コンピューティングで数十年前に主にマルチノード協調を解決しました。 実は、現代のLLMチームも同じような調整の問題に直面しています。 マルチエージェントシステムを設計する人にとって非常に良い読み物です。 分散システム理論をLLMチームに適用し、同じO(n²)の通信ボトルネック、遅延遅延、整合性の競合が直接現れていることを発見します。 分散型チームは進展のないコミュニケーションにより多くのラウンドを浪費しましたが、個々のエージェントが停滞すると回復も早くなりました。 これが分散システムとどう関係しているのでしょうか? この研究は、分散システムとしてのLLMチームを評価する試みを試みています。 チームがいつ協力するか、何人のエージェントを使うか、どのような調整構造が課題に合うかを決めるための試行錯誤ではなく、原則に基づく枠組みを示しています。 分散システムの原則なしにLLMチームを設計するのは、コンセンサスプロトコルを理解せずにクラスターを構築するようなものです。 論文: