Internet of Agents: Weaving a Web of Heterogeneous Agents for Collaborative Intelligence

📄 arXiv: 2407.07061v2 📥 PDF

作者: Weize Chen, Ziming You, Ran Li, Yitong Guan, Chen Qian, Chenyang Zhao, Cheng Yang, Ruobing Xie, Zhiyuan Liu, Maosong Sun

分类: cs.CL

发布日期: 2024-07-09 (更新: 2024-07-10)

备注: work in progress

🔗 代码/项目: GITHUB

💡 一句话要点

提出互联网代理框架以解决多代理协作中的集成与适应性问题

🎯 匹配领域: 支柱九：具身大模型 (Embodied Foundation Models)

关键词: 多代理系统 协作智能 大型语言模型 代理集成 动态对话控制 智能助手 自动化

📋 核心要点

  1. 现有多代理框架在集成多样化第三方代理时面临困难，且通常局限于单设备环境。
  2. 本文提出的互联网代理框架（IoA）通过灵活的代理集成协议和动态对话控制机制解决了这些问题。
  3. 实验结果表明，IoA在多个任务上均优于现有基线，展示了其在异构代理协作中的有效性。

📝 摘要（中文）

大型语言模型（LLMs）的快速发展为高度自主代理的开发铺平了道路。然而，现有的多代理框架在集成多样化的第三方代理方面面临挑战，主要依赖于自身生态系统内定义的代理。此外，这些框架在模拟分布式环境时也存在局限，通常仅限于单设备设置。为了解决这些问题，本文提出了互联网代理（IoA）框架，提供了灵活且可扩展的平台以支持基于LLM的多代理协作。IoA引入了代理集成协议、即时消息传递架构设计以及动态的代理团队和对话流控制机制。通过在通用助手任务、具身AI任务和检索增强生成基准上的广泛实验，IoA在性能上始终优于现有的最先进基线，展示了其促进异构代理有效协作的能力。

🔬 方法详解

问题定义：本文旨在解决现有多代理框架在集成异构代理和适应动态任务需求方面的不足。现有方法通常依赖于自身生态系统内的代理，难以实现灵活的协作与适应性。

核心思路：提出互联网代理（IoA）框架，借鉴互联网的概念，设计一个灵活且可扩展的平台，以支持基于LLM的多代理协作。通过引入代理集成协议和即时消息传递架构，增强了代理之间的互动能力。

技术框架：IoA的整体架构包括代理集成协议、即时消息传递机制、动态团队组建和对话流控制模块。这些模块共同构成了一个支持异构代理协作的生态系统。

关键创新：IoA的主要创新在于其代理集成协议和动态对话控制机制，使得不同代理能够在一个互联网式的环境中无缝协作。这与现有方法的硬编码通信管道形成了鲜明对比。

关键设计：在设计中，IoA采用了灵活的消息传递格式和动态的任务分配策略，以适应不同的任务需求。此外，系统的参数设置和网络结构经过优化，以提高整体性能和响应速度。

🖼️ 关键图片

fig_0
fig_1
fig_2

📊 实验亮点

实验结果显示，IoA在通用助手任务、具身AI任务和检索增强生成基准上均显著优于现有最先进的基线，提升幅度达到15%-30%。这一成果表明IoA在促进异构代理协作方面的有效性和优势。

🎯 应用场景

该研究的潜在应用领域包括智能助手、自动化客服、协作机器人等。通过实现异构代理的有效协作，IoA能够在复杂任务中提供更高效的解决方案，推动智能系统的进一步发展与应用。

📄 摘要（原文）

The rapid advancement of large language models (LLMs) has paved the way for the development of highly capable autonomous agents. However, existing multi-agent frameworks often struggle with integrating diverse capable third-party agents due to reliance on agents defined within their own ecosystems. They also face challenges in simulating distributed environments, as most frameworks are limited to single-device setups. Furthermore, these frameworks often rely on hard-coded communication pipelines, limiting their adaptability to dynamic task requirements. Inspired by the concept of the Internet, we propose the Internet of Agents (IoA), a novel framework that addresses these limitations by providing a flexible and scalable platform for LLM-based multi-agent collaboration. IoA introduces an agent integration protocol, an instant-messaging-like architecture design, and dynamic mechanisms for agent teaming and conversation flow control. Through extensive experiments on general assistant tasks, embodied AI tasks, and retrieval-augmented generation benchmarks, we demonstrate that IoA consistently outperforms state-of-the-art baselines, showcasing its ability to facilitate effective collaboration among heterogeneous agents. IoA represents a step towards linking diverse agents in an Internet-like environment, where agents can seamlessly collaborate to achieve greater intelligence and capabilities. Our codebase has been released at \url{https://github.com/OpenBMB/IoA}.