工作日早上 7 点读 AI，周日早上 8 点读周报订阅邮件

METAL LAB

AI Tour Meeting: Group Travel Planning by LLM Agents

arXiv:2607.188062026-07-20

多个带人设的LLM智能体通过讨论和投票就团体旅行行程达成共识的框架

AI Tour Meeting是一个框架,让若干个被赋予不同人设的LLM智能体通过交替进行讨论和投票,共同商定一份满足各方偏好的团体旅行行程。研究团队用Qwen3.5、gpt-oss、gpt-5.4-mini等不同规模的模型验证了系统能否稳定运行,并利用该框架分析了偏好冲突程度和发言顺序如何影响会议结果。结果显示,冲突越大会议越长、满意度越低,而后发言的参与者提案被接受的概率反而高于先发言者。

METAL LAB 解读图

AI Tour Meeting的会议流程结构

证据状态已报告实测结果

  1. 设置阶段用户配置总体目标、约束条件(预算、时间窗)、参与者人设及发言/投票规则后启动会议。
  2. 讨论阶段参与者依次执行搜索信息、提问、反思等动作,并提出新的旅行行程。
  3. 投票阶段一旦有人提出行程,其余参与者按所选投票规则接受、拒绝或打分。
  4. 循环至共识讨论与投票阶段交替进行,直到所有参与者都对当前行程表示满意,或达到轮数/时间上限。
  5. 验证与分析跨模型测量完成率与错误率,并分析偏好冲突程度和发言顺序对协商结果的影响。
这是 METAL LAB 制作的解读图，并非论文作者提供的原图。

他们做了什么

  1. 每个LLM参与者被赋予姓名、背景、性格、偏好、目标、角色、语气、说服策略等不同人设,轮流执行搜索、提问、反思、提议或投票等动作,共同商定一份行程。
  2. 框架支持轮流发言、邀请式、主持人式、随机、并行投票等五种发言规则,以及多数决、一致同意、单人决定、最大化整体满意度、最小化最差满意度等五种投票规则,可灵活组合用于讨论阶段和投票阶段。
  3. 系统验证部分用Qwen3.5-2B/4B/9B、gpt-oss-20b、gpt-5.4-mini五种模型分别运行了50场合成会议,测量完成率、共识率、约束违反率和动作失败率。
  4. 偏好冲突分析针对一致、混合、冲突三种偏好设置各生成50场会议(参与者由Qwen3.5-9B扮演),记录讨论轮数、提案次数、共识率及由LLM评判的满意度分数。
  5. 发言顺序分析将同样的50场会议在三个冲突等级下各重复运行三次,通过拉丁方式轮换座位顺序,测量提案接受率与发言位置的关系。
Figure 1: An overview of AI Tour Meeting. The user first configures the meeting settings, including the global goals, constraints, participants, and workflow, and then starts the meeting. The meeting alternates between conversation and voting phases whenever a new itinerary is proposed. Once all participants are satisfied with the currently accepted itinerary, the meeting concludes.
Figure 1: An overview of AI Tour Meeting. The user first configures the meeting settings, including the global goals, constraints, participants, and workflow, and then starts the meeting. The meeting alternates between conversation and voting phases whenever a new itinerary is proposed. Once all participants are satisfied with the currently accepted itinerary, the meeting concludes.
Table 1: System validation results across different models and model sizes. These results suggest that our framework requires an LLM with performance comparable to or higher than Qwen3.5-4B.
ModelCompletion (%) ↑Consensus (%)Constraint err. (%) ↓Action fail. (%) ↓TurnsDuration11 1 Since meeting duration largely depends on the machine used to deploy the LLMs, these values are for reference only. (min)Tokens [K] (in / out)Usable
Qwen3.5-2B825814.21.361.572.57100 / 114✗
Qwen3.5-4B1001003.10.515.737.0240 / 44✓
Qwen3.5-9B1001000.00.112.833.6134 / 37✓
gpt-oss-20b1001000.40.220.411.8315 / 25✓
gpt-5.4-mini100800.00.134.56.3535 / 40✓
Figure 2: The graphical user interface of AI Tour Meeting. From left to right: the participant settings, the meeting settings, the ongoing meeting screen, and the analytics dashboard.
Figure 2: The graphical user interface of AI Tour Meeting. From left to right: the participant settings, the meeting settings, the ongoing meeting screen, and the analytics dashboard.
Table 2: Meeting results under controlled preference conflict among LLM participants.
AlignedMixedConflicting
Turns10.3±7.6012.1±9.8025.9±22.7
Proposals2.3±2.302.7±2.506.5±5.30
Consensus rate100%100%94%
Satisfaction8.93±1.478.39±1.707.13±2.06
Victim rate0.7%1.3%11.3%
Figure 4: Examples of consensus-building patterns.
Figure 4: Examples of consensus-building patterns.
Table 3: Additional system validation with Qwen3.5-9B across participant sizes M∈{3,5,10}
# ParticipantsCompletion (%) ↑Consensus (%)Constraint err. (%) ↓Action fail. (%) ↓TurnsDuration (min)Tokens [K] (in / out)Validity
M=31001000.00.112.833.6134 / 37✓
M=51001001.60.825.4149.3659 / 99✓
M=10100962.40.368.6471.53074 / 406✓
(b) A pattern of mediation by another participant.
(b) A pattern of mediation by another participant.

研究结果

  • 除Qwen3.5-2B外,所有模型的会议完成率(以达成共识或达到最大轮数结束且至少接受一个行程为准)均为100%,且模型性能越强,约束违反率和动作失败率越低。
  • 随着偏好冲突从一致增至混合再到冲突,讨论轮数和提案次数增加、讨论时间变长,共识率和平均满意度(1到10分)下降,满意度4分及以下的参与者比例('受害率')上升。
  • 在一致偏好设置下,不同发言位置的提案接受率没有统计学显著差异;但在混合和冲突设置下,第二、第三位发言者的提案接受率显著高于第一位发言者。
  • 第一位发言者的提案若被接受,大多是在先向其他人提问之后;而后面发言的参与者常常无需提问,仅凭前面讨论中的信息就能提出被接受的方案。
  • 在由GPT-5.4-mini生成、Qwen3.5-9B评估的额外验证中,参与者数量增至5人和10人时完成率仍保持100%,约束违反率因目的地数量增多而略有上升但仍处于较低水平,且讨论轮数的增长速度略快于参与者数量的增长。
Figure 5: Proposal acceptance rates by preference conflict level and speaking position. Error bars are Wilson 95% confidence intervals on the total rate.
Figure 5: Proposal acceptance rates by preference conflict level and speaking position. Error bars are Wilson 95% confidence intervals on the total rate.

可应用场景

  • 无需真人参与即可大规模模拟团体旅行协商过程,用于自动评估团体推荐系统。
  • 让LLM智能体代表无法出席实际讨论的朋友或家人,使用户能够与之协商并将其偏好纳入行程规划。
  • 作为研究平台,用于探究偏好冲突程度或发言顺序等因素如何影响多智能体群体决策。
Figure 6: Chat boxes for human participants.
Figure 6: Chat boxes for human participants.

局限与待验证事项

  • 系统验证和分析示例仅在特定模型组合(Qwen3.5、gpt-oss、gpt-5.4-mini)、3至10人规模及固定预算/时间窗约束下进行,尚未验证在其他模型、更大团体或其他旅行场景中的适用性。
  • 据报告,该框架需要性能不低于Qwen3.5-4B的LLM才能稳定运行;更小的模型如Qwen3.5-2B会产生诸如引用不存在的“当前路线”之类的无效动作。
  • 代码采用NTT的专有许可,仅限研究用途,限制了商业化应用。
  • 满意度评分来自LLM评判而非真实人类评价,其与实际人类满意度的一致性尚未得到验证。
  • 允许真人参与的交互模式(附录C)仅作了功能性说明,未提供独立的量化验证结果。
Figure 7: Input context of a participant.
Figure 7: Input context of a participant.

为什么重要

该框架能够自动、低成本地大规模模拟人类难以频繁参与的多方旅行协商过程,支持行为研究和团体推荐系统的自动评估。它还展示了让LLM智能体代替无法出席的成员参与实际讨论、表达其偏好的应用潜力。

本文术语

  • 人设(Persona) · 包含姓名、性格、偏好、目标等设定,LLM在会议中据此扮演角色
  • LLM-as-a-judge · 用另一个大语言模型来打分或评估结果质量,例如参与者满意度
  • 轮流发言(Round robin) · 参与者按固定顺序依次循环发言的规则
  • Wilson 95%置信区间 · 一种用于估计比例类统计量不确定范围的方法
  • vLLM · 一种用于高效部署和运行本地大语言模型的开源推理服务框架

论文原文摘要（英文）

This paper proposes AI Tour Meeting, a group travel planning framework powered by multiple Large Language Model (LLM)-based agents. The agents are instantiated with distinct personas and collaboratively seek an itinerary that satisfies their constraints and preferences through natural language discussion. The framework enables easy and flexible orchestration of such discussions by providing interfaces for configuring agent personas, discussion workflows, monitoring, and LLM deployment. Its prima

作者 · Daisuke Kikuta

在 arXiv 阅读

最新论文

全部论文 →

METAL LAB 最新报道

图片来源： Daisuke Kikuta et al., arXiv:2607.18806, CC BY 4.0