SparkMe发布:自适应半结构化访谈多智能体系统
先了解这件事
David Anugraha等研究者发布了SparkMe,一个基于大语言模型的多智能体自适应半结构化访谈系统。针对现有自动化访谈系统在预设话题覆盖与自适应探索之间缺乏平衡机制的问题,该团队将访谈构建为优化问题,通过模拟对话推演选择高预期效用的问题,以权衡话题覆盖率、涌现主题发现能力及访谈成本。 在由LLM扮演受访者的控制实验中,SparkMe相比最佳基线提高了4.7%的话题指南覆盖率,并在更少轮次中激发更丰富的洞察。涵盖7个职业领域、70名参与者的用户研究显示,领域专家评价其访谈质量更高且更具适应性,能捕捉到基线未发现的特定职业洞察;定性研究专家也指出其在响应能力和追问技巧上表现更强。目前,SparkMe的代码及评估资源已开源。
AI 根据报道生成 · 1 小时前更新
报道时间线
沿着报道,了解事件的不同侧面。
- arXiv精选SparkMe发布:自适应半结构化访谈多智能体系统
定性洞察对产品和政策决策至关重要,但受限于训练有素的访谈员数量,难以规模化收集数据。现有利用大语言模型自动化访谈的系统缺乏平衡预设话题系统覆盖与自适应探索的原则性机制,也难以在对话中自然跟进、深挖和捕捉涌现主题。 针对这一挑战,研究者将自适应半结构化访谈构建为对访谈者行为的优化问题。访谈效用被定义为三个维度的权衡:预设访谈话题指南的覆盖率、相关涌现主题的发现能力以及以长度衡量的访谈成本。依据此公式化定义,推出了 SparkMe,一个执行深思熟虑规划的多智能体 LLM 访谈员。它通过模拟对话推演来选择具有高预期效用的问题。 评估分为两部分。首先是通过由 LLM 扮演的受访者进行的控制实验,结果显示 SparkMe 实现了更高的访谈效用,相比最佳基线提高了 4.7% 的话题指南覆盖率,并在比先前 LLM 访谈方法更少的对话轮次中激发了更丰富的涌现洞察。其次是在涵盖 7 个职业的 70 名参与者中进行的用户研究。职业领域专家评价其产生了更高质量、更具适应性的访谈,并验证了基线未捕捉到的特定职业洞察。此外,单独招募的定性或人本中心研究专家也发现 SparkMe 具有更强的响应能力和追问技巧。SparkMe 的代码和评估资源已开源。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。