本文目录
选择 AI 用户研究工具,最可靠的办法是拿一个真实的研究问题去试用,逐项检查九个方面:追问能力、原话溯源、人工审核、受访者来源、多语言、数据安全与合规、与行为数据打通、AI Agent 调用和价格模式。看演示视频和功能列表得不出结论,要看工具在你自己的问题上实际产出了什么。读完这篇,你会知道每个方面试用时看什么、该问供应商什么,并拿到一份评估清单和一张评分表。
评估前先准备什么
- 一个真实的业务问题,最好是团队近期真要做决定的,例如某个功能为什么用的人少
- 5–10 位愿意参加试访的受访者,可以是同事、熟悉的用户或小规模招募
- 一位熟悉访谈的同事,负责阅读原始记录、判断追问质量
- 公司的数据安全与采购要求,提前从法务或安全团队拿到
- 评分表和权重,在看到任何工具之前先定好,避免被演示效果左右
用同一个研究问题、同一批受访者条件试用每一家,比较才有意义。
访谈与分析能力
1. 追问能力
这是 AI 访谈和对话式问卷的分界线。要看的是:受访者回答笼统时,AI 会不会追问具体的场景、环节和原因,还是直接跳到下一题;追问是否中立,有没有替受访者说出答案。下面是一段合格追问的示例,可以拿来对照。
- 试用时:用你的提纲跑 5 场以上,通读全部原始记录,数一数笼统回答后有多少次得到了追问,追问里有没有诱导性问题。
- 试用时:故意给出敷衍或跑题的回答,看 AI 如何处理。
- 问供应商:追问的深度和方向能否在提纲里设置;能否规定某些话题不追问。
2. 原话溯源
报告里的每条结论,能否查到对应的原话、受访者和它在访谈中的位置。不能追溯的结论,很难拿去说服团队,也无法核对 AI 有没有概括错。
- 试用时:随机挑 3 条结论,逐条点回原话,检查原话是否真的支持这条结论,人数统计是否准确。
- 试用时:看报告是否列出反例,即与结论不一致的受访者说了什么。
- 问供应商:结论中的人数是怎么统计的;同一位受访者多次提到,会不会被重复计数。
3. 人工审核
AI 生成的提纲和结论都需要人把关。要确认研究负责人能否在访谈前审阅和修改提纲,访谈中能否旁听,事后能否排除无效样本,以及能否逐条修改或驳回结论。
- 试用时:排除一个样本,看报告是否随之更新;驳回一条结论,看是否保留了修改记录。
- 试用时:看访谈进行中能否实时查看记录,发现提纲有问题时能否暂停或调整。
- 问供应商:审阅记录能否导出,团队成员的查看和编辑权限如何区分。
受访者与语言
4. 受访者来源
多数产品团队最想访谈的是自己的用户。要看工具能否导入名单、生成分享链接、嵌入产品内邀请,需要时能否招募外部受访者,以及能否设置筛选问卷。
- 试用时:分别用名单导入和分享链接各邀请几位受访者,从受访者一侧走一遍完整流程,看是否顺畅。
- 问供应商:外部招募覆盖哪些国家和人群,单个受访者的招募成本和周期大致多少,激励怎么发放。
- 问供应商:如何识别同一人重复参加或明显敷衍的回答。
5. 多语言
如果你的用户分布在多个市场,需要确认工具能否用受访者的母语访谈,并把不同语言的访谈放在一起分析,同时保留原文。
- 试用时:请一位母语同事用另一种语言参加访谈,判断提问是否自然、追问是否到位。
- 试用时:看合并分析后,每条结论能否同时看到原文和译文。
- 问供应商:支持哪些语言做访谈,哪些语言只支持翻译;语音访谈支持哪些语言。
数据安全与合规
6. 数据安全与合规
访谈记录里常有受访者的个人信息和真实经历,安全问题要在采购前问清,而不是上线后补。重点看四件事:受访者同意如何记录,原话是否匿名化,数据存储在哪里,能否按要求删除。
- 试用时:查看受访者看到的开场说明,确认是否告知了访谈由 AI 主持和数据用途。
- 试用时:在访谈中说出一个假的手机号,看报告和导出文件里是否做了脱敏处理。
- 问供应商:数据存储地区,是否用客户数据训练模型,删除请求多久生效,有哪些安全认证或审计报告。
集成与价格
7. 与行为数据打通
访谈回答为什么,行为数据回答有多少人、做了什么。两者打通后,可以按行为圈选受访者,例如最近 30 天下单后取消的用户,也能在改动上线后用数据检验访谈结论。
- 试用时:用一个行为条件圈选一批受访者并发出邀请,看从圈选到邀请需要几步。
- 试用时:看报告里能否同时查看受访者的行为数据,例如使用时长和付费记录。
- 问供应商:支持连接哪些数据平台,数据同步是实时还是定期,权限如何控制。
8. AI Agent 调用
越来越多团队让自己的 AI Agent 处理日常工作。如果工具提供 MCP、CLI 或 API,Agent 就能直接创建研究、查询进度、读取报告,研究结果也能进入团队已有的工作流。
- 试用时:让团队的 Agent 通过 MCP 或 CLI 创建一项研究并读取报告,看接口是否完整、返回内容能否直接使用。
- 问供应商:哪些操作能通过接口完成,哪些只能在网页上做;接口有没有调用频率限制。
9. 价格模式
常见的收费方式有按访谈场次、按席位和按项目。要按自己一年预计做多少项研究、每项多少场来估算总成本,而不是只看单价。
- 试用时:确认免费版或试用版能否完整走完一项研究,从提纲到报告。
- 问供应商:外部招募、语音访谈、多语言是否另外收费;未用完的场次能否顺延;超出套餐后如何计费。
评估清单与评分表
下面的清单可以直接复制到试用记录里,每家工具单独填一份。
- 试用研究问题:【填写】 试用场次:【填写】 评估人:【填写】
- 追问:笼统回答后得到追问的比例约为【填写】,是否出现诱导性问题:是 / 否
- 追问:能否在提纲中设置追问方向和不追问的话题:是 / 否
- 溯源:随机抽查 3 条结论,原话能支持结论的有【填写】条
- 溯源:报告是否列出反例和人数:是 / 否
- 审核:能否审阅提纲、旁听、排除样本、逐条驳回结论:是 / 否
- 受访者:能否导入自有用户名单和生成分享链接:是 / 否
- 受访者:是否支持外部招募,覆盖哪些市场:【填写】
- 多语言:访谈支持的语言:【填写】,合并分析时能否查看原文:是 / 否
- 安全:数据存储地区:【填写】,是否用客户数据训练模型:是 / 否
- 安全:开场是否告知 AI 主持和数据用途,敏感信息是否脱敏:是 / 否
- 行为数据:能否按行为圈选受访者,能否用数据验证结论:是 / 否
- Agent 调用:是否提供 MCP / CLI / API,覆盖哪些操作:【填写】
- 价格:收费方式【填写】,按一年预计用量估算总成本【填写】
- 总体印象:最满意的一点【填写】,最担心的一点【填写】
评分时,每个方面按 1、3、5 分打分,再乘以权重。下表的权重只是示例,请按团队的实际需要调整,总和保持 100。
| 方面 | 权重(示例) | 1 分 | 3 分 | 5 分 |
|---|---|---|---|---|
| 追问能力 | 20 | 很少追问或常带诱导 | 能追问,但深度不稳定 | 追问具体、中立,可在提纲中设置 |
| 原话溯源 | 15 | 结论无法追溯 | 能看到原话,人数不准或缺反例 | 每条结论有原话、人数和反例 |
| 人工审核 | 15 | 只能看结果 | 能改提纲或排除样本,但不全 | 提纲、旁听、样本、结论都能审 |
| 受访者来源 | 10 | 只能分享链接 | 能导入自有名单 | 自有用户与外部招募都支持 |
| 多语言 | 5 | 只支持一种语言 | 多语言访谈,分析时不保留原文 | 多语言访谈与合并分析,保留原文 |
| 数据安全与合规 | 15 | 关键问题答不清 | 有基本措施,部分需另行确认 | 同意、匿名、存储、删除都有明确方案 |
| 与行为数据打通 | 10 | 不支持 | 能导入数据做筛选 | 按行为圈选并能用数据验证结论 |
| AI Agent 调用 | 5 | 没有接口 | 有 API,覆盖部分操作 | MCP、CLI 或 API 覆盖主要操作 |
| 价格模式 | 5 | 无法估算总成本 | 价格清楚,但试用受限 | 价格清楚,试用能走完整流程 |
常见错误
- 只看演示,不用自己的问题试用:演示通常经过挑选。用团队真实的研究问题跑至少 5 场再下结论。
- 只读报告,不读原始记录:报告写得好不代表追问做得好。评估人要通读试访的完整记录。
- 先看工具再定权重:容易被某个亮眼功能带偏。评分表和权重在试用前定好。
- 把数据安全留到签约后:问题晚发现,采购会卡住或返工。试用阶段就请安全团队一起提问。
- 只比较单价:不同收费方式没法直接对比。按一年预计用量换算成总成本再比较。
用 heari 怎么做
评估 heari 时,可按上面的清单逐项试用:输入真实的业务问题,AI 生成研究方案和访谈提纲;AI 用文字或语音同时进行多场访谈并追问,研究者可旁听、排除无效样本;每条结论附原话与反例并标注人数,可逐条驳回。heari 可与 ThinkingAI Agentic Engine 的行为数据打通,并支持 MCP 与 CLI。
常见问题
选择 AI 用户研究工具最重要的是哪一项?
对多数团队来说,追问能力和原话溯源最重要。追问决定访谈能否问出原因,原话溯源决定结论能否被核对和采信。这两项不达标,其他功能再多也难以弥补。
试用 AI 用户研究工具需要多少场访谈?
建议每家工具至少跑 5 场,用同一个研究问题和同样的受访者条件,并由熟悉访谈的同事通读全部原始记录。场次太少,很难判断追问质量是否稳定。
评估 AI 访谈工具时,应该问供应商哪些安全问题?
至少问清五件事:数据存储在哪个地区,是否用客户数据训练模型,受访者同意如何记录,原话是否做匿名化和脱敏,删除请求多久生效。最好在试用阶段就请公司的安全或法务团队参与。
AI 研究工具为什么要能和行为数据打通?
访谈能说明用户为什么这样做,行为数据能说明有多少人这样做。两者打通后,可以按真实行为挑选受访者,避免只访谈到愿意说话的人,也能在改动上线后用数据检验访谈得出的结论。
不同收费方式的 AI 研究工具怎么比较价格?
先估算团队一年要做多少项研究、每项多少场访谈,再把按场次、按席位、按项目的报价都换算成年度总成本,并加上外部招募、语音、多语言等可能另外收费的部分。

