五百条用户反馈堆了三周没敢动 - 我先把失败的整理方式列了一遍，才找到正确做法
一、先说说我怎么把这件事做砸的
去年我的小产品上线后，用户反馈渠道一下子多了起来：应用内表单、微信群、邮件、应用商店评论。三周时间攒了五百多条。
第一次整理，我犯了几个典型错误。
错误一：让AI一次性吃下所有原始反馈。 我把五百条消息原样粘贴给模型，让它“总结一下用户需求”。结果返回的是一堆“用户希望产品更好用”“部分用户对性能有意见”之类的废话。颗粒度被压扁了，完全没法指导排期。
错误二：不清洗数据就喂给AI。 微信群消息里有表情包、闲聊、“收到”、截图转述，AI老老实实把它们全分析了一遍，输出里出现了“有用户认为天气不错”这种结论。
错误三：让AI既当分类员又当裁判。 我让模型直接输出“优先级排序”，没有给它任何判断标准。它给出的排序看起来言之凿凿，实际上是把提及次数多的排前面——但“启动慢”被骂了80次和“无法登录”被骂了15次，是一回事吗？显然不是。
错误四：一步到位，没有人工校验环节。 AI把两条意思相反的反馈归到同一类（“希望增加深色模式”和“深色模式太刺眼”），我没检查就发到了团队群里，被同事当场指出，颇为尴尬。
这四次翻车让我明白：AI不是许愿机，批量整理反馈这件事，失败的不是AI,是我使用AI的方式。
二、正确的路径：四步流水线
痛定思痛，我把流程拆成了四道工序，每一步只让AI干一件事。
第一步：预处理与清洗。 把原始反馈分批(每批50-100条)交给AI,任务是删除闲聊、去除表情和重复内容、把口语化表述规范化，但不改变原意，并保留原始编号方便回溯。
第二步：结构化归类。 让AI按统一格式输出：反馈编号、用户诉求摘要、所属类别(功能/性能/体验/Bug/其他)、涉及功能模块、情绪强度。这一步的关键是给它一个封闭的类别清单，不允许自创类别。
第三步：聚合与权重计算。 这是和之前做法最大的区别——优先级不由AI“感觉”，而是按明确规则计算。我给AI的规则是：提及频次、影响面(是否阻断核心流程)、情绪强度、与产品目标的匹配度，四个维度各打1-5分，加权求和。AI只负责按规则打分和说明理由，排序是算出来的，可复查、可质疑。
第四步：人工复核输出。 我只花20分钟检查两件事：Top 10 需求的归类是否正确、高分项里有没有被合并误伤的矛盾反馈。确认后输出最终清单。
三、可直接复用的提示词模板
第三步是核心，这是我目前在用的模板：
你是一名产品分析师。我会提供一批已清洗的用户反馈(格式:编号|类别|诉求摘要|情绪强度1-5)。
请完成以下任务:
1. 将语义相同的诉求聚合为一个需求项,标注包含的反馈编号;
2. 对每个需求项按以下维度打分(1-5分):
- 频次:提及该诉求的反馈数量(1条=1分,2-5条=2分,6-15条=3分,16-30条=4分,30条以上=5分)
- 阻断性:是否导致用户无法完成核心流程(完全无法=5分)
- 情绪:该组反馈的平均情绪强度
- 战略匹配:是否符合本季度产品目标(我会在下方提供目标)
3. 加权总分 = 频次×0.2 + 阻断性×0.4 + 情绪×0.2 + 战略匹配×0.2
4. 按总分降序输出表格:需求项|聚合编号|各维度得分|总分|一句话理由
5. 单独列出"存在内部矛盾的需求"(同类反馈中出现相反诉求),不要合并它们。
约束:不要自创评分维度;每个得分必须给出依据;无法判断时标注"需人工确认"。
本季度产品目标:【填写你的目标】
用户反馈数据:【粘贴数据】第四步的表格输出可以直接粘进飞书/Notion,再人工过一遍“需人工确认”的条目即可。
四、用AI前后的对比
用AI之前(准确说，是用错AI之前)：
- 三周积压500条反馈，一直不敢动手
- 手动整理一次约6-8小时，整理到一半新反馈又进来了
- 分类标准每次都不一样，上个月和这个月的清单没法对比
- 排优先级靠拍脑袋，团队讨论时谁也说服不了谁
流程跑通之后：
- 500条反馈，清洗+归类+打分全程约40分钟，人工复核20分钟
- 分类标准固定，每周跑一次，清单可以纵向对比趋势
- 优先级有计算依据，阻断性Bug自然浮到最上面，讨论效率明显提高
- 最大收获是发现了几个低频但阻断性极强的问题——以前按“谁喊得响”排序，它们永远沉底
需要说明的是，AI输出的归类仍然会有5%-10%需要人工修正，尤其是反讽、截图转述这类内容。AI负责的是把6小时的体力活压缩到1小时以内，判断权还在你手里。
五、一点补充
这套流程对模型有一定要求：长上下文、结构化输出稳定、支持批量处理。我目前是通过统一网关调用多个模型来跑这个流水线的——清洗用便宜快速的模型，归类和打分用能力更强的模型，按工序选模型，成本和质量的平衡比“一个模型打天下”好得多。具体各家的价格，以官网价格页为准。
如果你也想搭建自己的多模型工作流，可以试试 ThisToken.AI 的统一接口：https://api.thistoken.ai/register ,一个 base_url 切换多家模型，跑批、重试、成本核算都在一处，很适合独立开发者和小团队起步。
---
不想折腾多家供应商的接入差异？在 https://api.thistoken.ai/register 注册，用一个 base_url 调用所有模型。