ai大模型应用产品经理到底咋干?干了11年,说点大实话

发布时间:2026/7/1 10:59:23
ai大模型应用产品经理到底咋干?干了11年,说点大实话

内容:

干了11年大模型这行,说实话,心累是真累,但爽也是真爽。

最近好多朋友问我,说现在转行做ai大模型应用产品经理,是不是还在风口上?是不是只要懂点提示词工程就能月薪过万?

我直接泼盆冷水:别做梦了。

现在的市场,早就不是那个“有个API就能跑通”的草莽时代了。如果你还抱着以前做传统软件产品的思路,搞个PRD文档甩给开发,那大概率是要被骂回来的。

为啥?因为大模型这东西,它不是代码,它是概率。

今天它给你生成的答案,跟明天生成的,可能天差地别。这种不确定性,才是大模型应用产品经理最核心的挑战。

咱们拿个真实案例来说。

去年有个客户,想做个智能客服。老板觉得,哎,大模型多牛啊,直接接个接口,就能自动回答客户问题,还能24小时在线,多省事。

结果上线第一天,崩了。

不是系统崩,是逻辑崩。客户问“你们退款政策咋样”,模型给回答得头头是道,结果全是胡编乱造。客户投诉电话被打爆,老板脸都绿了。

这就是典型的“幻觉”问题。

这时候,ai大模型应用产品经理的作用就出来了。

你不能只说“让模型聪明点”,这话说得等于没说。你得懂怎么通过RAG(检索增强生成)技术,把企业的私有知识库喂给模型;你得懂怎么设计Prompt,让模型知道啥该说,啥不该说;你得懂怎么加一层人工审核或者规则过滤,把那些离谱的答案拦在外面。

这活儿,细碎得很。

我以前带过一个团队,为了优化一个文档总结的功能,我们改了不下50版Prompt。

不是那种华丽的辞藻,而是极其枯燥的逻辑约束。比如,强制模型在总结时必须引用原文段落,如果找不到依据,就直接回答“未找到相关信息”。

就这么一个简单的改动,准确率从60%提到了90%以上。

你看,这就是差距。

很多人觉得,大模型产品经理就是写写提示词。错。

真正的核心能力,是对业务场景的深刻理解。

你得知道,用户到底在什么场景下用这个功能?是紧急求助,还是休闲浏览?不同的场景,对模型的“温度”设置、响应速度、准确度要求完全不同。

比如,医疗领域的问答,容错率极低,必须追求100%的准确,哪怕速度慢点也没关系。

而推荐系统的场景,可能更看重多样性和新颖性,允许一定的偏差。

如果你不懂业务,只盯着模型参数看,那你永远是个初级玩家。

另外,还得学会跟技术“吵架”。

别误会,不是真吵架,是博弈。

技术人员会说:“这个需求实现不了,太复杂了。”

你得能反驳回去:“如果实现不了,那用户痛点怎么解决?有没有替代方案?”

你要懂技术的边界,知道LLM(大语言模型)现在的短板在哪,比如长文本处理能力、逻辑推理能力的局限。

只有懂这些,你才能设计出既先进又落地的产品。

最后,想说句心里话。

这行变化太快了,今天火的框架,明天可能就过时了。

所以,保持好奇心,保持学习,比什么都重要。

别总想着抄作业,每个业务场景都是独一无二的。

你得扎进泥土里,去听用户的声音,去摸技术的底细。

只有这样,你才能在这个充满不确定性的时代,找到确定的价值。

共勉。