#AI产品学习手记_20250108
1、AI产品经理需要尽早参与到技术研究的过程中,就算是算法实验结果,也可以激发产品创意。
2、享受不确定性并从中发现机会。对模型表现好的方面进行强化,对表现不佳的进行改进。
3、当某些事情只有60%正确时,实际上有很多事情是可以做的。通过人与模型的结合,事情做正确的几率将远高于60%。
4、当今的模型并非受限于智能,而是受限于评估。模型实际上可以做的更多,但如果你希望模型能运行成功,需要告诉模型成功究竟意味着什么?你正在解决什么问题?
5、掌握AI评估能力对AI产品经理非常重要,不能只定义产品能力,还要找出80%能力下需要调整的参数、算法和逻辑有哪些,实现能力的持续完善。
6、怎么提升评估能力?看失败的案例,从而优化评估标准。
7、评估是个性化的、需要演进的,除了逻辑和数学问题,很多问题没有正确答案。因此需要建立给AI新的评估标准,比如模型结果是否超出人类预期,像是速度快、内容新、内容独特等等。这比简单的对错更重要。
8、可以把模型当做产品原型工具来用,让AI帮产品经理快速创建出可A/B测试的UI界面,
9、对于大模型这种非确定性系统,如何根据收集的反馈,判断何时该终止模型的错误循环?这是评估这件事要做到的,也是非常重要的。
10、做AI产品需要有“禅意”思维,因为AI的输出,一半取决于用户行为,一半取决于模型表现,因此需要放下对结果的控制,顺其自然,找到最适合不确定性空间下的答案。思考如何利用AI输出的优势。
11、向企业宣传AI对生产力改进的价值,关键是抓住在企业内部的那些“早期使用者、先进份子”
12、对一些对幻觉容忍度低的场景怎么用AI?你可以微调一个在特定任务上表现良好的模型,再微调一个输出非常精确的模型,然后把这2个模型结合起来用。让1个模型检查另一个模型的输出,并在错误时让其重试。本质上这和人类之间协同工作是类似的。
13、AI产品经理发布的应该是智能,不只是个产品。