节目简介:
依据Google前沿模型产品负责人Tulsee Doshi在Lenny播客上的分享,两位搭档聊产品经理如何面对不可预测的模型:先把好写成评分标准,用手感和小评测认识模型,按60-20-20给未成熟能力留位置,再讨论团队用AI的习惯与倦怠的来源。
目录:
00:00 开场
00:54 模型出来总有计划外的东西
03:17 模型自己也有用户体验
05:34 这么多模型,是为了服务不同的人
07:51 从五个问题开始做评测
09:57 评测本身也可能是错的
12:07 60-20-20,给还没成熟的能力留位置
14:20 产品经理的活,团队的习惯
17:33 累的原因,和今天能做的一件事
19:45 收尾
本期要点:
- 模型训练出来总有计划外的东西,产品经理既要管放进去的,也要看出来的
- 好要拆成规格、评分标准、训练数据,最后进奖励模型
- 评测可以从五个问题开始,先自己当第一个评分的人
- 裁判模型、上线环境、旧量表都会改变评测结果,肤色量表从六档到十档就是例子
- 60-20-20:六成今天能用,两成差不多能用,两成只见一点光
- 模型更新后,要把旧的包装和技能拆出来再测一遍
- 倦怠主要来自混乱和杂活,不只是工作时间长
原文链接:
mp.weixin.qq.com
公众号:深思圈

前沿模型没法精确控制,产品经理还能做什么
20分钟 ·
136·
0