前沿模型没法精确控制,产品经理还能做什么

前沿模型没法精确控制,产品经理还能做什么

20分钟 ·
播放数136
·
评论数0

节目简介:

依据Google前沿模型产品负责人Tulsee Doshi在Lenny播客上的分享,两位搭档聊产品经理如何面对不可预测的模型:先把好写成评分标准,用手感和小评测认识模型,按60-20-20给未成熟能力留位置,再讨论团队用AI的习惯与倦怠的来源。

目录:

00:00 开场

00:54 模型出来总有计划外的东西

03:17 模型自己也有用户体验

05:34 这么多模型,是为了服务不同的人

07:51 从五个问题开始做评测

09:57 评测本身也可能是错的

12:07 60-20-20,给还没成熟的能力留位置

14:20 产品经理的活,团队的习惯

17:33 累的原因,和今天能做的一件事

19:45 收尾

本期要点:

- 模型训练出来总有计划外的东西,产品经理既要管放进去的,也要看出来的

- 好要拆成规格、评分标准、训练数据,最后进奖励模型

- 评测可以从五个问题开始,先自己当第一个评分的人

- 裁判模型、上线环境、旧量表都会改变评测结果,肤色量表从六档到十档就是例子

- 60-20-20:六成今天能用,两成差不多能用,两成只见一点光

- 模型更新后,要把旧的包装和技能拆出来再测一遍

- 倦怠主要来自混乱和杂活,不只是工作时间长

原文链接:

mp.weixin.qq.com

公众号:深思圈