跳到正文
danshipper· Dan Shipper·· 6 天前AI 评分32

Mike Taylor 解释什么是“head of Evals”:他自创的这个职位是做什么的

RT Mike Taylor: What is a "head of Evals?" (aka the job title I made up for myself). Evals stands for evaluations, specifically evaluating how well AI...

AI 导读

Mike Taylor 介绍了他自创的"head of Evals"(评估负责人)职位,核心是评估 AI 智能体能否按要求完成任务,通过收集任务案例、定义好坏结果、构建 benchmark 或做实验来衡量模型表现。

来源:danshipper · x.com