danshipper

Mike Taylor 解释什么是“head of Evals”：他自创的这个职位是做什么的

Mike Taylor 介绍了他自创的"head of Evals"（评估负责人）职位，核心是评估 AI 智能体能否按要求完成任务，通过收集任务案例、定义好坏结果、构建 benchmark 或做实验来衡量模型表现。