OpenAI 分享部署仿真研究

OpenAI 分享部署仿真研究

OpenAI 发布了一项部署仿真研究，利用去标识化用户请求来提前预测模型在实际使用中的行为，并发现模拟部署能将评估认知降至接近真实生产流量水平。该方法亦扩展至具有状态工具的代理部署，指出工具模拟器在提供足够上下文和功能时可生成逼真轨迹，并在同一篇 Alignment 博客中评估 WildChat 数据集，发现其虽然精度低于真实数据，但仍能提供有用的部署行为信号。