Polly 在 Playground 中可用，可帮助您在运行评估前优化提示词。
在 Playground 中创建实验
- 点击侧边栏中的 Playground。
- 添加提示词：选择一个现有的已保存提示词或创建一个新的。
-
从“在数据集上测试”下拉菜单中选择一个数据集
- 请注意，数据集输入中的键必须与提示词的输入变量匹配。例如，在上面的视频中，所选数据集的输入具有键 “blog”，这正确地匹配了提示词的输入变量。
- Playground 中最多允许 15 个输入变量。
- 开始实验：点击 开始 或按 CMD+Enter。这将在数据集中的所有示例上运行提示词，并在数据集详情页中为该实验创建一个条目。建议在开始实验前将提示词提交到提示词中心，以便在后续查看实验时可以轻松引用。
- 查看完整结果：点击 查看完整实验。这将带您进入实验详情页面，您可以在那里查看实验的结果。
为实验添加评估分数
通过添加评估器，根据特定标准评估您的实验。在 Playground 中使用 +Evaluator 按钮添加 LLM-as-a-judge 或自定义代码评估器。 要了解更多关于通过 UI 界面添加评估器的信息，请访问如何定义 LLM-as-a-judge 评估器。Connect these docs to Claude, VSCode, and more via MCP for real-time answers.