在提示词中包含多模态内容

某些应用围绕多模态内容构建，例如可以回答有关 PDF 或图像问题的聊天机器人。在这些情况下，你会希望在提示词中包含多模态内容，并测试模型回答相关内容问题的能力。

Playground 支持两种在提示词中加入多模态内容的方法：

1. 内联内容：将静态文件（图像、PDF、音频）直接嵌入提示词中。当你希望在该提示词的所有使用场景中始终包含相同的多模态内容时，这种方式非常理想。例如，你可以加入一张参考图像，帮助模型基于它生成回答。

2. 模板变量：为附件创建动态占位符，每次都可以填入不同的内容。这种方法更灵活，使你能够：

   • 测试模型如何处理不同输入
   • 创建可复用且适用于不同内容的提示词

NOTE

并非所有模型都支持多模态内容。在 Playground 中使用多模态功能前，请确保所选模型支持你要使用的文件类型。

内联内容

在要添加多模态内容的消息中点击文件图标。在 Upload content 标签页下，你可以上传文件并将其内联包含在提示词中。

模板变量

在要添加多模态内容的消息中点击文件图标。在 Template variables 标签页下，你可以为特定附件类型创建模板变量。目前仅支持图像、PDF 和音频文件（.wav、.mp3）。

填充模板变量

添加模板变量后，你可以使用屏幕右侧的面板为其提供内容。只需点击 + 按钮上传或选择要用于填充模板变量的内容。

运行评估

手动测试提示词后，你可以运行评估，查看提示词在黄金示例数据集上的表现。

---