Mindket
中级免费

提示词优化:让 AI 帮你写、改进并测试提示词

黑色横幅,标题是“提示词优化”,下面是“用 AI 生成、改进和测试提示词”。

这门免费课程共四课,讲提示词优化,写给已经在写提示词、想更快改进它们的人。你会先让模型生成第一版提示词,再用 OpenAI 的 optimizer 或编辑元提示词改进它,接着在小型测试集上比较各个版本,最后让 DSPy 对照你定义的指标去搜索更好的版本。

学完你能做到

  • 用 Anthropic 的 metaprompt 或 OpenAI 的提示词生成功能,根据任务描述生成第一版提示词。
  • 用 OpenAI 的 prompt optimizer 或它的编辑元提示词改进现有的提示词,读懂它改了什么,并了解 Anthropic 对 prompt improver 的说法。
  • 换版本之前,用电子表格、控制台或 promptfoo 在小型测试集上比较各个提示词版本。
  • 运行 DSPy 的 MIPROv2 优化器,对照你自己的指标去调优提示词。
全部课程

适合谁

适合已经在给 ChatGPT、Claude 或模型 API 写提示词、想少靠猜测去改进它们的人。请先掌握提示词的基础。前两课在网页控制台或聊天窗口里就能完成,不过第 1 课还提供一个 notebook 路线,要改几行代码。第 3 课有一条不用代码的路线,也有一条要用终端和 YAML 文件的路线,第 4 课用到 Python。

课程内容

  1. 1AI 提示词生成器:让模型帮你写出第一版提示词AI 提示词生成器能根据你的任务写出第一版提示词。本课讲 Anthropic 的 metaprompt 和 OpenAI 的 Generate 元提示词,以及怎样检查生成的结果。6 分钟
  2. 2怎样用 AI 改进提示词:OpenAI 的 optimizer 和 Anthropic 的 improver怎样用 AI 改进提示词:OpenAI 的 prompt optimizer 和 Anthropic 的 prompt improver 各做什么,OpenAI 自己的示例改了哪些地方,以及要检查什么。8 分钟
  3. 3怎样测试提示词:换版本之前,先用小型测试集比较怎样测试提示词:建一个小型测试集,用电子表格、Anthropic Console 或 promptfoo 把两个提示词版本各跑一遍,再读结果。6 分钟
  4. 4DSPy 教程:让代码和指标来优化你的提示词DSPy 入门教程:写签名、选模块、定义指标,再让 MIPROv2 这样的优化器自动改进你的提示词,每一步都附代码。10 分钟

常见问题

这门提示词优化课免费吗?

免费。每一课都可以免费阅读。课程里的部分工具,比如模型 API,可能按使用量收费,每一课都会写明在哪里。

什么是提示词优化?

就是有目的地改进提示词:由模型起草,由优化器改写,或者对照一个分数搜索更好的版本,换版本之前,你再把结果和旧版本比一比。

需要会写代码吗?

前两课不需要,在网页控制台或聊天窗口里就能完成,第 1 课另有一个 notebook 路线,要改几行代码。第 3 课有电子表格路线和终端路线,第 4 课是 Python 教程,如果你不写 Python,可以只读它的思路。

AI 优化过的提示词一定比原来的好吗?

不一定。OpenAI 的优化器指南说,优化后的提示词在某些具体输入上可能比你的原版表现更差。所以第 3 课要求换版本之前先测试。

学完这门课,接下来学什么?

下一门是上下文工程课。它把视野从单条提示词,放宽到 AI 智能体在每一步所看到的全部内容。

分享这门课

拿你的提示词和好用的提示词比一比

Mindket 上的技能是装着说明、示例和文件的文件夹。打开几个,看看作者怎样描述一项任务,再和你自己的提示词对照。

浏览技能

全部课程 · 全部文章