良好的系统提示背后的无聊但至关重要的秘密是测试驱动开发。您不会写下系统提示并找到测试它的方法。您写下测试并找到通过测试的系统提示。
对于系统提示符 (SP) 开发，您：
- 在模型失败的地方（即默认行为不是您想要的）编写一组测试消息
- 找到一个能让这些测试通过的 SP
- 查找 SP 被错误应用的邮件并修复 SP
- 扩展您的测试集并重复
标签：提示工程、评估、生成人工智能、人工智能、 LLMS 、阿曼达-阿斯克尔
原文： https://simonwillison.net/2024/Dec/10/amanda-askell/#atom-everything