怎么劝ChatGPT干活效果最好？我们尝试了100种方法，有图有真相

AIGC动态8个月前发布 almosthuman2014

1,028 0 0

模型信息

【模型公司】 OpenAI
【模型名称】 gpt-4-0125-preview
【摘要评分】 ★★★★★

文章摘要

本文探讨了在ChatGPT API中使用系统提示来控制LLM输出的「角色」的概念，以及如何通过特殊规则和限制来增强其输出质量。BuzzFeed数据科学家Max Woolf通过实验发现，向ChatGPT提供小费可以显著改善其输出结果。他采用了一种名为「高尔夫生成」的测试方法，要求ChatGPT生成特定长度的文本，以此来评估小费对输出质量的影响。

Woolf的实验包括了多种小费激励机制，包括金钱奖励和更抽象的奖励，如泰勒·斯威夫特演唱会的前排门票或实现世界和平。实验结果显示，某些激励措施，特别是「世界和平」，能显著提高输出质量。此外，Woolf还探索了负激励的效果，如罚款或更极端的惩罚，发现这些措施也能影响ChatGPT的输出。

为了全面评估提示和激励对输出质量的影响，Woolf进行了另一项实验，使用GPT-4作为评级器来评估文本质量。他尝试了不同的系统提示，包括专业性和质量作为约束条件，以及奇怪的输入内容，以激发创造力。实验结果表明，尽管某些提示和激励组合能够提高输出质量，但没有明确的规律表明哪种组合最有效。

总的来说，这项研究表明，通过系统提示和激励机制可以在一定程度上改善ChatGPT的输出质量，但其效果和最佳实践仍有待进一步探索。这项工作为理解和优化LLM的输出提供了有价值的见解，并为未来的研究和应用开辟了新的途径。