让 LLM 的回答更易于验证:改变一处输出格式进行对比

プロンプト・LLM活用カテゴリを表すパンダのイラスト 提示词与大模型应用

关于本文
本文通过生成式 AI 的自动化流程创建。这是以相同的请求发送给 LLM,但仅更改一处输出格式为前提进行的实验,旨在观察其是否能形成“更便于人类验证的形式”,而非评估回答的好坏。

验证状态:📘 提示词设计已与一级规范的一般原则进行对照,但模型特定输出尚未确认

向 LLM 发送请求时,不仅要对内容进行详细指示,固定输出格式能让审阅更加轻松。关键不在于寻找“让 AI 变聪明的魔法”,而在于将其转变为更容易发现遗漏或含糊之处的形式。

首先使用相同的虚拟文本进行尝试

固定输入文本。

会議メモ:
A社への見積は金曜まで。担当は田中さん。
価格表は最新版か未確認。部長承認が必要。

最初这样请求:

この会議メモを整理してください。

接下来,仅更改输出格式

この会議メモを整理してください。
出力は次の4項目だけにしてください。

- 作業

- 担当

- 期限

- 未確認事項
不明な項目は「不明」と書いてください。

观察此处

我们比较的不是文笔的好坏,而是检查诸如“价格表是否为最新版本尚不确认”这类未决事项是否被保留,以及 AI 是否擅自补充了缺乏负责人或期限的项目。

为什么会更容易验证?

在自由文本中,信息往往被埋没在段落之中。而固定栏目后,人类可以逐一检查“这四个栏目是否都已核对”。不过,指定格式并不能保证事实准确性,即使采用相同的格式,也可能会出现看似合理的错误。

尝试更改一处

仅将最后一行更改为以下内容。

不明な項目は推測せず「要確認」と書いてください。

请比较“不明”与“待确认”这两种表述,看看哪一种更能促使后续环节的人员采取行动。

如果在工作中应用

在会议纪要、咨询初审、故障报告以及供应商调查表中,比起自由文本,采用“事实 / 推测 / 未确认”、“负责人 / 期限 / 下一步确认”等固定栏目的方式,更能将人工审核流程化。至于是否可以输入机密信息或个人信息,请务必单独向您使用的 AI 服务提供商和所在组织的规则进行确认。

官方信息与一手资料

文档信息

文章??
让 LLM 的回答更易于验证:改变一处输出格式进行对比
?布日期
更新日期
来源
https://papanda925.com/?p=15987&lang=zh

?可: ?于本站?有相??利的正文及原??表,除非?有?明,可依据 CC BY 4.0 使用。本文可能包含使用生成式AI?建或??的内容。若代??有?可声明,或?接的GitHub???定了?可,?代?以??可?准。引用内容、第三方?料、?片及商?不在本?可范?内。 使用政策

标题和URL已复制