Как заставить ИИ проверять самого себя: метод встраивания самопроверки в промпт
Ключевые факты
- 1 ИИ нуждается в четких критериях оценки результата для качественного выполнения задач.
- 2 Встраивание самопроверки в промпт позволяет ИИ самостоятельно улучшать свои ответы.
- 3 ChatGPT может давать неточные сравнения документов без детальных пошаговых инструкций.
- 4 Визуальная оценка и пошаговые инструкции помогают ИИ достичь нужного результата, например, при сохранении верстки.
- 5 Метод самопроверки применим как для ИИ, так и для постановки задач сотрудникам.
В посте описывается, как можно значительно улучшить качество работы искусственного интеллекта, если встроить в промпт механизмы самопроверки. Приводится пример с ChatGPT, который изначально не смог точно сравнить два скана договора, пропустив важный пункт. Проблема была решена путем детализации задачи: ИИ сначала попросили найти каждый пункт и приложение, а затем сравнить их попарно, что позволило обнаружить недостающий элемент. Второй пример касается использования Codex для конвертации PDF в редактируемый файл с сохранением верстки. Изначально результаты были неудовлетворительными, но после добавления в промпт задачи по созданию постраничных превью для исходного PDF и полученного DOCX, а также визуальной оценки отличий, Codex смог значительно улучшить результат. Этот подход аналогичен постановке задачи сотруднику, когда ему даются четкие критерии качественного выполнения работы и способы ее проверки.