Идеальные задачи для нейросети: как выбрать первую
Отдели небольшую задачу с понятной проверкой от большого решения. Разбираем на примере мастерской, что поручить нейросети и как проверить результат по исходнику.
Андрей
Преподаватель, научный редактор
6 мин чтения
Перед занятием в швейной мастерской на столе лежат заметки. В синем рулоне осталось два метра ткани. Серую ткань обещали привезти в четверг, точное количество неизвестно. Ещё у коробки молний сломан замок. Из этих записей удобно собрать таблицу. Но если одним запросом попросить расписать заказы, модель может принять обещанную ткань за имеющуюся. Идеальные задачи для нейросети видны по способу проверки. С таблицей достаточно положить рядом заметки. Для решения о заказе сначала нужен ответ человека, который встретит поставщика.
Назови результат до того, как откроешь чат
Хорошее поручение начинается с фразы о предмете, который должен появиться. В мастерской это таблица по трём запискам, по одной строке о ткани или коробке. У каждой строки есть исходная запись, ожидаемые столбцы и понятный статус. Если модель напишет «серой ткани два метра», ошибка видна сразу. Можно потребовать исправить одну строку, остальные при этом останутся пригодными.
Под словами «разберись, что заказать» скрываются разные операции. Можно навести порядок в учёте, найти пробелы, оценить нужды каждой группы и принять решение о покупке. С виду это одна просьба. Но первые две операции дают результат, который можно приложить к запискам, а для следующих должны существовать список запланированных работ и лимит на закупку. Тот, кто отвечает за заказ, сможет учесть ещё и состояние ткани. При пятне в середине рулона два метра перестают означать два пригодных отреза.
Представь день, когда поставщик подтвердил срок утром, а к вечеру перенёс доставку. Если в выданной таблице есть столбец «основание», одну строку можно обновить со ссылкой на новое сообщение и не трогать остатки. Если ответ сразу превратился в готовый план заказов, нужно ещё искать, какие действия зависели от срока. Чем длиннее эта цепочка, тем разумнее остановить поручение на промежуточном результате, который команда может исправить сама.
Прежде чем выбирать задачу, проговори четыре вещи.
Укажи конкретные записи, документ или сообщения, из которых можно извлечь ответ.
Результат. Назови форму, которую сможешь открыть и использовать сразу после ответа.
Проверка. Скажи, по каким двум или трём признакам отличишь годную строку от ошибочной.
Цена ошибки. Опиши, что успеет произойти между ответом модели и твоим просмотром. Положить файл в черновики и оплатить поставку стоят разных ошибок.
Для учебного упражнения принцип тот же. В разборе задач для нейросети можно посмотреть пример из другой сферы. Здесь мы тренируемся выбирать границу поручения внутри обычной рабочей ситуации.
Одна просьба распадается на три результата
Рассмотрим ту же работу от записки до закупки. Ниже условные данные, записанные специально для примера. Подумай, где для решения требуется выйти за их пределы.
Действие · Что выйдет на экран · Как принять
Собрать остатки — Строки по имеющимся, ожидаемым и спорным позициям — Для каждого статуса найти опору в одной из заметок
Подготовить уточнения — Вопросы про серую ткань и состояние коробки — Убедиться, что ответы изменят дальнейшее решение
Назначить покупку — Количество, срок, сумма заказа — Сверить планы занятий, расход и обязательства поставщика
У последнего действия тоже бывают проверяемые части. Например, после звонка тебе сообщили подтверждённый метраж, а список занятий уже составлен. Тогда можно попросить пересчитать обязательные отрезы по утверждённым размерам. Единицы измерения, метраж на изделие и запас должны быть заданы явно. Даже простой расчёт проверь по одному занятому столу и по общей сумме. У тебя появится хороший тест именно потому, что граница поручения сдвинулась после получения данных.
Уточнение про коробку требует своей развилки. Записка говорит о замке коробки. Из неё нельзя вывести, что молнии внутри сломаны. Для таблицы это замечание о таре и пустое поле состояния содержимого. Такой мелкий пропуск часто замечают только при пересчёте. Если задача возвращает основания для каждой строки, увидишь его ещё до того, как кто-то выбросит коробку.
Отдай на пробу три записи
Открой чат в LibraChat и попробуй на отдельных записках. В готовом запросе ниже три источника раскладываются по одному правилу.
Собери черновик учёта для швейной мастерской. Верни таблицу с колонками «позиция», «статус», «количество», «основание», «уточнить». В статусе используй «есть», «ожидается» или «нужен осмотр». В основании процитируй кусок записки. При нехватке сведений оставь нужное поле пустым и задай один вопрос. К составлению заказа пока не переходи.
А. В синем рулоне осталось два метра ткани. Б. Серую ткань обещали привезти в четверг, точное количество неизвестно. В. У коробки молний сломан замок.
Я бы принял для серой ткани строку со статусом «ожидается», пустым количеством и вопросом о метраже. У синего рулона ожидаю «2 м» и подтверждение из А. В третьей строке должно быть ясно, к чему относится «сломан»: осмотра требует коробка, а состояние содержимого пока неизвестно. Это заранее написанный ключ для сверки, его удобно держать рядом с результатом.
Если ответ дважды дал сбой на одном поле, проверь, можно ли изменить саму постановку. Например, «состояние» для коробки и молний слишком общее слово. Раздели его на «состояние тары» и «состояние содержимого», а потом запусти те же три записи. При этом не прячь пустые клетки, иначе получишь аккуратный учёт, в котором пробелы нельзя найти взглядом.
Реши, захочется ли повторить
После первого ответа обычно понятно, сколько операций на самом деле выполняет человек. Может оказаться, что таблица для трёх записок быстрее собирается руками. Но у еженедельного поступления из тридцати записок ценность другая. Ты увидишь, стало ли проще обновлять один и тот же учёт. Если нужен регулярный доступ для таких задач, стоит заранее посмотреть условия доступа к LibraChat и сравнить их со своей частотой работы.
Проведи короткую проверку на двух похожих партиях записей.
Первую разложи вручную и запиши время до пригодного результата.
Вторую отдай модели. Время отсчитывай до окончания ручной проверки, включая исправления.
Поставь отметку возле ошибки, которая осталась бы незамеченной без чтения оригинала.
Оставь в регулярной работе ту часть, которая экономит время при том же уровне проверки.
Через неделю можешь снова расширить поручение, если накопились подтверждённые шаблонные данные. Начни сегодня с действия, где уже есть исходники, а нужный результат помещается на один экран. Запиши в блокноте один признак брака до отправки запроса. Если при виде ответа можешь показать пальцем, где этот признак нарушен, у тебя получилась задача, с которой стоит работать дальше.