Лучший чат с нейросетью: четыре проверки важнее названия
Лучший нейросеть чат узнаётся по разговору: переспрашивает ли, помнит ли начало, читает ли файлы, легко ли найти старый чат. Проверка на настоящем примере.
Д
Денис
Продакт LibraChat
6 мин чтения
Один и тот же вопрос про ужин на шестерых я задал чату дважды. В первый раз попросил сначала задать вопросы, и чат спросил, едят ли мои гости рыбу и яйца. Во второй раз не попросил и получил «полностью вегетарианское» ризотто с пармезаном, который строгие вегетарианцы не едят.
По запросу «лучший нейросеть чат» обычно находятся подборки названий. А лучший чат с нейросетью узнаётся иначе: по разговору, а не по названию. Переспрашивает ли он, помнит ли начало беседы, читает ли твои файлы и фото, легко ли найти вчерашний чат. Начни с первой: для неё нужен один запрос, он ниже целиком.
Лучший чат с нейросетью сначала переспрашивает
Хороший собеседник не бросается отвечать, пока не понял задачу. Проверить это просто: добавь в запрос просьбу сначала спросить, чего не хватает. Вот мой запрос целиком:
Помоги спланировать ужин на шестерых в субботу: двое не едят мясо, у одного аллергия на орехи, готовить буду сам и не дольше двух часов. Если для хорошего ответа чего-то не хватает, сначала задай мне вопросы, а меню предлагай потом.
Повод и ограничения замени своими, а последнюю фразу оставь как есть. Попробовать можно в LibraChat или в любом чате, который ты сейчас выбираешь: запрос подходит для любого чата, а ответы ниже получены в LibraChat.
Меню не пришло, пришли вопросы. Первый попал точно в слабое место моего запроса:
Двое не едят мясо — это вегетарианцы, веганы или просто без мяса, но рыба/морепродукты/яйца/молочка можно?
Я ведь правда не уточнил. «Не едят мясо» можно понять тремя способами, и от этого зависит всё меню. Второй вопрос тоже по делу:
Есть ли другие аллергии, непереносимости или сильные dislikes (острые, чеснок, определённые овощи и т.д.)?
Английское слово посреди русского текста — мелкий огрех, но смысл верный: про аллергию на орехи я сказал, а про остальное нет.
Теперь контраст. Тот же запрос без последней фразы дал меню сразу. Среди продуктов был сыр:
100 г твёрдого сыра (пармезан или аналог)
И рядом уверенное заключение:
Ризотто полностью вегетарианское и без орехов.
Классический пармезан делают на сычужном ферменте, и строгие вегетарианцы его не едят. Чат додумал за меня, что гости вегетарианцы, и не заметил подвоха в составе. Спроси он сначала, кто именно не ест мясо, этой ошибки не было бы. Поэтому первая проверка у меня такая: переспрашивает ли чат, когда ты просишь, и не выдаёт ли догадку за факт, когда не просишь. Найди в ответе одно уверенное утверждение, которое можешь проверить сам, например «полностью вегетарианское» здесь.
Вторая проверка — на память. Чат отличается от поисковой строки тем, что с ним можно разговаривать. Ответь на его вопросы, получи меню и следующим сообщением напиши: «а теперь то же самое, но без грибов». Без повтора условий.
Смотри, что останется в новом ответе. Нет орехов, учтены гости без мяса, время в пределах двух часов — значит, чат держит разговор. Если орехи вдруг вернулись в рецепт, это плохой знак. На такой чат придётся каждый раз вываливать всё заново.
Длинный разговор — отдельная проверка. Через десяток сообщений напомни условие из самого начала, не повторяя его целиком: «как договаривались, без орехов». Учёл — хорошо. Переспросил, о чём речь, — значит, начало разговора уже потерялось.
Помнить он должен именно этот разговор. Другие чаты он обычно не видит, и это нормально: каждый разговор живёт сам по себе. Если нужен общий контекст на много бесед, ищи в чате проекты или похожую функцию, где можно один раз описать себя и свои правила.
Приложи файл или фото
Третья проверка — на твои материалы. Многие бытовые вопросы начинаются не с текста, а с фото или документа: квитанция, инструкция, чек из магазина, скриншот переписки. Хороший чат принимает такие вложения и отвечает по их содержимому, а не общими словами.
Проверить легко: сфотографируй полку холодильника и спроси, что приготовить из того, что видно. Если ответ называет продукты с фото, чат правда смотрит на картинку. Если пишет «возьмите курицу и рис», а у тебя их нет, — нет. Про ужин из остатков, кстати, есть отдельный разбор: рецепты из того, что есть в холодильнике.
С документами то же самое. Приложи инструкцию к технике и спроси, как включить нужный режим. Ответ должен опираться на текст инструкции. Если в нём модель, которой у тебя нет, чат документ не прочитал.
Заодно посмотри, какие форматы чат принимает и где. Таблицу, например, удобнее прикладывать с компьютера: в приложении LibraChat на телефоне такие файлы при выборе могут просто не отображаться. Такие мелочи лучше узнать на проверке, а не в день, когда квитанцию надо разобрать срочно.
Найди старый чат через неделю
Четвёртая проверка звучит скучно, но в быту она решает. Через неделю тебе понадобится то самое меню или тот разбор квитанции. Найдёшь ли ты его?
Посмотри, как устроена история: можно ли закрепить важный чат, переименовать его, найти поиском. Про LibraChat скажу как продакт: поиск по истории ищет по названиям чатов, а не по тексту сообщений. Поэтому важные разговоры стоит сразу переименовывать во что-то понятное, например «Ужин в субботу».
Пригодится и закрепление: меню на субботу и список покупок наверху списка не тонут среди остальных разговоров.
И последнее: открой тот же чат на телефоне. Если аккаунт один и переписка на месте, начатое за компьютером можно закончить в магазине со списком покупок.
Чек-лист: лучший чат с нейросетью проходит все четыре
Пройди проверки на одной своей задаче. Провал выглядит так:
попросил спросить, а пришло меню, или уверенная догадка выдана за факт;
в продолжении разговора вернулись орехи, о которых договорились в начале;
в ответе продукты, которых нет на твоём фото;
разговор не нашёлся поиском через неделю или не открылся на телефоне.
Три проверки укладываются в вечер, а четвёртую делаешь через неделю: поставь себе напоминание.
Чат, который прошёл все четыре, тебе подходит, сколько бы его ни ругали или ни хвалили в подборках. А если провалил первую, остальные можно не проверять: тот, кто не переспрашивает, будет додумывать за тебя.
Если чат не прошёл проверку
Не спеши его бросать после одного промаха. Сначала попробуй уточнить запрос: добавь условия, которые забыл, или прямо попроси задать вопросы, как в моём примере. Если и после этого чат додумывает за тебя и теряет условия, переходи к следующему и прогони его по тем же четырём пунктам на той же задаче. И помни, что ошибается даже лучший чат: всё, что уйдёт гостям на стол или людям в почту, проверяй сам. А начать можно сегодня: возьми ближайшую свою задачу, допиши к ней «сначала задай мне вопросы» и посмотри, что придёт.
лучший нейросеть чатбыт и личноевыбор нейросетичат-бот