Чат, который работает с фото: нейросеть сверяет детали
Как нейросеть работает с фото в чате. На двух ракурсах подставки для планшета покажу, как отделить видимые детали от догадок и выбрать третий снимок.
Евгений
Дизайнер-партнёр LibraChat
8 мин чтения
На одном снимке край подставки для планшета выглядит сплошным. На другом в том же месте видна тёмная щель. Я собирал фотографии для короткой памятки и сначала принял щель за второй паз. Чат, который работает с фото, здесь нужен для сверки двух кадров: нейросеть может помочь перечислить видимые детали и привязать ответ к снимку. Решение, что находится в тени, я приму, когда увижу этот участок отдельно.
Подставка у меня из светлой фанеры. Планшет лежит на переднем выступе, сзади его поддерживает наклонная планка. Я сделал два снимка. Утром попытался по ним расписать, в каком порядке передать детали коллеге. Через семь строк заметок я понял, что пересказываю привычный способ сборки, а по фотографиям вижу только часть соединения. Пришлось вернуться к столу.
Утром два кадра расходятся на одной щели
Первое фото я назвал «вид спереди». На нём хорошо различаются основание и передний упор. Снял немного сверху: тогда можно увидеть плоскость, на которую ставится планшет. Боковой снимок показывает то, что закрывал упор, и наклон планки. Подписал их буквами. Так при разборе проще вспомнить, где именно видел линию.
На снимке Б под планкой есть тёмная полоска. Я поставил телефон примерно на высоту стола и заметил, что край основания закрывает нижнюю часть соединения. Из того же положения не видно, входит ли планка в дерево или просто упирается в него. Раньше я бы сначала описал деталь красивым техническим термином. Тут я записал бы «тёмная линия под планкой». Это начало проверки. Название соединения появится, когда его удастся рассмотреть.
В заметках у меня три строки для таких случаев:
Фото А: край переднего упора полностью влезает в кадр. Его длина относительно всей фотографии не даёт размера в сантиметрах.
Фото Б: планка наклонена и касается области у заднего края. Точка крепления местами скрыта.
Уточнение: нужна фотография нижней части с другой стороны. Тень на боковом снимке может приходиться на выступ или на углубление.
Когда делал первый черновик инструкции, я проверил простой приём. Положил обе фотографии рядом и попросил коллегу указать на них одну и ту же планку. Он выбрал два разных места. Светлая насечка на торце, которую я принимал за очевидный ориентир, видна только сбоку. На подставку пошёл кусок малярной ленты, чуть выше спорного участка. Если подставку надо снять ещё раз, лента видна в обоих ракурсах. По ней легко сопоставить стороны.
На две подписи и эту отметку у меня ушло 3 минуты. Они пригодились ещё и для черновой последовательности сборки. На фото А видно, что упор уже закреплён на основании. Можно записать состояние: «упор стоит». Шаг «сначала закрепить упор» из этого не следует. Мастер мог поставить его после планки. Я переписал две строки памятки как описания готовых положений и оставил порядок сборки на проверку по деталям.
Днём нейросеть разбирает кадры в чате, который работает с фото
Моя заметка должна остаться рядом с двумя исходными кадрами. Для неё полезно сначала задать вопрос к одному снимку и точно обозначить область. Мне нужно ещё сопоставить видимые части одной подставки. На компьютере переношу в чат кадр А из папки с подставкой. Когда снимаю на телефон, беру нужный ракурс из галереи через «Фото или изображение» в меню «+».
Рядом со снимками я указал бы большими буквами, какое фото считаю первым и что на нём в центре. Если отправляешь кадры по одному, подпиши каждый прямо в сопроводительном сообщении. Так ссылка на фото Б не превратится в догадку о порядке загрузки. Затем сформулируй просьбу так, чтобы описание можно было перепроверить.
Разбери два моих фото одной подставки для планшета. Фото А снято спереди немного сверху, фото Б снято сбоку на высоте стола. Назови видимые крупные детали и укажи для каждой букву снимка и соседний ориентир. Отдельно опиши место под наклонной планкой на фото Б. Собери ответ в три части: что различимо на снимках, какие выводы остаются предположениями и какой следующий ракурс помог бы проверить соединение. Вид крепежа и размеры оставь неизвестными, если они не показаны явно. Дай ответ текстом.
Для начала я оставляю два ракурса. Начала двух линий могут путаться даже на моём столе, когда я перелистываю миниатюры. Лучше оставить кадр со всей подставкой и один, в котором действительно виден тёмный участок. Общие возможности работы с файлами указаны на странице тарифов LibraChat. Для работы с обычными снимками я в первую очередь проверяю, приложилось ли нужное фото, и смотрю на его миниатюру до отправки.
В заметках я заранее выбрал сторону отсчёта. «Справа на А» значит справа для того, кто смотрит на снимок. У самой детали может быть своё условное «право» по инструкции, но оно не должно подменять координаты на кадре. Особенно заметно это в профиль. Там задний торец справа, а на виде сверху он сверху. Синяя отметка остаётся удобнее обоих слов.
Между кадрами ищу место, на которое можно указать
Мне удобно разобрать заметку в обратном порядке. Читаю утверждение, выбираю названный кадр и пытаюсь показать пальцем на деталь. В моей подставке выступ впереди виден и сверху, и сбоку. Тёмную линию могу показать только на фото Б. Сколько деталей соединено в этом месте, я глазами пока не различаю. Такой ответ можно оставить в памятке как задачу на досъёмку.
Как записать наблюдение · Как проверяю · Что делать дальше
«Передний выступ виден на А слева от отметки» — Открываю А и ищу подписанное место — Можно подписать выступ на фотографии
«Под опорой на Б проходит тёмная линия» — Увеличиваю Б, сверяю начало линии с торцом планки — Снимаю соединение снизу под мягким светом
«Это сквозной паз» — Проверяю, видно ли его с обратной стороны — Оставляю как версию до осмотра
«Глубина паза такая-то» — Ищу настоящий замер, записанный у предмета — Измеряю физическую деталь перед внесением числа
Таблицу можно заполнять удобными названиями. Я написал бы «наклонная дощечка» в черновике. Если хозяин макета называет её задней опорой, можно заменить во всех строках сразу. Но сначала пробую найти предмет глазами. Фраза «задняя опора» теряет смысл, если кто-то держит подставку задом наперёд и читатель пытается найти опору по сторонам, записанным для другого ракурса.
Вместо короткого «на обоих так же» я решил повторить ориентир в каждой строке. Например, «на А выше кромки основания, на Б за полоской ленты». Сходство становится проверяемым. Когда деталь нашлась только с одной стороны, это тоже годится для заметки: «вид сверху закрывает край». Так в просьбе о новом кадре появляется конкретная цель. Фраза «нужно больше фото» оставит человека гадать, что он ещё не показал.
К вечеру понадобилось снять только низ подставки
Чтобы проверить щель, я приподнял пустую подставку и направил свет сбоку. Сначала снял её полностью с видимой отметкой. Затем сделал крупный кадр сразу за ней. На нём мне уже было понятно, откуда начинать смотреть. Можно оставить рядом фотографии А и Б, но новый снимок должен отвечать на один открытый вопрос.
Я попробовал сдвинуть свет, сохранив положение телефона. Тёмная линия рядом с планкой сместилась. При осмотре снизу оказалось, что в этом месте проходит тень от торца, а волокна фанеры за ней продолжаются. Второй паз из памятки убрал. В таблице оставил ссылку на кадр, где под планкой виден сплошной край. Для коллеги теперь есть понятный способ сверить этот вывод.
Запиши, какая часть остаётся скрытой. В моём случае это место контакта под планкой.
Поверни предмет так, чтобы линия соединения не закрывалась собственным краем. Оставь тот же заметный ориентир в кадре.
Добавь новый кадр с отдельной буквой. Попроси сверить только прежнюю неопределённость. При сомнении посмотри на предмет без камеры.
Открой чат LibraChat и попробуй на двух своих ракурсах составить такую сверку. Выбери деталь, на которой можно ошибиться: проём, крепление или краешек второй детали за первой. Получив заметки, открой снимок по названной букве и укажи на тот же участок. Без этого движения я не стал бы подписывать паз в памятке.