ART.IS.YOU / ИССЛЕДОВАТЕЛЬСКОЕ ЭССЕ / 01

Что меняет перевод изображения в текст

Машинное описание кажется промежуточным этапом между оригиналом и новой картинкой. Но именно в этом промежутке система выбирает, какие признаки произведения станут словами, а какие исчезнут из следующей инструкции.

Описание — уже решение

Перед картиной можно задержаться и не знать, что в ней главное. Текст устроен иначе: чтобы назвать изображение, приходится выбрать порядок, предмет и признак. Одна фраза выдвигает цвет на первый план, другая — фигуру, третья — предполагаемый сюжет. Ни одна не равна изображению целиком.

Когда описание составляет модель, этот выбор обычно выглядит как техническая операция. Затем текст передают другой системе как задание для генерации. То, что было одним из возможных прочтений, становится условием следующего изображения. Поэтому вопрос об обратном промпте касается не только сходства оригинала и результата. Он касается того, кто и на каком этапе определил, что считать существенным.

Что позволяет увидеть эксперимент

В исследовании «Обратный промпт» сравниваются оригинальная работа, её машинное описание и изображение, полученное после нового промпта. В корпусе — 13 произведений и 26 попыток генерации: 23 завершились изображением, три были прерваны. Статус попытки здесь отделён от интерпретации результата. Прерванная генерация не доказывает, что одна система «лучше» или «хуже» другой.

Важное условие протокола: системы, которым передают промпт для реконструкции, не видят оригинал. Они получают текст, уже прошедший через чужой выбор. Если в описании не названа фактура, следующая система не может восстановить именно её по памяти об исходной работе. Она создаёт возможное изображение из той информации, которая дошла до неё, и из собственных закономерностей генерации.

Потеря и добавление происходят одновременно

Такой перевод удобно рассматривать в двух направлениях. Сначала стоит спросить, что осталось без слов: масштаб, неоднозначная форма, отношение деталей, которое сложно сжать в одну фразу. Затем — что появилось в тексте сверх увиденного: название предмета, жанр, эмоциональный тон, уверенность в том, что перед нами именно этот сюжет.

Это не список «ошибок модели» в школьном смысле. Человеческое описание тоже выбирает и достраивает. Разница в том, что машинный текст легко принять за прозрачную передачу данных, особенно когда он становится входом для следующего инструмента. В этот момент интерпретация прячется внутри рабочего процесса.

Где возникает авторство

Автор оригинала создал произведение. Исследователь выбирает условия эксперимента и решает, какие версии сопоставить. Модель предлагает словесное прочтение, а генеративная система строит новое изображение по полученной инструкции. Эти действия не равнозначны и не складываются в одного «соавтора». Но все они оставляют след в результате.

Поэтому для «Обратного промпта» существенен архив переходов: оригинал, экфрасис, промпт, ответ системы и отметка о том, завершилась ли попытка. Финальное изображение без этой цепочки легко принять за самостоятельную иллюстрацию. С цепочкой становится виден механизм, который изменил произведение по дороге.

Машинное описание оказывается новым культурным материалом. Оно не заменяет взгляд на работу, но показывает, что происходит, когда один способ видеть становится инструкцией для другого. Именно между этими двумя действиями возникает вопрос о пределах перевода — и о нашем праве не принимать его за нейтральный.

Материалы исследования