May 04, 2024
Adobe Firefly представляет ИИ-вау
Преобразование текста в изображение на основе искусственного интеллекта не заменит людей в ближайшее время. 2023 год — это год, когда искусственный интеллект стал мейнстримом, начиная с ChatGPT и его, казалось бы, сверхъестественной способности думать и общаться, как человек, для обработки изображений.
Преобразование текста в изображение на основе искусственного интеллекта не заменит людей в ближайшее время
2023 год — это год, когда искусственный интеллект стал мейнстримом: от ChatGPT и его, казалось бы, сверхъестественной способности думать и общаться, как человек, до генераторов изображений, способных создавать произведения искусства из простой инструкции.
Мы уже сравнивали лучшие художественные генераторы искусственного интеллекта друг с другом и экспериментировали с новой функцией «Генераторная заливка» в последней бета-версии Photoshop, которая позволяет пользователям редактировать, добавлять и расширять изображения с помощью всего лишь пары письменных команд.
Недавно я пробовал еще один продукт Adobe AI — Firefly. Вместо того, чтобы быть встроенным в Photoshop, Firefly живет в сети на веб-сайте Adobe Firefly, и вы можете использовать его в своем браузере. Как и Generative Fill, он все еще находится в бета-форме и в настоящее время включает в себя четыре инструмента, с которыми пользователи могут экспериментировать, плюс еще восемь, над которыми Adobe все еще работает, прежде чем выпустить их для широкой публики.
Сейчас доступны такие функции, как «Генераторное перекрашивание», которое генерирует цветовые вариации векторных изображений на основе подробного текстового описания, «Текстовые эффекты», которые применяют стили и текстуры к тексту с помощью письменных подсказок, и вышеупомянутую «Генераторную заливку». Но самый интересный и впечатляющий инструмент Firefly — это Text To Image. В отличие от других, здесь вы начинаете с чистого холста, и вам предлагается сообщить ИИ Adobe, что вы хотите создать.
Поскольку пустой холст может напугать, Adobe заполняет ваш экран примерами для вдохновения, а также текстовыми подсказками, используемыми для их создания. Я начинаю с представления, как мог бы выглядеть офис с более красивым видом, чем стена моей спальни. «Офис в деревянном домике на дереве с видом на лес» — вот что приходит мне в голову в первую очередь, и я нажимаю «Создать».
Firefly использует мощность серверов Adobe вместо вашего компьютера, и всего через несколько секунд мне представлены четыре изображения того, как мог бы выглядеть офис моей мечты на верхушке дерева. Это один из тех «вау» моментов, в которых современный ИИ так хорош. Я внес очень небольшой вклад, это совсем не заняло времени, а результаты удивительно близки к тому, что я себе представлял.
Но есть ограничения. Есть четыре варианта «типа контента» — «Нет», «Фото», «Графика» и «Искусство» — и по умолчанию для последнего используется Firefly, я подозреваю, потому что художественный рисунок по вашей письменной команде легче создать, чем фотореалистичный. Я нажимаю кнопку «Фото» и жду, пока Firefly сделает свое дело.
На этот раз результаты более реалистичны и на первый взгляд выглядят великолепно. Но присмотритесь повнимательнее, и вы увидите явные ошибки; например, на одном изображении офисный стул с шестью ножками, напоминающими корни деревьев, а на другом — пустой белый квадрат вместо монитора компьютера.
Однако, к чести Firefly, я попросил только офис и не упомянул компьютер, стол или стул – Firefly разобралась с этим сама.
Затем я корректирую свою команду, чтобы включить больше деталей: «Офис в деревянном домике на дереве с видом на лес, с умным столом, компьютером и дровяной печью в углу комнаты».
Результаты впечатляют. Все они содержат предметы, которые я просил, освещение и тени в основном выглядят точными, и Firefly применила некоторую инициативу, чтобы добавить полки, настольные растения и светильники. Все, что мне сейчас нужно в офисе моей мечты, — это собака, поэтому я прошу, чтобы одна спала на коврике.
Любителям собак, вероятно, стоит сейчас отвернуться, потому что результаты странные.
Firefly в основном правильно установил ковер, но затем устроил настоящий беспорядок, добавив в сцену собаку. Он также удалил программу записи журналов из некоторых изображений и сделал с компьютером некоторые странные вещи. Настраиваю команду просить современный компьютер и собаку не спать. Ситуация улучшается, но создать реалистичную собаку по-прежнему сложно.
Как я и подозревал ранее, Firefly лучше рисует, чем создает фотореалистичные изображения. Я переключаю тип контента на Искусство, и результаты сразу улучшаются. Вся сцена выглядит более целостной, а собаки немного улучшены, хотя меня позабавило то, что на одном изображении Светлячок поджег монитор компьютера вместо того, чтобы установить горелку для дров.