NishAi. Онлайн-курс по работе в нейросети для архитекторов и визуализаторов
Какие режимы работы есть в Invoke?
Представьте, что вы выполняете проект. Архитектура, дизайн, визуализация — не принципиально. Вы выдаете задание специалистам или его выдают вам.
Каким это ТЗ может быть?
Мы попробовали провести аналогию простых рабочих отношений со сценариями работы в нейросети:
Каким это ТЗ может быть?
Мы попробовали провести аналогию простых рабочих отношений со сценариями работы в нейросети:
Это ТЗ только на словах. Что должно быть в результате — загадка. В процессе что-то можно упустить или понять не так. Если повезет и вы давно работаете с клиентом, то может даже что-то получиться
Это ТЗ с референсами и эскизами. Вам дают детальную схему, какие-то наработки прошлого исполнителя и просят, следуя ей, сделать красоту. Иногда могут даже дополнить примерами других работ, чтобы вы не гадали со стилем. Уже больше шансов на успех, правда?
Это раунды правок... Клиент отмечает область на картинке и говорит, как подвинуть перегородку/переставить диван/поиграть со шрифтами. В очередной раз.
Это тоже раунд правок, но из оперы: "всё хорошо, всё нравится, но можно вот дорисовать справа кусочек. и слева. и еще справа."
Это когда вам быстро нужно всё переделать под крупноформатную печать для отдела маркетинга, потому что дедлайн был позавчера.
Как сценарии нейросети отражаются в режимах Invoke?
В интерфейсе Invoke (панель слева) отражены все доступные режимы.
Для версии Invoke 4.2.9 это:
Первые два режима — txt2img и img2img — отвечают одноименным сценариям, суть которых мы уже описали выше, а вот unified canvas как раз включает в себя сценарии inpainting-а, outpainting-a, в свою очередь сценарий upscale обеспечивается комбинацией режимов
В интерфейсе Invoke (панель слева) отражены все доступные режимы.
Для версии Invoke 4.2.9 это:
- Text to image
- Image to image
- Unified canvas
- Workflow editor (нодовый редактор)
Первые два режима — txt2img и img2img — отвечают одноименным сценариям, суть которых мы уже описали выше, а вот unified canvas как раз включает в себя сценарии inpainting-а, outpainting-a, в свою очередь сценарий upscale обеспечивается комбинацией режимов
Подробнее о Unified Canvas
📌 Unified Canvas (UС) — это один из интерфейсов Invoke.AI, который позволяет редактировать изображение в режиме, схожем с видом привычного нам графического редактора.
Основные инструменты — это рамка и кисть. Работа происходит в свободном поле.
🖼 Рамка обозначает область, которую нейросеть при обработке воспринимает в качестве контекста. Поэтому важно захватывать исчерпывающий участок изображения вокруг редактируемого объекта, однако, при этом фрейм не должен быть слишком крупным, чтобы не понижать скорость генерации.
🖌 Кисть позволяет сделать две вещи: в режиме base — эскизно отрисовать желаемый объект (фигуру человека, силуэт куста, автомобиль, гриб, табуретку, пачку денег...), в режиме mask кисть непосредственно выделяет точную область генерации.
📌 Unified Canvas (UС) — это один из интерфейсов Invoke.AI, который позволяет редактировать изображение в режиме, схожем с видом привычного нам графического редактора.
Основные инструменты — это рамка и кисть. Работа происходит в свободном поле.
🖼 Рамка обозначает область, которую нейросеть при обработке воспринимает в качестве контекста. Поэтому важно захватывать исчерпывающий участок изображения вокруг редактируемого объекта, однако, при этом фрейм не должен быть слишком крупным, чтобы не понижать скорость генерации.
🖌 Кисть позволяет сделать две вещи: в режиме base — эскизно отрисовать желаемый объект (фигуру человека, силуэт куста, автомобиль, гриб, табуретку, пачку денег...), в режиме mask кисть непосредственно выделяет точную область генерации.
Интерфейс unified canvas
📌 Лайфхак, который знатно экономит время при работе в Unified Canvas, — комбинация клавиш Shift+C полностью очищает изображение от выделения маской, если что-то пошло не так
О работе в unified canvas рассказываем в одном из эфиров по доработке визуализации в нейросети. Хочется разобраться детальнее в работе режима?
Больше — в официальной документации Invoke
Workflow editor (нодовый редактор)
📌 Нодовая система — это механизм организации иерархии объектов. Он позволяет создавать и соединять между собой различные функции, свойства и сценарии нейросети Это развитый алгоритм, связывающий все возможности Invoke в единую систему.
Зачем нужна нодовая система?
На наш взгляд — это отличный инструмент автоматизации процессов (иногда хаотичных), которые выполняются в нейросети.
С нодами составной пайплайн перестает требовать вашего участия, а производится "самостоятельно"!