NishAi. Онлайн-курс по работе в нейросети для архитекторов и визуализаторов
Какие режимы работы есть в Invoke?
Представьте, что вы выполняете проект. Архитектура, дизайн, визуализация — не принципиально. Вы выдаете задание специалистам или его выдают вам.

Каким это ТЗ может быть?

Мы попробовали провести аналогию простых рабочих отношений со сценариями работы в нейросети:

Это ТЗ только на словах. Что должно быть в результате — загадка. В процессе что-то можно упустить или понять не так. Если повезет и вы давно работаете с клиентом, то может даже что-то получиться
Как сценарии нейросети отражаются в режимах Invoke?

В интерфейсе Invoke (панель слева) отражены все доступные режимы.

Для версии Invoke 4.2.9 это:
  • Text to image
  • Image to image
  • Unified canvas
  • Workflow editor (нодовый редактор)
От версии к версии упаковка режимов может варьироваться, однако суть остается.

Первые два режима — txt2img и img2img — отвечают одноименным сценариям, суть которых мы уже описали выше, а вот unified canvas как раз включает в себя сценарии inpainting-а, outpainting-a, в свою очередь сценарий upscale обеспечивается комбинацией режимов
Подробнее о Unified Canvas

📌 Unified Canvas (UС) — это один из интерфейсов Invoke.AI, который позволяет редактировать изображение в режиме, схожем с видом привычного нам графического редактора.

Основные инструменты — это рамка и кисть. Работа происходит в свободном поле.

🖼 Рамка обозначает область, которую нейросеть при обработке воспринимает в качестве контекста. Поэтому важно захватывать исчерпывающий участок изображения вокруг редактируемого объекта, однако, при этом фрейм не должен быть слишком крупным, чтобы не понижать скорость генерации.

🖌 Кисть позволяет сделать две вещи: в режиме base — эскизно отрисовать желаемый объект (фигуру человека, силуэт куста, автомобиль, гриб, табуретку, пачку денег...), в режиме mask кисть непосредственно выделяет точную область генерации.


Интерфейс unified canvas

📌 Лайфхак, который знатно экономит время при работе в Unified Canvas, — комбинация клавиш Shift+C полностью очищает изображение от выделения маской, если что-то пошло не так


О работе в unified canvas рассказываем в одном из эфиров по доработке визуализации в нейросети. Хочется разобраться детальнее в работе режима?
Больше — в официальной документации Invoke


Workflow editor (нодовый редактор)

📌 Нодовая система — это механизм организации иерархии объектов. Он позволяет создавать и соединять между собой различные функции, свойства и сценарии нейросети Это развитый алгоритм, связывающий все возможности Invoke в единую систему.

Зачем нужна нодовая система?

На наш взгляд — это отличный инструмент автоматизации процессов (иногда хаотичных), которые выполняются в нейросети.

С нодами составной пайплайн перестает требовать вашего участия, а производится "самостоятельно"!