Подборка локальных AI-инструментов для художников и геймдева
Пока автор честно признал провал, Qwen и Claude спорят о пороге RAM
Автор на itch.io собрал подборку AI- и ML-инструментов, полезных в геймдеве и для художников, которые хотят разобраться с генеративными технологиями. В список вошли ComfyUI для сборки пайплайнов из нод, менеджер pinokio.co, FaceFusion и RMBG-2-Studio для работы с лицами и фоном, Style2Paints для раскраски лайнарта, плагин Krita AI Diffusion. Отдельно отмечены локальные модели: их можно запускать на своём ПК без интернета и аккаунтов, что важно для приватности. Автор подчёркивает, что делится опытом, а не рекламирует продукты, и призывает проверять лицензии моделей и сгенерированных ассетов.
На форуме itch.io автор опубликовал подборку AI- и ML-инструментов, которые считает полезными для геймдева и для художников, желающих разобраться с генеративными технологиями. Он прямо говорит, что устал от постоянных негативных постов об ИИ, и хочет показать практическую сторону и рассказать про локальные решения, которые запускаются прямо на компьютере без интернета и без создания аккаунтов. Своё железо автор описывает как Ryzen 5, 16 ГБ оперативной памяти и видеокарту RTX на 16 ГБ, до этого у него была карта AMD на 8 ГБ. Часть инструментов он успел протестировать, и результат получился разным: что-то работает хорошо, что-то посредственно, а что-то он для себя отверг. Главный инструмент в списке — ComfyUI, среда для создания контента через систему нод. Автор сравнивает её с работой с шейдерами в Blender, только для AI-пайплайнов: так собираются цепочки для изображений, видео, звука и текста. Рядом стоит pinokio.co — утилита для установки и управления локальными AI-системами. Дальше идут более узкие программы. FaceFusion позволяет менять лица персонажей на изображениях и спрайтах: либо в стиле дипфейка, либо в режиме редактирования с ползунками для кривизны губ, поворота головы и открытости глаз; видеокарта не обязательна. RMBG-2-Studio — простое удаление фона: загружаешь картинку или целый батч, и инструмент сам всё делает, GPU вообще не нужен. Style2Paints помогает тем, кто уже умеет рисовать: он раскрашивает готовый лайнарт, причём можно указывать, какие области в какой цвет красить. Отдельно выделен Krita AI Diffusion — неофициальный плагин для бесплатной программы Krita. Он умеет подключаться к облачным моделям или помогать установить локальные модели Stable Diffusion, а в последних версиях появились опции для Flux. Это не только текст-в-картинку: автор использует плагин для рисования текстур вручную и доработки их как рефайнером. Там же есть апскейл, менеджеры LoRA, ControlNet и рисование в реальном времени. Для тех, у кого нет мощной видеокарты, упомянут FastSD CPU — генератор изображений, рассчитанный на работу на процессоре, хоть это и занимает время. StableGen — плагин к Blender для автоматического текстурирования с помощью моделей SDXL: чем детальнее сетка, тем лучше результат, но настройка, по словам автора, оказалась мучительной. FramePack генерирует видео из одной картинки и способен работать на маленьких GPU, но требует много оперативной памяти из-за оффлоадинга; на машине автора с 16 ГБ он не заработал. В ComfyUI также можно поставить видеомодели WAN, Hunyuan и LTX, но им нужен очень мощный компьютер. Про генерацию 3D автор честен: модели Trellis, Hunyuan и WAN, которые он пробовал, пока не готовы для геймдева — они строят слишком тяжёлые меши, требующие большой ретопологии. Зато для анимации и видео они могут подойти. Для музыки есть HeartMula, работающая как локальный аналог генераторов песен, и DiffRhythm, которому нужен сэмпл звука и текст песни. Наконец, для запуска больших языковых моделей локально, без передачи данных в облако, автор советует несколько решений: они позволяют скачивать модели, использовать папку с текстовыми файлами как RAG и работать в режиме сервера для своих проектов. Отдельно упомянут KoboldCPP — он только запускает модели, а искать и скачивать их нужно вручную. В конце автор просит проверять лицензии и условия использования любых моделей, датасетов и сгенерированных ассетов, даже если игра бесплатная.