Нейросети и Блендер
Нейросети и Блендер
@monkeyinlaw
12 063 подписчика
1 пост
Посты
Административный пост.
Привет! Для тех кто заинтересован именно в моем личном бренде и проектах.
Первая стадия рефактора канала завершена, начинаем вторую стадию. ☺️
———————————————————————————————
📕 Мой стартапный путь на данный момент такой:
2022 → https://phygital.plus/ → https://neural.love/ → 2024 → https://www.mago.studio/
🐈⬛ И в Mago мне дали добро пробовать расширять команду QA подразделения стартапа и на данном этапе я ищу всего одного человека на это направление. Ещё я конечно кайфую от командных игр и Jam session в MAGO
ЗП зависит от вашего скилла, вилка от 10 до 20$ за час работы
☺️ Кого я вижу в свою команду:
• Студентов
• Junior разрабов в python (Но опыт в программировании необязателен, если что обучу)
• Людей, которые любят создавать красоту, особенно в видео
• Людей, которые готовы со мной работать в команде
• Есть опыт в видеомонтаже
• Есть ноутбук или стационарный комп
• Есть возможность получать оплату в крипте или в Нови-Саде в динарах, в евро
• Есть базовый английский (но необязательно, так как прям со стартапом будете мало общаться, все общение со мной)
📕 Что будете делать:
• Подписывать NDA (соглашение о неразглашении)
• Максимум 4 часа работы в неделю (потому можно совмещать с учебой, другой работой)
• Точно по списку идти по тестам, все тесты прописано до мелочей
• Генерить красоту из видео
Если все будет отлично, буду подкидывать ещё работы. Заполнить все данные и оставить заявку можно по форме вот тут: LINK
💖 И конечно будет идеально, если кандидат сможет:
— Встретиться лично в Нови-Саде и пообщаться, в кафане например
———————————————————————————————
Вторая вакансия, которая никак не связана с Mago. А уже с моим брендом:
📕 Монтажер ко мне в команду, с возможностью роста.
Это личный проект. у меня скопилось уже очень много материалов, я не успеваю физически монтировать, а автоматизация на данный момент не доходит до моего желаемого уровня качества.
☺️ Кого я вижу:
• Школьника, студента
• Желающего обучаться. (В финале человек будет знать Premiere Pro, Figma, Design проектирование, небольшая режиссура, отлично использовать разные AI модели для контента и многое ещё)
• Первое время 5-10$ за час работы (зависит от начального опыта) + огромный пак обучения от меня, если все пойдет хорошо, 20+$ за час работы (без обучения)
• Идеально если человек живет в Нови-Саде
• Есть возможность получать оплату в крипте или в Нови-Саде в динарах, в евро
🐱 Форма на эту задачу: LINK
Если у вас есть знакомый или друг, который ищет что-то схожее, отправьте ему. Может это будет идеальный мэтч.
———————————————————————————————
А теперь к остальным проектам →
📕 Анонс по роликам на youtube канал:
— Первым выйдет второй урок по FramePack (Возможно на этой неделе, в позитивном сценарии в четверг, 22 мая)
— Затем выйдет урок про VACE. Неделю назад вышла 14B модель VACE, буду её тестить и показывать её вам (мой урок про 1.3B модель)
В ТГ канале пока будет мало активности, простите. Он еще в процессе рефактора.
Как насчет 3d видосов?
📕 Realtime Gaussian Splatting — теперь мы можем использовать ещё и видео для создания 3d сцен через Gaussing Splatting технологию
!НО:
— Вам нужна RGBD камера (это когда четвертый параметр карта глубины)
Типо такой: LINK или такой: LINK
🐈⬛ При этом автор заопенсоурсил весь свой код и предложил поиграться всем.
GITHUB — REDDIT
Особенности:
— Вы снимаете видео, но хотите на посте чуть повернуть ракурс, а момент упущен, подойдет
— Вам нужна 3d сцена и экшн в ней, подойдет
— Вам нужен новый Хайп эффект для клипа? Подойдет!
Здесь конечно как входящее видео идеально подойдут кадры снятые с 360 камер, если бы у них был еще depth параметры. (Но доступных на рынке таких камер пока не видел)
Если вам интересно как делать просто 3d сцены, без видео Сплатов — вот тут делал перевод хорошего процесса.
Жаль в Blender пока качественного рендера Гауссин Сплатов нет... 🐈⬛
ComfyUI большое обновление
Интеграция API-нод напрямую приносит 11 потрясающих визуальных AI-моделей в среду с открытым исходным кодом:
— Одна платформа, 11 моделей, 65 нод одновременно
— Объединяйте API с вашими любимыми открытыми моделями и рабочими процессами
— Никаких ограничений по оборудованию
Что такое API-ноды?
API-ноды — это встроенные ноды в ComfyUI, которые могут вызывать API платных моделей, таких как Veo2 или Flux Ultra.
Для многих ComfyUI — это движок автоматизации, который помогает выполнять творческие задачи. Творческим людям важно достичь наилучшего результата, и это включает использование нелокальных моделей.
На прошлой неделе мы запустили GPT-Image-1 в качестве API-ноды, и незамедлительная обратная связь была простой: пожалуйста, добавьте больше моделей. С тех пор команда усердно работала, и мы рады объявить о поддержке еще 10 семейств моделей и 62 новых нод.
Поддержка моделей:
— Black Forest Labs Flux 1.1[pro] Ultra, Flux .1[pro]
— Kling 2.0, 1.6, 1.5 & Various Effects
— Luma Photon, Ray2, Ray1.6
— MiniMax Text-to-Video, Image-to-Video
— PixVerse V4 & Effects
— Recraft V3, V2 & Various Tools
— Stability AI Stable Image Ultra, Stable Diffusion 3.5 Large
— Google Veo2
— Ideogram V3, V2, V1
— OpenAI GPT4o image
— Pika 2.2
От меня:
Теперь ComfyUI это комбайн, где есть и платные сервисы и локальные модели, что делает этот инструмент еще более мощным и эффективным, ВОООУУ!
А в комментах еще про их офигенный редизайн —>
Управление лицом с джойстика в ComfyUI
Это наверное самое неожиданное и интересное решение для ComfyUI:
— Управлять эмоциями на сгенерированном лице через игровой джойстик
В 18+ контенте кажется появились новые идеи для игры
Полное описание и процесс установки: LINK
Продуктовый Gaussian splatting
📕 Процесс:
— Для захвата вам нужна стабильная четкая запись. Используйте высокую выдержку с фиксированным значением, фиксированное значение ISO, фиксированный баланс белого и камеру с хорошей стабилизацией изображения. Снимайте объект восходящими дугами и поперечными движениями, обеспечивая хорошее покрытие с разных углов обзора.
— Затем пропустите видео через наш инструмент sharpframes, он извлечет самые четкие кадры из видео. В приведенной выше сцене я получил примерно два кадра в секунду из видео 60 FPS. https://sharp-frames.reflct.app или pip install sharp-frames, если вам удобны инструменты командной строки. У нас также есть бета-версия приложения для Windows.
— Затем обучите Gaussian splatting. Для этого я использовал Metashape и Postshot в профиле splat3 с 1 млн макс. сплэтов и понижением разрешения до 1600 пикселей.
— Затем разместил в интернете с помощью https://reflct.app LINK — как это выглядит в инете
Docs для reflct
Подготовил вам детальный пост из этого реддита: LINK
Для меня, это кстати я: ☺️, очень вовремя подборка, так как планирую продавать в июне подделки из бетона и мне нужно прям в 3d и быстро показать каждую поделку в инете для покупателя. Проверим и вернусь уже с ссылочками для вас.
Кому еще подойдет?
— Real estate, если вы продаете дома, сдаете квартиры\дома
— Вам нужно показать со всех ракурсов ваш товар, при этом свои сервера держать не выгодно
— Вы продаете БУ\новую технику и детали к ней. Авто, грузовики, велосипеды и т.д.
📕В комментариях дополняю про аппаратуру для лучшего создания gaussian splatting —>📕
MAGO теперь в Closed Beta!💖
Подать заявку можно вот тут: LINK
📕 Что мне как творческому аниматору нравится:
— Side By Side(SBS) mode. Когда ты можешь сравнивать сразу несколько генерации и понимать как настройки меняют генерацию. То есть в данном случае сервис позволяет узнать как работают разные настройки и экспериментировать с ними.
— Folders, когда проекты можно упаковывать в папки и разделять по интересам, работам. (Наверное уже заметили как это удобно в ChatGPT)
— Controlnets. Это достаточно приятно упаковано и я рад, что доступ к этим настройкам оставили в том виде, как привыкли их видеть ComfyUI пользователи, а не в виде Midjourney параметров.
— И ещё много чего в процессе.
Я не так много публикую работ из MAGO. Но мне приятнее и приятнее с каждым днем генерировать именно там.
Когда будет открыт доступ для всех, я напишу!
Сегодня будет два поста
Первый пост —
📕 Хороший дайджест у AI Molodca
Про: Музыкальные новинки, подкастерские и Midjourney с обновленным IP Adapter (А помните как года 2 назад они обещали видео модель и 3d?)
📕 А Сgevent потестил многое из дайджеста прям детально в своем канале.
А от меня вот такая ссылочка про Nvidia — LINK
Ребята из NVIDIA решили взять ControlNet + FLUX dev и сделать генератор сцен, но похоже им не хватает QA тестера, 9:16 и 16:9 форматы перепутаны, очень странный UI иногда с двумя скроллами в одном объекте.
Короче вроде и круто, что бесплатно, но по качеству будто опенсоурс на коленке собирался. Есть ещё видео, как все задумывалось: LINK
— Да и Fal.ai существует уже давно. Версию с ControlNet можно и в другом месте найти.
Хотя понятно, что идея в другом, вы можете деплоить это как микросервис на своих мощностях(Пока 4xx и 5xx поколения). Бесплатно можно потестить 25 генераций.
