This media is not supported in your browser
VIEW IN TELEGRAM
Китайцы (Tencent) опять ИИ boot!
Выложили крупнейшую, на 13b параметров, опенсорсную text2video модель HunyuanVideo.
По скорости генерации чуть обходит GEN3, ну и опять же — опенсорсная.
Минимально требуемый объём памяти графического процессора составляет 60 ГБ для 720px × 1280px × 129f и 45 ГБ для 544px × 960px × 129f.
Вообще, в последнее время выходит просто тонна всего и по итогу теряется в общем потоке. Остаются только имплементированные в продукт решения с возможностью гибкой донастройки. Т.е. именно упаковка продукта и возможность подкрутить под себя дают моделям жизнь и шанс стать действительно массовыми.
Вертикальный рост хорош в гонке, но действительно полезных инструментов мы не получим, пока компании не перейдут в горизонтальное развитие. Text2anything сыт не будешь.
Поэтому гипотетическая модель от OpenAI, когда они её таки выпустят, конечно, это будет не SORA, а что-то с дополнительными опциями. Выйдет в красивой коробке, и вы не захотите пользоваться никакими, просто самыми большими моделями. Вам нужна зависимость от продукта, и там это понимают.
Выложили крупнейшую, на 13b параметров, опенсорсную text2video модель HunyuanVideo.
По скорости генерации чуть обходит GEN3, ну и опять же — опенсорсная.
Вообще, в последнее время выходит просто тонна всего и по итогу теряется в общем потоке. Остаются только имплементированные в продукт решения с возможностью гибкой донастройки. Т.е. именно упаковка продукта и возможность подкрутить под себя дают моделям жизнь и шанс стать действительно массовыми.
Вертикальный рост хорош в гонке, но действительно полезных инструментов мы не получим, пока компании не перейдут в горизонтальное развитие. Text2anything сыт не будешь.
Поэтому гипотетическая модель от OpenAI, когда они её таки выпустят, конечно, это будет не SORA, а что-то с дополнительными опциями. Выйдет в красивой коробке, и вы не захотите пользоваться никакими, просто самыми большими моделями. Вам нужна зависимость от продукта, и там это понимают.
This media is not supported in your browser
VIEW IN TELEGRAM
Некоторые знают мою любовь к визуальному стилю серии Destiny, Star Wars, и вот сейчас я с нетерпением жду Marathon.
Мне, честно, наплевать, даже если игра будет полным гавном, но то, какую работу они проделали по сборке визуального стиля для этой игры, достойно отдельного места на аллее дизайна.
Пост взял у моего знакомого арт-директора Романа, вот тут.
Смотрите видео о том, как этот стиль собирался Крегом Малинсом и Джозефом Кроссом.
Мне, честно, наплевать, даже если игра будет полным гавном, но то, какую работу они проделали по сборке визуального стиля для этой игры, достойно отдельного места на аллее дизайна.
Пост взял у моего знакомого арт-директора Романа, вот тут.
Смотрите видео о том, как этот стиль собирался Крегом Малинсом и Джозефом Кроссом.
Forwarded from Сиолошная
This media is not supported in your browser
VIEW IN TELEGRAM
This media is not supported in your browser
VIEW IN TELEGRAM
This media is not supported in your browser
VIEW IN TELEGRAM
This media is not supported in your browser
VIEW IN TELEGRAM
This media is not supported in your browser
VIEW IN TELEGRAM
This media is not supported in your browser
VIEW IN TELEGRAM
Google опубликовали блогпост (не статью и не веса) про Genie 2. Про первую версию я аж хотел написать лонг, но как-то всё забылось в потоке новостей, и силы ушли на Sora.
Genie — модели, которые генерируют видеокадры из игры. Они принимают на вход сигналы вашей клавиатуры или мышки, и рисуют картинку следующих кадров исходя из команд. Вторая версия сильно прокачалась в качестве (первая была во многом про 2D-игры) и консисентности. Весь геймплей в роликах к посту сгенерирован. Что отмечают гуглеры:
— Long horizon memory (если отвернуться от пространства, а затем повернуться обратно, то будет примерно то же самое, а не абсолютно новое)
— Long video generation with new generated content (до минуты генераций)
— 3D structures
— Object affordances and interactions
— Character animation
— NPCs (другие персонажи в игре)
— Physics
— Gravity
— Lighting
— Reflections (RTX не нужен, но GPU не выбрасываем
В конце блогпоста самое интересное: в эти симулированные миры поместили SIMA, агента для игр, про которого Google выпустили статью с полгода назад. SIMA контролирует «клавиатуру и мышь» при генерации Genie 2, и две нейронки как бы играют сами в себя.
> we believe Genie 2 is the path to solving a structural problem of training embodied agents safely while achieving the breadth and generality required to progress towards AGI.
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
Когда не хватает времени протестировать самому, хотя хотелось, конечно, но помощь приходят знакомые готовые окунуть себя в Nau Engine. (Кто не в курсе это продукт который должен импортозаместить Unreal)
Forwarded from Kristen Jelly | Game, Love & Level Art 🦋
Nau Engine выпустили бету и я решила ее протестировать
Nau Engine новый движок от наших разрабов. Я уже скачала даже с фиксом, но результат пока меня не очень впечатлил.
▪️Нет возможности добавлять форматы obj, fbx, нашла только решение добавлять формат usd
▪️Добавление мешей в сцену как отдельный вид мазохизма. Вы добавляете новый меш, там применяете объект который хотите добавить и делаете отдельно текстуру для него. Все руками..
▪️Нет возможности копирования объектов, т.е при копировании появляется пустой куб, а не ваш объект.
▪️При добавлении нового меша во вкладке ассет все названия отображаются как стандартные фигуры cube, plane, а не название вашего файла. ( При 100 кубов сложно найти нужный)
▪️Нет тайлинга/адаптивности текстур
▪️Сложные 3д объекты не добавляются полностью, а только частично
▪️Создание текстур через танцы с бубном
▪️Текстуры выше 1к не поддерживаются, программа просто вылетает, как я выяснила ломается из-за шероховатости
▪️Настройки текстур и VFX вообще не несут никакого функционала, я пробовала ставить разные значения, но изменений нет.
▪️Сохранение сцены и сохранение проекта это 2 разные кнопки, раз 10 пыталась сохранить проект, пока не догадалась, что нужно нажать сохранить сцену, чтобы что-то осталось. Это вообще за что и почему
▪️Освещения просто нет, единственный какой-то источник света Directional Light невозможно повернуть, можно только усилить свет и поменять немного цвет. Настройка цвета отдельная боль ползунками.
▪️Вообще в целом везде нужны ползунки, а не ручное изменение значений.
▪️Программа очень часто вылетает, когда начинаешь выполнять несколько действий или менять значения, что-то видимо конфликтует друг с другом, так один проект заскуфился и вообще не открывается теперь.
▪️Нет возможности удалить что-то внутри папок проекта, нужно переходить в папку на компе и там удалять.
В целом пока очень сырой продукт, который сложно назвать полноценным движком для создания даже простых проектов. Стоит его еще допилить и вернуться с улучшенной версией. Так потенциал есть.
Я решила использовать меш уточки, который делала в блендере. Уточке стало немного плохо. Если и сами хотите испытать немного боли от частых вылетов, непонимания вообще что происходит, то идите качайте
Уточка в Nau Engine vs Уточка в UE5
#NauEngine #UnrealEngine5
Nau Engine новый движок от наших разрабов. Я уже скачала даже с фиксом, но результат пока меня не очень впечатлил.
▪️Нет возможности добавлять форматы obj, fbx, нашла только решение добавлять формат usd
▪️Добавление мешей в сцену как отдельный вид мазохизма. Вы добавляете новый меш, там применяете объект который хотите добавить и делаете отдельно текстуру для него. Все руками..
▪️Нет возможности копирования объектов, т.е при копировании появляется пустой куб, а не ваш объект.
▪️При добавлении нового меша во вкладке ассет все названия отображаются как стандартные фигуры cube, plane, а не название вашего файла. ( При 100 кубов сложно найти нужный)
▪️Нет тайлинга/адаптивности текстур
▪️Сложные 3д объекты не добавляются полностью, а только частично
▪️Создание текстур через танцы с бубном
▪️Текстуры выше 1к не поддерживаются, программа просто вылетает, как я выяснила ломается из-за шероховатости
▪️Настройки текстур и VFX вообще не несут никакого функционала, я пробовала ставить разные значения, но изменений нет.
▪️Сохранение сцены и сохранение проекта это 2 разные кнопки, раз 10 пыталась сохранить проект, пока не догадалась, что нужно нажать сохранить сцену, чтобы что-то осталось. Это вообще за что и почему
▪️Освещения просто нет, единственный какой-то источник света Directional Light невозможно повернуть, можно только усилить свет и поменять немного цвет. Настройка цвета отдельная боль ползунками.
▪️Вообще в целом везде нужны ползунки, а не ручное изменение значений.
▪️Программа очень часто вылетает, когда начинаешь выполнять несколько действий или менять значения, что-то видимо конфликтует друг с другом, так один проект заскуфился и вообще не открывается теперь.
▪️Нет возможности удалить что-то внутри папок проекта, нужно переходить в папку на компе и там удалять.
В целом пока очень сырой продукт, который сложно назвать полноценным движком для создания даже простых проектов. Стоит его еще допилить и вернуться с улучшенной версией. Так потенциал есть.
Я решила использовать меш уточки, который делала в блендере. Уточке стало немного плохо. Если и сами хотите испытать немного боли от частых вылетов, непонимания вообще что происходит, то идите качайте
Уточка в Nau Engine vs Уточка в UE5
#NauEngine #UnrealEngine5
This media is not supported in your browser
VIEW IN TELEGRAM
Опубликовали работу по реконструкции 3D-объектов из 2D-представления.
Отличает её от подобных работ то, что генерация происходит сразу по всем объектам с учётом контекста сцены, пропуская многоступенчатое подразбиение сцены на отдельные несогласованные объекты.
Для простых стилизованных сцен время создания составляет от 40 секунд до 1 минуты. Правда, непонятно, на каком железе.
Маленький пазл в сегментировании и понимании контекста сцены может быть полезной опцией, когда вам не нужна излишняя гибкость.
Текущие генераторы, как правило, позволяют работать только с одним объектом, что, на самом деле, на данном этапе более предпочтительно из-за всратого качества самих генераций, так как позволяет более гибко настраивать и без того ущербные модели.
Проект
Отличает её от подобных работ то, что генерация происходит сразу по всем объектам с учётом контекста сцены, пропуская многоступенчатое подразбиение сцены на отдельные несогласованные объекты.
Для простых стилизованных сцен время создания составляет от 40 секунд до 1 минуты. Правда, непонятно, на каком железе.
Маленький пазл в сегментировании и понимании контекста сцены может быть полезной опцией, когда вам не нужна излишняя гибкость.
Текущие генераторы, как правило, позволяют работать только с одним объектом, что, на самом деле, на данном этапе более предпочтительно из-за всратого качества самих генераций, так как позволяет более гибко настраивать и без того ущербные модели.
Проект
This media is not supported in your browser
VIEW IN TELEGRAM
Прошло каких-то 8 лет с тех пор, как я мечтал, что кто-нибудь сделает просто стельки: удобные, лёгкие, прочные стельки для трекинга ног в VR. Я сдуваю пыль с аббревиатуры VR и пишу, что всё время, пока я пользовался разными шлемами, отсутствие нормальных ног сильно выбивало из погружения.
VR отложен до лучших времён. Они обязательно наступят, но уже с нейрорендерингом, чипами и полным трекингом всего. И, конечно, это будет не VR-устройство, каким мы привыкли его воспринимать.
Следующий виток развития VR должен случиться с нормальным драйвером, с чем-то вроде вышеперечисленного, потому что доверие к технологии подорвано ребятами типа Цукерберга, жадными инвесторами и самой технологией.
А пока — только стельки.
VR отложен до лучших времён. Они обязательно наступят, но уже с нейрорендерингом, чипами и полным трекингом всего. И, конечно, это будет не VR-устройство, каким мы привыкли его воспринимать.
Следующий виток развития VR должен случиться с нормальным драйвером, с чем-то вроде вышеперечисленного, потому что доверие к технологии подорвано ребятами типа Цукерберга, жадными инвесторами и самой технологией.
А пока — только стельки.
This media is not supported in your browser
VIEW IN TELEGRAM
На случай, если в вашей сцене должна присутствовать массовка антропоморфных персонажей или вы архвизер, но вы по каким-то причинам не удовлетворены стоковыми людишками.
Есть модель single-image 3D Human Reconstruction. Да, знаю, в который раз уже.
Но погодите, она умеет то, чего не умеют другие! Например, отлично справляется со сложными и неоднозначными самоокклюзиями например, когда рука перекрывает тело или когда ноги находятся на разных плановых плоскостях.
Реально, посмотрите примеры на странице проекта с игроком в бейсбол. К тому же с дорисовыванием обратной части модели справляется тоже неплохо.
Осталось доработать руки и рассказать ребятам, что такое delighting и зачем он нужен.
Страница проекта.
Демо обещали скоро.
Есть модель single-image 3D Human Reconstruction. Да, знаю, в который раз уже.
Но погодите, она умеет то, чего не умеют другие! Например, отлично справляется со сложными и неоднозначными самоокклюзиями например, когда рука перекрывает тело или когда ноги находятся на разных плановых плоскостях.
Реально, посмотрите примеры на странице проекта с игроком в бейсбол. К тому же с дорисовыванием обратной части модели справляется тоже неплохо.
Осталось доработать руки и рассказать ребятам, что такое delighting и зачем он нужен.
Страница проекта.
Демо обещали скоро.
This media is not supported in your browser
VIEW IN TELEGRAM
Одна из самых крутых фич в Geminy 2.0 — во-первых, это, конечно, мультимодальность. Во-вторых, можно стримить экран и вебку, на примере того, как это сделано у Claude в Computer Use.
Только в Geminy отправляется последние пару секунд записи видео. Таким образом, вы можете показывать ей себя, ваш код, ваш рабочий стол, кота и всё, что ещё придумаете.
Работает пока сильно через раз, иногда вообще не видит ничего и не понимает, что за функция live streaming. Но иногда у него случаются прояснения. Возможности в 25 году будут крышесносные! Stay safe!
Пробовать, тут.
Только в Geminy отправляется последние пару секунд записи видео. Таким образом, вы можете показывать ей себя, ваш код, ваш рабочий стол, кота и всё, что ещё придумаете.
Работает пока сильно через раз, иногда вообще не видит ничего и не понимает, что за функция live streaming. Но иногда у него случаются прояснения. Возможности в 25 году будут крышесносные! Stay safe!
Пробовать, тут.
This media is not supported in your browser
VIEW IN TELEGRAM
На случай, если у вас не было возможности поиграть в генеративный CS: Global Offensive
Вот тут можно попробовать в браузере.
Только не прыгайте, сразу улетаешь в лимб ну и в целом, попробуйте продержаться дольше 700 фрейма.
Попробовать
Вот тут можно попробовать в браузере.
Только не прыгайте, сразу улетаешь в лимб ну и в целом, попробуйте продержаться дольше 700 фрейма.
Попробовать