Канал о сферах CG, Игр и Генератива, все с помощью чего мы генерируем визуальное и интерактивное искусство. Статистику не предоставляю, смотрите на tgstat.ru mentorcampus.ru youtube.com/user/TheThirdDimention Вопросы и предложения: @Evgeniy_Vegera
Netflix затизерил пару шотов из будущего фильма по графическому роману Сталенхага — Electric State.
Во-первых, это красиво. Я думаю, тут много ценителей эстетики Сталенхага. И во-вторых, актерский состав просто пушка: ребята, отметившиеся в фильмах с налётом ретро 80-х и 90-х — Крис Пратт, Милли Бобби Браун и Вуди Харрельсон! Если всё получится, то будет шедевр типа Скотт Пилигрим или Зомбилэнд, но шанс, честно говоря, невелик, потому что тонкий вайб Сталенхага очень легко разрушить другой формой искусства.
Сюжет такой: в 90-х произошло восстание роботов. Осиротевшая девочка-подросток отправляется на поиски своего брата по Америке с роботом-контрабандистом и его напарником.
Не могу пройти мимо такой милоты. Да, понятно, что можно дорабатывать разные аспекты, но в целом вполне рабочий фан проект. Спасибо Саше за тутор.
SD+depth map+ Unreal.
Sawadee Krap Sasha 🙏
Помните такую софтину на AI, Wonder Studio?
Я даже делал стрим с разбором, когда она только вышла.
Вот её продакшен-применение. На бэкстейдже во время съёмок клипа, по всей видимости, снимали только мокап движений участников Linkin Park, ну и потом наваливали партиклов.
Есть ощущение, что группа переваривает сама себя. Эти эффекты, на порядок выше, были сделаны ещё 13 лет назад в клипе "Waiting for the End" и выглядели на пару голов выше!
Это вот обратная сторона либерализации создания контента, когда у вас есть упрощалки, но в голове нет нормальных идей. Вы либо копируете, либо просто делаете безвкусное говно, иногда это всё вместе, как русский Trap.
Видео со съемок
А ну вот, собственно, дед и сказал, зачем он вляпался в Stability AI.
А как лучше всего это сделать и еще и заработать на этом? Конечно, снять с помощью новых технологий новый фильм и параллельно разработать пару пайплайнов и тулзовин.
У тебя нет бизнес-мышления, если ты не думаешь о будущем своего бизнеса.
Кэмерон, как режиссер, всегда колабившийся с инновациями, не может не думать о новом фильме про искусственный интеллект, и, конечно, было бы странным для этого фильма не использовать возможности и особенно визуальную эстетику генеративных моделей.
Как он сам говорит: «Я хочу построить мост между классическими подходами CG и новыми генеративными возможностями», и нет оснований не верить человеку, внедрившему в обиход практику Virtual Production.
Хотите — пиньте, хотите — нет, но это может быть правдой.
Отдельно забавно смотреть, как он, стряхивая золотой порошок с ногтей, говорит в контексте применения AI: «Я тоже художник, такой же, как вы, я тоже люблю рисовать кричей. И, типа, я не хочу помогать вам всем лишиться работы». Но я думаю, все понимают: если траты на производство контента можно сократить, а скорость итераций идей можно увеличить, то это будет сделано!
С другой стороны, огромное количество пайплайнов и софтов вышли изначально из инхаусных студийных разработок, и следующие 5 лет не будут исключением, так что пристегните ремни и приготовьтесь стать мультимодальными в своей работе и своих подходах. Увидимся здесь же через 5 лет!
Кусок тут
Энди Серкис объявил о новом проекте с участием персонажей с искусственным интеллектом, назвав эту быстро развивающуюся технологию ещё одной формой магии, которая вызывает страх у людей.
"Голлум" рассказал, что его продюсерская компания Imaginarium работает над сюжетной историей, где сначала создаются 2D-персонажи с использованием озвучки актёров, а затем они переходят в мир дополненной реальности, чтобы это не значило. На этом этапе персонажи становятся персонажами ИИ, созданными художниками и режиссёрами. "Теперь вы можете напрямую взаимодействовать с этими CGI-персонажами в реальном времени".
Он подчеркнул, что технология ИИ многими неправильно понимается и часто вызывает опасения, сравнивая это с реакцией на появление Интернета, или мокап костюмов, который тоже считали разрушительным для жизни и работы. Человек который смог адаптироваться и нацепить костюм с датчиками а потом основать компанию говорит как бы о том же, если вы сможете адаптироваться, то бояться нечего, если нет, ваши проблемы.
Восстановление трехмерной модели лица по нескольким рандомным видео по методу SPARK.
В отличие от предыдущих работ, в этой точность получения геометрии лица находится на довольно высоком уровне.
Сначала создаётся подробная болванка головы, потом сетка преобразуется под конкретную модель с видео, получаются все необходимые карты для последующего встраивания изображения обратно в среду.
В основе лежит уже обученная модель, которая может восстанавливать параметры лица (поза, выражение) по одному изображению. При этом авторы заменяют декодер этой модели на персонализированную модель, которая была создана на основе видео. Это улучшает точность работы.
Благодаря такой настройке модель способна в реальном времени восстанавливать параметры лица, включая выражения, для новых кадров, которых она ранее не видела.
Сколько подобных работ уже было, но мы всё ещё не имеем возможности быстро получить качественное трёхмерное представление своего лица, хотя бы близкое к реальному времени. Попробовать SPARK пока негде.
Electronic Arts на Investor day показали тулзу, которая может собирать вам уровни по голосовому запросу.
К презентации, конечно же, тонна вопросов! Понятно, что это видео для инвесторов, понятно, что из доступной реализации в видео доступны простейшие вещи, типа уровня из коробок, без какого либо воображения. И когда голосом просят сделать уровень более сложным, он просто добавляет еще коробок 🤡
Персонажи выбираются на выбор максимально дефолтные и предустановленные, т.е. ни о какой генерации геометрии не идет речи, так же как и о создании ассетов окружения сложнее, чем коробки.
При создании геймплейных элементов, на что намекают создатели, есть те же предустановленные Deathmatch, Race, Parkour, Battle Royale, Custom mode, который мог бы быть самым интересным и, судя по названию, мог бы дать какой-то конструктор логики. Но нет, для презентации выбирают одноклеточный Deathmatch, показывая, что могут при этом менять немного правила, типа "убивать только гранатами".
В целом, никакой "Imagination" тут и рядом не пролетало. Презентация исключительно для инвесторов, чтобы возбудить мысли о бесконечном дешевом производстве контента с минимальными вложениями и после этого наблюдать графики роста компании от отчета к отчету. Как бы это не было ужасно, но в какой-то мере мы придем и к подобной модели.
Делюсь работами подписчиков для конкурса Runway, GEN48. Никакого композа AE или 3D. Звук и музыку, только, писали не нейронками а старым палеозойским методом - с участием человека.
Тут подробнее
Невероятное ощущение после рабочего дня, когда смотришь всё время в сетку, каналы текстур, пиксели, технические детали LODов, проблемы с шейдингом, UV-развёртку, смотреть потом на это и пускать слюну, мечтая, что это будет существовать в виде рендер-движка или хотя бы надстройки, которая будет помогать тебе рисовать текстуры, геометрию, FX, окружение и прочее-прочее.
Давайте, я уже готов, а завтра пятница, и я буду готов ещё больше!
Фанатам, как известно, сложно угодить, особенно если ты хочешь продаться на ещё не охваченные рынки. Так и произошло с трейлером Minecraft, который засрали за наличие реальных актёров вместо кубоноидов.
Фанаты начали делать свои трушные версии, как ту, что я прикрепил выше. Но понятно, что такими силами свой фильм не перенесёшь. Энергии хватает только на ремейк трейлеров.
Как раз в этом случае разного рода стайлтрансферы выступят в роли серебряной пули для всех инклюзивных, одноногих, многополых, квадратноголовых и нормисов.
Youtube
Мы уже видели пример с нейро-Doom, теперь ребята из GameGen представили огромный сет, собранный на данных об играх в открытом мире.
Пока я читал описание, долго не мог найти инфу о том, реально ли есть управление персонажем, и оказалось — есть, правда, оно ограничено только поворотами: вправо, влево, вперёд, назад.
Обучались на видеоданных — около 35к часов видео, из которых только половина оказалась пригодной. Видео отбирались человеком. В наборе участвовало 150 игр: там и GTA, и RDR, и Witcher.
Судя по описанию происходящего, игры ближайшего будущего действительно вернутся к описательным квестам. И, наверное, учитывая нейронную активность головного мозга, будут больше похожи на сны.
Человек в плаще и шляпе идет по берегу реки, приближаясь к деревянным домам туманным утром. В этом атмосферном эпизоде из приключенческой игры Red Dead Redemption 2 Артур Морган изображен идущим по спокойному берегу реки, подчеркнутому его отличительной широкополой белой шляпой и темным плащом. Окружающая среда представляет собой спокойную прибрежную обстановку, залитую золотистым солнечным светом, с туманом, задерживающимся над далекими лесами. Камера, следящая за Артуром, делает четкие снимки, которые тонко показывают больше пышной зелени и деревенских зданий, появляющихся на левом берегу по мере того, как он продвигается вперед, отражая характерное для игры сочетание исследования и внимания к деталям пейзажаПодробнее про исследование можно почитать тут. Читать полностью…
Ого ничеси, первые звездочки за пост!
Вэри апрешиэйтед❤️
Люблю вас! Получается продался за деньги, за звездочки
Есть такой сайт gameuidatabase.com, на котором заботливо собраны примеры UI из сотен игр. Недавно его база начала невероятно лагать. Владелец сайта пошёл разбираться и решил проблему, заблокировав один из адресов. Оказалось, что этот адрес принадлежит OpenAI.
Причём не помог даже robots.txt. Этот файл помогает управлять доступом поисковых роботов к страницам сайта, оптимизируя, разрешая или запрещая процесс индексации и защищая конфиденциальную информацию. Владелец говорит, что адреса, с которых OpenAI парсит информацию, постоянно меняются, что усложняет блокировку.
Корпорации в целом все одинаковые. Остаётся риторическим только один вопрос: зачем им данные о том, как делать UI для игр? 😀
Кажется, теперь становится понятным, как мы будем терять работу. конкретно игры будут генерироваться.
GameNGen — первый игровой движок, который сгенерировал игру, и, конечно же, это Doom.
Работает это всё на модифицированной SD 1.4, которая обучена на игровом процессе, который играла другая сетка. Такие времена. Т.е. каждый следующий кадр — это предугадывание. Получается, что теперь нужно собрать все геймплейные механики, обучить ими сети, и можно делать в целом любую игру с комбинациями механик и натягивать любой визуал по вашему запросу.
В итоге разработка игр будет похожа на старые текстовые квесты, где ключевыми кадрами генерации будут являться текстовые описания или статичные кадры с визуальными референсами или поворотами сюжета. История закольцовывается.
Считывать инпут с периферийных устройств явно не будет проблемой, т.е. вы всё так же сможете крутить мышкой и кликать по клавиатуре, а в перспективе и просто думать, что идёте, и чип поможет двигать вашего аватара в игре.
Doom рано или поздно запустят на человеческих мозгах. Только лет 30 надо подождать.
@cgit_vines
Наткнулся на видео, которое наглядно показывает насколько микро-электроника – микро
Это внутренности чипа из iPhone
Тренд сегодняшнего дня — новая версия Pika Labs с обновлением 1.5. Надуваем, взрываем, мнём, таем и разрезаем.
FX'еры напряглись? Не нужно, так больнее будет.
Творческий подход к очень привычным вещам.
Кодзима показал, как будет выглядеть photo mode для Death Stranding 2.
Когда вы эмоционально проводите время с вашим персонажем, вы гораздо больше цените его и сближаетесь с ним.
Индустрия через пару лет такая: «А чего бы нам не запускаться только на нейронных чипах?»
Думаете, Хуанг не пойдет на это, учитывая все его последние заявления? Отлично же картинку держит, не?!
Смотреть бэкстейджи иногда гораздо интереснее, чем готовый продукт в виде рекламы или кино. Вы абсолютно бездушны, если не вжались в моменте, когда увидели, что рельсы кончаются, и камера, кажется, должна была упасть, но нет!
Потом немного выдохнули, удивились тому, что на моменте поворота райдера не произошло никакого факапа, и, о боже, даже не произошел кат! А потом невероятное чувство невесомости захватывает вас, когда камера становится квадрокоптером и улетает, чтобы доснять оставшуюся часть ролика.
Хочется отдельно написать о проблемах с трекингом. По всей видимости, опорными точками являются фронтальные части в виде носа, глаз и уголков рта, как и в классическом трекинге на постпродакшене.
Вероятно, также из-за не совсем корректного определения объектива мы получаем и дрожание, и смещение на фронтальную часть всей получаемой информации. Нужна корректировка данных вглубь по сцене, ну и инструменты для корректного определения искажений камеры.
Наглядная демонстрация новой обновки Kling, позволяющая рисовать вектора движения Motion Brush. Идея давно не новая, но приятная для пока бесплатной версии.
Читать полностью…Уже все видели простенькие примеры игр, сделанных с помощью GPT-подобных чатов, типа Galaxy, Phong и так далее. Шутеры сейчас только начинают появляться, и это один из примеров полностью написанный через GPT.
Парень вообще не имеет скиллов к программированию и в доказательство к этому говорит, что все написано на HTML, хотя в комментах его поправляют, что это очевидно логика написанная на JavaScript. 😀
Представляю разговоры нынешних отцов кодеров с детьми, которые делают апы сложнее, чем папы, не имея при этом понятия, на каком языке там что написано.
Яндекс Плюс приглашает на межпространственный паблик-ток!
24 сентября в московском Universal University эксперты в области мультимедиа и цифровых технологий обсудят новое направление в искусстве — фиджитал-архитектуру.
Фиджитал-архитектура — это новое направление в искусстве, которое находится на стыке дизайна и технологий.
На событии выступят эксперты и энтузиасты в области мультимедиа и 3D-дизайна, цифровых технологий и искусства: Максим Чепухалин, Валерий Омаров, Денис Чучко, Иван Нефедкин, Валерия Бурлюк и Максим Свищев.
В этот же вечер мы подведем итоги конкурса «Ситиморфизм: архитектура превращений» от Яндекс Плюс и Universal University. В рамках конкурса молодые дизайнеры и художники искали новые идеи для переосмысления реальных объектов в цифровом мире и создавали невероятные объекты для мобильной игры Плюс Сити.
Форма для регистрации на мероприятие находится прямо тут.
#реклама
Я хочу с вами поделиться философскими рассуждениями Уоррена Маккаллоха (1898–1969) — он был американским нейрофизиологом и кибернетиком. Также он являлся родоначальником теории нейронных сетей, его статьи стали фундаментом для развития ИИ. В общем, старик знал, о чем говорил.
От этого только интереснее слушать мысли 60-летней давности о том, что единственный путь для нас, это путь симбиоза с ИИ — пока мы всё ещё существуем как вид, все биологически виды проходят через вымирание и мы не исключение.
Он подготовил огромную теоретическую базу на основе которой разработки настоящего времени становятся реальностью.
Нейропластичность мозга - как возможность для расширения способностей человека.
Коллективный интеллект - когда мозги миллионов людей соединены в общую сеть. Когнитивное и сенсорное усиление возможностей человека, через слияние с машинами.
Волновала ли этих ребят критика? А технические ограничения являлись ли причиной для скепсиса? Насколько их идеи воспринимались дико в то время? Да и сейчас, собственно, не так ли?
Переведено @cgit_vines
Мы все сейчас смотрим шоу Pop MMA, с одной стороны ринга Харари с его Технологическим постгуманизмом, с другой Дугин с Евразийским неоипериализмом.
Харари последние пару месяцев пытается быть "угодным алгоритмам", как он говорит. Так они смогут выдавать новости о его новой книге Nexus чаще.
Если обратиться к его офсайту, то можно обнаружить, что книга переведена на огромное количество языков, благо сейчас это стоит практически ничего, но нет русского. Можно пылать пердаками по разным поводам, а можно обратиться к неофициальному переводу от "Книжный импорт". Если захотите, их перевод можно найти, линки давать не буду. Мы же не пираты какие-нибудь.
А можно и в оригинале почитать, слог не сложный.
В целом, я посмотрел пару глав, и перевод пока вполне читабельный, хоть и наверняка машинный.
Человечеству нужны философы, чтобы разобраться в происходящем и поставить вопросы, куда мы идем и как с этим жить.
Думать в комментах я вам запрещаю, говорить можно только о чебурашке, говорят он приехал из Израиля.
Нет никакой научной фантастики, есть научная вероятность.
Чужой, снятый в 70-х, показывая интерфейсы взаимодействия с компьютером в будущем, описал то, как сейчас происходит общение с языковыми моделями. 🦾
У меня есть теория, что всё, что может придумать человеческий разум, может быть реализовано, даже самые сумасшедшие идеи, типа вечной жизни и телепортов, или динозавров на сверхзвуковых двигателях с квантовыми искривителями пространства.
Потому что возможности сознания ограничены, и оно не способно вообразить то, чего невозможно было бы создать. Поэтому мы так часто встречаемся с ситуациями, когда что-то было предсказано, хотя казалось когда-то невероятным.
С добрым утром!
Цифровые правительства, экономика, культура и религия на AI топливе — это целый полигон по тестированию моделей и реакций на внешние изменения.
Project Sid — это площадка, куда было запущено множество автономных моделей с одной целью — собрать как можно больше редких предметов в Minecraft. Агенты начинали с нуля, и для выполнения задания им пришлось создать систему обмена с монетами, рынками и товарно-денежными отношениями.
Кажется, на этом этапе система была уже сломана. Почему именно обмен на монеты? Я бы хотел посмотреть на эксперименты, где были бы вычищены из датасетов абсолютно все упоминания и знания о монетарной системе.
И в этой системе, знаете, кто стал самым успешным? Священник! Потому что обратил многих в свою веру.
Ребята тестируют разные сценарии, в том числе выходящие далеко за рамки игр, ну и без повесточки на тему выборов в США тоже не обошлось.
Поиграть бесплатные 300 минут можно у ребят на сервере. Обязательное условие — создать своего агента. Приготовьтесь написать пару строк о том, кто это будет и какие у него цели.
Шагов за 6 вы создадите идеальное существо или отвратительно ужасное — на ваш выбор.
Я пойду своего тестить.
Насколько точно прогнозы и ожидания сходятся вместе?
Видео из архива 71 года показывает, что в течение 30 лет мы все пересядем на автопилоты.
Забавно, как мы продолжаем верить в одни и те же прогнозы десятилетиями. Каждое поколение уверено, что именно оно станет свидетелем революции. Но реальность упорно доказывает, что технологии развиваются не так быстро, как нам хотелось бы.
Одна надежда на кривую Курцвейла, но и там есть подвох.
@cgit_vines
Видео, которое сегодня зафорсилось, является наполовину фейковым, потому что на переднем плане стоят актрисы, а роботы — сзади. Приём такой же, как в кино, со смешением реальных съёмок и CG.
Следующая волна хайпа после ИИ будет по робототехнике, а пока можете в комментах посмотреть, как робот кушает салатик.