6983
Я Валерия и я кормлю разные нейросети разными картинками По всем вопросам @lerarussia
Нейросети и реставрация (или не совсем)
Коллега показал свой проект, где он оживил старую фотографию храма. Сейчас церковь пребывает в плачевном состоянии, поэтому такой проект интересен и полезен для привлечения внимания к реставрации и объекту культурного наследия. Прочтите пост, из интересного там выбор нейронки и пайплайн.
Люблю такие проекты, например, генерация утерянных картин Воронежского музея изобразительных искусств им. Крамского с помощью Kandinsky. Работы попробовали восстановить с помощью массива данных картин художников и инвентарные описания картин из фондов. Результаты можно посмотреть на сайте.
Denis Sexy IT давно делал такой проект с видео, а также недавно оживлял старые фото с помощью новых нейронок типа Kling и Luma. А также разбирался с реставраторами в том, почему такие эксперименты с нейронными сетями не являются реставрацией.
Но очень надеемся, что пока. Думаю, нейронки — это все же будущее нашего контакта с прошлым.
Как я вижу очередной заказ или выставку на тему будущее и киберпанк
Читать полностью…
Наводнение видеоинструментов 🌊
Пост будет дополняться 🫀
Нас всех захлестнуло волной нейровидео. В этом посте я буду собирать не столько видеоинструменты, сколько любопытные тесты и полноценные ролики с использованием новых решений. Это поможет вам, если вы нейронщик, продюсер или просто энтузиаст и хотите отличать Luma от SORA по картинке.
👽 LumaAI
Работы Льва Переулкова
Хоррор-клип Дианы Галимзяновой
🇨🇳 Kling
Эссе Александра Доброкотова
👯♀️ Luma+Kling
Видео хоррор от Джимми Нейрона (нейронки для каждого кадра можно различить по ватермаркам)
🤖 SORA
Клип Washed up - The Hardest part
Реклама бренда игрушек
👯♀️Runway, Gen 3
Клип Ararat Fukoe
❌Наглядные треды со всеми обновлениями видеонейронок в X
🌟Пост с особенностями и промтингом для Luma, Kling, Gen от Александра Доброкотова
Если я что-то забыла или вы ходите прислать мне что-то новое, пишите 🫀
Здравствуйте все 🫀🦾
Сегодня, 18 июля открываем выставку «Пирогов – Петровский. Хирургический авангард» в Старом Английском дворе Зарядья.
Для меня это важнейший проект — я снова поработала с любимой площадкой и кураторами, а также с острой для себя темой: медициной и анатомией. Первой моей работой была работа в медицинском научно-исследовательском институте, я любила снимать на операциях, люблю медицинские подкасты такие как «Почему мы все еще живы», получала высокотехнологичное лечение.
С этим вдохновением и нежностью я подошла к работе над нейроартом к этой выставке.
Выставка посвящена двум героям XIX и XX столетий, врачам-новаторам — Николаю Ивановичу Пирогову и Борису Васильевичу Петровскому. Один — хирург и анатом, стоящий у истоков военно-полевой хирургии, анестезии и топографической анатомии. Второй — ученый и клиницист, академик РАН и РАМН, основатель ведущего российского центра хирургии, впервые в истории СССР пересадивший пациенту почку.
Много нейронок и мультимедийные работы
«Что, черт возьми, делает ИИ?» — короткометражка художника, который в первый раз использует ИИ для одного из известных конкурсов в X.
Что интересного? Процесс работы, идеи, использование технологий с нуля и знакомые страдания при работе с несовершенным инструментом. Свежий воздух в восприятии того, как можно использовать ИИ в работе художника.
А еще, я часто говорю на лекциях, что будущее именно за такими работами — сложными, с множеством нейронок и связей. И их может делать делать один человек (немного пострадав).
В пайплайне все любимое, а главное, свежее: ChatGPT, Krea, 3DAiStudio, MeshAI, fondantai и Suno
Здравствуйте все 🫀📀
6 июля в 19:00 издательство Ad Marginem приглашает вас на встречу с теоретиком медиа Гертом Ловинком и обсудим его книги «Критическая теория интернета» и «В плену у платформы». Событие бесплатное, оно пройдет в Москве, в книжном магазине «Пиотровский».
В моей библиотеке уже есть «Критическая теория интернета» одна из актуальных книг о деградации интернета, который из пространства свободы и анонимности постепенно превратился в инструмент коммерческой и государственной слежки. Также Ловинк рассказывает о культурных техниках селфи и комментариев. В общем, осмысливает настоящий мир, в котором мы живем. А во второй книге речь идет уже об актуальных событиях прошедших лет, в том числе об NFT и криптоарте.
Всем скучающим по старому интернету и пребывающим в шоке от нынешнего. Потому что теории и осмысления нам явно не хватает!
Подробнее о встречи можно прочитать тут.
Runway выкатили Gen3 для всех
Как постоянный пользователь уже успела протестировать новую модель. По мне так много удобного и долгожданного — к модели прилагается отличный и понятный справочник по терминам и свету.
10 секунд я генерировала примерно пару минут, но скорее всего сейчас очередь станет больше. Управляемость малая, никаких кистей пока нет, только промт. Важно: никаких оживлений тоже нет, пока все только генерация с нуля. Результаты можете оценить сами.
Что показалось классным кроме гайда — возможность киношных стилей и сохранение ассетов — наконец-то инструмент для киношников и творцов, а не штамповщик реалистичных стоковых кадров!
Пока работает только в вебверсии на сайте, нет в приложении.
Конечно, не могла обойти вниманием традиционных артистов и их взгляды на ИИ 🤖
Это не я подписи писала, это все Клод!
Сегодня в Гостином дворе откроется 13й международный фестиваль ART «Традиции и Современность», где мои работы будут представлены на стенде объединения SXEMA. Выставка продлится с 21 по 23 июня, так что успейте посетить на выходных!
Я покажу 4 работы, созданные с помощью StableDiffusion, Warpfusion и Runway. Часть из них экспонируется впервые.
SXEMA продемонстрирует работы 20 цифровых художников из нашего комьюнити, которые ломают границы привычного и создают уникальные произведения искусства с помощью новейших технологий.
Следите за анонсами в социальных сетях коллег и приходите пообщаться вживую к нам на стенд C11.
Вышел официальный гайд по генерации видео в Luma и о том как правильно составлять промпты.
Вот держите перевод самого основного:
Image to Video
- Загрузите изображение в формате JPG, JPEG или PNG, нажав на иконку изображения на странице генерации. Вы также можете добавить текстовое описание сцены.
- При включенной опции "Enhance Prompt" вам нужно только описать, что должно происходить в сцене. Например: <image of a car> + "*a red car driving on a road*"
- Особенно полезно описывать типы движений, которые вы хотите увидеть в видео.
- Если вы не можете получить желаемый результат, попробуйте отключить опцию "Enhance Prompt". В этом случае требуется описать изображение + что должно происходить в сцене.
- При неулучшенных описаниях вы можете увидеть отсутствие или низкую динамику движения. При необходимости попробуйте включить в описание подсказки о движении.
- В любом случае, полезно как можно подробнее описать важные детали изображения, какие действия выполняются и как должны двигаться различные части сцены. Например, A woman dancing ballet, her arms gracefully extending upward as she twirls around, the dancers behind her bowing low to the ground.
Text to Video
- Отличный способ начать получать хорошие результаты - использовать "Enhance Prompt". Включив эту опцию, вы можете использовать короткие описания, такие как *"a teddy bear swimming in the ocean"*, и Dream Machine автоматически сгенерирует дополнительные описания, чтобы помочь создать более детальную генерацию.
- Если вы не можете получить ожидаемые результаты, попробуйте без "Enhance Prompt". Неулучшенные описания должны описывать содержание сцены и желаемое действие (3-4 предложения). Например: "*In a somber, nostalgic style, a young man sits on a tree stump in a forest, the warm autumn leaves surrounding him. He wears a brown jacket, dark shirt, and blue jeans, his fingers deftly moving along the fretboard of an acoustic guitar.*"
- В целом, вы можете получить лучшие результаты, если будете более конкретны в отношении:
- Движения камеры: *"A dramatic zoom in", "An FPV drone shot"*
- Действий и движений: *"A teddy bear swimming with its arms and feet as the turbulent water splashes all around"*
- Особенностей объектов: *"A white teddy bear wearing sunglasses with soft fur texture"*
- Обстановки и фона: "A beautiful cloudy sunset near a Caribbean beach"
На днях вышла очередная модель Luma - “убийца” Sora (модель от Open AI, которая генерирует фантастические по качеству видео по тексту)
С учётом наплыва активности на новый сервис, запустив генерацию вчера в районе 21, где-то под утро видео-таки сгенерировалось (довольно хорошее качество, кадры хорошо согласуются друг с другом, движения плавные).
Почитал про команду: изрядный штат ребят с большим опытом в 3D. Вот первая фамилия в команде
https://yoopaul.github.io/
Ну и остальные далее тоже ребята с авторством в статьях по NERF и прочему
https://lumalabs.ai/team
На мой взгляд вновь подтверждается, что то, что мы называем «видео» - это на самом деле основано на огромных массивах рендерингов сцен.
Snap, кстати, на днях выпустили статью про синтез 4D сцен на базе диффузионных моделей генерации видео (сначала синтезируются ролики text-to-video моделью, а далее каждый кадр фиксируется и создаются «пролёты» на базе гауссова сплаттинга)
Часто слышу фразу «будущее, которое мы засужили» и работаю над такими темами в проектах. Моргнешь один раз, а будущее, которое ты генерировал — это уже настоящее.
Модные деды с робопсами на Патриарших. Аннушка уже пролила масло на механизмы восстания машин.
Почему-то тема НейроАлисы очень активно существует в нашем пространстве.
От колонки Яндекса (то есть в доме живет целый еще один член семьи) до разных художественных проектов. Мой учитель Вадим Эпштейн делал проект про Алису, я делала «Алису в Нейроцарстве» для Зарядья. Сколько их еще!
Для всего этого были использованы разные нейросети, пайплайны и сюжеты. Загадочно, что так, но это хороший материал для анализа работы и прогресса нейросетей. Ну и техник самих авторов.
Вот и тут проект Google с их сеткой Imagen2. Они дали доступ нескольким художникам к новым функциям — созданию модели по уже существующим работам. Это не прорыв, но думаю, там хороший UX, а такого пока нигде нет, только референсы. Художники натренировали, сделали иллюстрации к Алисе и их можно посмотреть по клику на текст Кэролла.
Подача хорошая, чтобы привлечь к этой нейросети внимание.
Трейлер фильма на нейронках (знаю, было), но какое качество и драма!
Автор ролика Anonymouse поделился в твиттере своим новым нейронным роликом. В комментариях даже отметилась Крис Каштанова, так что ролик хороший, посмотрите. Мне нравится отсутствие мыла, которое часто есть у Runway.
Сделано возможно полностью в телефоне: Midjourney, Runway, Capcut. Целая история буквально из кармана.
Шикарная статья Марии Кувшиновой на Blueprint о том, как нейросети стали апостолами сюрреализма
Кроме качественного анализа, исторических справок еще и работы любимых нейросетевых художников, например Анастасии Владимирской и Никиты Панина.
Я бы правда еще добавила именно в этот материал очень сюрреалистичного Льва Переулкова. Особенно его последние сюжеты, где реалистичность пленочного фото сталкивается с невероятными сюжетами.
Время благотворительности на канале 🫀🐈⬛
Нет, я не собираюсь раздавать какие-то инвайты, биткоины, подписки и прочее.
Недавно мне написали из пензенского фонда «Рука помощи бездомным животным» и попросили рассказать про игру, которую они сделали в Telegram. Игру можно пройти за донейшн на строительство ветеринарного центра. Бот @superpit_bot называется «Котгвартс», там милые звери, факультет Грифинкот и Пёсиндуй, все сгенерированно в Midjourney. Мне это очень симпатично, наконец-то организаторы таких инициатив могу генерировать контент сами!
Заходите пожалуйста в игру или можете просто задонатить приюту. Лучший способ отвлечься от монитора и потрогать траву — помочь ближнему 🐕🐈⬛🫀
Чтение, которое перевернет ваш взгляд на AI в искусстве и культуре
Это 'Artificial Aesthetics: A critical guide to AI, media and design' Льва Мановича и Эмануэль Ариелли.
Книга состоит из 7 глав на данный момент, каждая из них выпускалась отдельно, первая опубликована в 2021 году, самая поздняя - в марте 2024, в сумме 159 страниц, язык английский. Супер свежие, максимально актуальные примеры и рассуждения.
Если вы плотно погружены в работу с нейронками в творчестве, эта книга может дать вам более упорядоченные мысли о контексте, в который ворвался ИИ, более широкий взгляд на его место в современной культуре и возможно, на себя как художника. Если вы что-то слышали про сгенерированные картинки, но не очень понимаете, в чем там замес, то вы поймете, как концептуально устроена генерация и как ее методы влияют на наше мироощущение. Если вы вообще ярый противник "бездушных AI-артов", то вы поймете, что может быть глубинной причиной этой бездушности, можно ли её преодолеть и, возможно, ваше отношение изменится (но даже если не изменится, то у вас на руках будут аргументы, построенные на сильной базе).
Мое собственное отношение к AI тоже немного изменилось после прочтения. Я не была ни фанатом, ни хейтером, периодически юзала эти инструменты, но не вдавалась в глубокое их изучение. Меня раздражали тонны однотипных вылизанных картинок, при этом я знаю несколько отдельных ИИ-артистов, которые делают вещи, вызывающие у меня нереальный восторг.
Но теперь я смотрю на ИИ-картинки, видео, музыку и т.д. и вижу механизмы, культурные и технологические, которые стоят за "идеальным", за уникальным, за скучным и за любопытным, и которые развивались задолго до ИИ и логично отразились в нем. И воспринимается это все теперь с бОльшим исследовательским интересом и с меньшим слепым возмущением.
Так что очень советую. Выше прикрепляю файл с книгой. И ссылку на источник.
За рекомендацию спасибо ЭйАйЛере
Сила мозаики и нейронок на Outline
Я фанат эстетики советских мозаик и считаю их остатками более развитой цивилизации, а их утрату, которая до сих пор происходит — большой потерей.
Sila Sveta сотворили небольшое чудо — это проект AI MOSAICS на прошедшем в эти выходные фестивале Outline. Статические изображения в них сделаны нейронками, а анимацию делали уже дизайнеры.
Кроме проекции на фесте были такие открытки, сделанные с помощью лентикулярной печати.
Арт-директор Вероника Боглай поделилась со мной, что нейронки очень ускорили и упростили процесс. Мне кажется, еще года полтора назад мы не могли сделать что-то подобное в нейронках, эффект смальты давался бы с трудом.
В эту среду, 17 июля в 20:30, на Плюс Даче в Парке Горького пройдет лекция Валерии Титовой — участник комьюнити SXEMA, нейрохудожница, евангелист нейросетей, автор телеграм-канала ЭйАйЛера⚡️⚡️⚡️
Она выступит в рамках паблик тока с темой «Нейрохудожники: между технологией и искусством»
Подписчики Яндекс Плюса смогут попасть на мероприятие по предварительной регистрации. Те, у кого подписка не подключена, могут оформить бесплатный пробный период на сайте.
*** Регистрация на мероприятия обязательна.
Ссылки на регистрацию для посещения мероприятий:
🕕 18:00
Мастер-класс по нейросетям с Никитой AI
Зарегистрироваться.
🕣 20:30
Public talk о цифровом искусстве
Зарегистрироваться.
🕘 21:15
Просмотр и обсуждение фильма «Территория Гамлет»
Зарегистрироваться.
🕥 22:25
Концерт «CEAM Artists»
Зарегистрироваться.
Присоединяйтесь к искусству будущего вместе с restore:digital art 💜
#sxema_news
Arata Fukoe и его невероятный клип через нейронки
🍎 Автор работы уже делал невероятные вещи через Gaussian Splatting и множество гопро камер, а теперь показывает мастерство клипмейкинга через нейронки.
Музыка: ChatGPT, Sunoai
Видео: DreamMachine, Gen-3, Kling
Картинки: MJ, SD
Монтаж: Photoshop, After Effects
📕 Это если мы говорим о полных нейронных видео, но можем посмотреть на классические работы с небольшими вставками нейронок:
Видеоклипная работа Ramzoid (Это один из любимчиков Славы Мэрлоу, а так же мой любимый артист) в этом клипе часто используется generative Fill от Adobe, когда края картинки дорисовываются, а центр остается оригинальным видео.
И так же есть момент с DreamMachine, сцена в прачечной, когда мы берем последний кадр из видео и подаем в видеонейронку для артового продолжения кадра.
Успех и мемность видеомоделей, а так же некоторые старые приемы, которые мы видели уже 2 года назад, становятся вновь актуальными как части видеоэффектов для клипов.
Open-call для цифровых художников 🟢
🟢С радостью сообщаю о запуске опен колла «Час цифры» — первого в мире сетевого̆ фестиваля медиа искусства.
🟢Вы можете принять участие со своими работами в пяти номинациях:
IT science-art, Новые грани реальности, Города будущего, Вселенная киборгов, Парки будущего, и Наследие в цифре.
🟢Прием заявок открыт до 16 сентября.
🟢Работы финалистов будут показаны одновременно на цифровых экранах Москвы и других городов России 4 октября в рамках «Ночи инноваций».
🟢В прошлом году я победила в open call и мои 3 работы демонстрировались на медиафасаде. Это открыло для меня много новых возможностей 🦋
В этом году я с гордостью вхожу в состав жюри в категории «Вселенная киборгов».
Не упустите свой шанс проявить себя и показать миру свои работы.✨
➡️ Подробности на event.cdp.moscow/digitalhour.
всю ночь тестировал новую функцию люмы, которая работает на основе двух ключевых кадров. загружал свои рандомные генерации. считаю, что это будущее дизайна и анимации, потому что такие неожиданные переходы человек делает редко.
я купил подписку, но можно попробовать бесплатно на сайте люмалабс (5 штук в день, 30 штук в месяц). пока что криво, но это только начало. ещё больше стану экспериментировать с ген-3: он вот-вот выйдет для всех в открытом доступе и прям близок к соре от опенаи.
В сети появился Glif — генератор мемов Wojak, мне конечно больше всего понравились ИИ-артист и промтинженер — жестко, но справедливо…
Claude 3.5 генерирует текст
ComfyUI с помощью Wojak Lora генерирует картинку
JSON extractor + Canvas Block соединяет это все вместе
Оригинал и ссылка на генератор в X
Runway анонсировали новую видео нейронку Gen 3
Качество выглядит отличным, а примеры не такими стоковыии как у других нейронок.
Доступа пока нет, но скоро будет и как обычно в случае Runway любой каприз за ваши деньги. Думаю, с меньшим количеством цензуры, чем у Kling и SORA. Управляемость также обещают интереснее с помощью уже существующих в Gen 2 кистей, а вот хрон пока не больше 10 секунд.
Прекрасная видео гонка идет 🫀
Новый параметр в Midjourney
Мы забыли о Midjourney, а они о нас нет! Вместе со всеми прекрасными новостями, такими как выход новых видеомоделей от китайцев и Luma AI. И ужасными: новая SD3, мягко говоря, не очень.
Если вы оценили изображения на веб-сайте MJ и у вас достаточно данных, вы можете использовать параметр --p , чтобы применить свои предпочтения к изображениям, а не полагаться на общие данные обучения.
Цитируя нейроэнтузиастку из X Татьяну Цигулеву (подборка генераций в видео также ее с новым параметром):
Теперь я реально боюсь ИИ. Они больше отражали мою личность, чем мои дизайнерские вкусы.
txt2video стал еще доступнее, Luma Labs выкатили свой и дают создать 30 видео в месяц бесплатно. Качество на уровне SORA
Положить сервис можно тут:
https://lumalabs.ai/dream-machine/creations
Китайцы представили свою SORA
Все-таки в переделывании и улучшении в частности IT продуктов им нет равных. Модель генерирует 2-минутные видео в качестве 1080р.
Конечно, до кино-инструмента пока далеко, все слишком реалистичное. Настолько реалистичное, что мужик с лапшой кажется фейком.
Кстати интересно, как в Китае будет с цензурой такого реалистичного ИИ-контента и самой модели.
И, конечно, вопрос, на который не смогла ответить Мира Мурати: «а на чем собственно тренировали?».
В твиттере опять отменяют нейрохудожников, на этот раз художницу petravoice
Читаю упоительно реплаи, сейчас хотя бы просят записать таймлапс работы и предлагают карандаш и стилус, а не угрожают оторвать голову. Ну и делают мемы подобно приложенному.
И на том спасибо.
Вышло новое обновление бета-версии модели Kandinsky Video 1.1, который я тестировала до релиза
По сравнению со старой версией: уже не слайдшоу, а полноценные движения. Однако управлять ими сложно, можно только экспериментировать с промтами.
Все по-прежнему работает в боте, что довольно быстро и удобно, кнопки достаточно интуитивные, но для желаемого нужно делать много итераций.
➕
Можно выбрать соотношение сторон
Можно выбрать частоту кадра
Мне кажется, с низкой частотой варианты получаются поинтереснее (и быстрее), возникают скромные, но движения
Русификация, можно задавать промты на русском
Доступность модели
➖
Никакого управления движения, пока никаких стрелочек, кисточек и прочих лассо для контроля
Много артефактов на лицах, пальцы грустные, людей генерировать бесполезно
Нельзя повторить генерацию или изменить промт в удобном режиме, а видео приходится генерировать много
Слушается промта уже лучше чем предыдущая версия, но все равно плохо, выплевывает слова
🫀Я поработала с разными сюжетами, чтобы понять возможности сетки и ее границы и ощутила даже какую-то ностальгию. Думаю, для мультяшных и художественных сюжетов она вполне подходит, интересно, как с этим будет работать широкая аудитория.
Кажется, VERLAB окончательно и бесповоротно заняли место главного интерьерного и архитектурного нейропроекта.
Особенно круто, что они очень активно экспериментируют с элементами русской культуры в своих генерациях.
Прикрепляю, например, их новенькие работы на тему диванов в стиле наших старых добрых конфет и еще одну серию керамики в стиле советских елочных игрушек.
Очень рекомендую их канал, там у них еще супрематическая мебельная коллекция появилась недавно.
Еще они рассказывают и показывают как из эскизов интерьера сделать полноценный визуал. В общем выжимают из нейронок все, что могут и делают это наилучшим образом. Еще и промтами делятся в отдельном закрытом боте
Кстати, приглашал их на дизайн-выходные с лекцией про все это и, надо сказать, что это была одна из самых интересных лекций про работу с нейронками, что я видел)
#русскийдиджиталарт