47341
Личный блог Дениса Ширяева (🤍🇺🇦), про технологии, интересное или актуальное. В основном я по нейронкам. Связь и реклама: @thenbot
Кстати, если кому–то до сих пор по какой–то необъяснимой причине нечего поставить на аватарку, то вам непременно следует заглянуть сюда:
/channel/avochki
⬆️ Это кстати реклама дружественного канала
(не нативная)
Всем привет – попробуем VR/AR день, да?
Любопытный концепт игры Portal для HoloLens от инди разработчиков
https://www.youtube.com/watch?v=aWRSCABrdR8
Осталось еще подождать лет 5 пока трекинг объектов сделают более плавными, уменьшат сами очки и можно счастливо бегать по городу ловить своих покемонов. Или монеты. Или от монстров прятаться, полиция оценит.
Дополненная реальность (AR) – вот технология о которой я могу говорить бесконечно. Очень увлекательно наблюдать как ее постепенно развивают – в видео небольшой прототип HoloLens приложения от японцев. Ну и самое главное в AR технологии, это то что она включает в себя и VR, то есть это смешивание технологий позволит использовать параллельно и виртуальный мир и мир дополненной реальности.
http://shir-man.com/static/tg/hololensjp.mp4
И у этого всего большие перспективы – например, представьте что вы едете в такси которое стоит вам копейки, но все стекла этой машины сделаны в виде прозрачных экранов, и вся реклама накладывается поверх реальных объектов вокруг вас – именно поэтому такси и стоит копейки, сервису платят рекламодатели за рекламу внутри такси и это позволяет снизить стоимости поездки за километр.
Ну, или как-то так 🤓
Объявляю завтра днем VR/AR постов, нет сил держать в себе!
Время опроса: Как вы думаете, лет через 5, звоня кому-нибудь через видео-звонок будет ли сервис (допустим скайп) генерировать ваше изображение без вашего участия? То есть, у сервиса будет пару ваших видео и он просто будет накладывать речь на мимику?
😒 Нет, такого не будет – 96
👍👍👍👍👍👍👍 36%
☺️ Да, это логично – 90
👍👍👍👍👍👍👍 33%
💁🏻 5 лет слишком мало, скорее 10 – 47
👍👍👍 17%
🍅 Я томат! Ау! – 36
👍👍👍 13%
👥 269 people voted so far. Poll closed.
Если вы вдруг хотите получить реп написанный нейронной сетью, например такой –
https://soundcloud.com/shirman/rapping-neural-network-python
То вам нужно открыть этот исходный код на питоне и запустить его у себя:
https://github.com/robbiebarrat/rapping-neural-network
💖
Цитата:
Fuck 'em if they don't understand my genius, bitch
I'll be Albert Einstein times a million, bitch
P.S. Если кто-то адаптирует этот код на русский, будет очень забавно как мне кажется.
Я как-то потерпел неудачу с Нейронным Кругом пытаясь заставить char-rnn написать новый Нейронный Централ, ничего не вышло, но я жду реванша – и это прекрасная почва.
Нейронка для определения типа блюда, открытые исходники, открытый датасет, enjoy 🤖💖
То есть она вам скажет – суши на фото или сашими, если вы вдруг не знаете
http://blog.stratospark.com/deep-learning-applied-food-classification-deep-learning-keras.html
РПЦ запустила православный мессенджер «Правжизнь Telegram»
https://pravzhizn.ru/downloadmessenger – Android / Web
¯\_(ツ)_/¯
Сдерживаюсь, чтобы не шутить про ботов на этой платформе
Boston Dynamics показали на презентации одного из своих "наводящих ужас" роботов. И там есть чему наводить ужас – посмотрите минутный ролик, эта тварь даже прыгает:
https://youtu.be/giS41utjlbU
Осторожно, громкий звук.
А если серьезно – то это наверное один из немногих роботов который уже более менее мог бы справляться с повседневными задачами в каком-нибудь офисном здании, ну, в рамках тестирования.
Пример работы алгоритма: мужчина -> женщина, женщина -> мужчина
Читать полностью…
Я часто пишу о датасетах которые нужны для того чтобы нейронка начала что-то "узнавать" – на самом деле это просто набор картинок (если мы про визуальные образы) обработанных специальным образом – обрезаных до одного размера, где лица, если это лица, расположены по центру картинки, при определенном свете и тп. В общем не магия, но интересно тут именно ко-во информации нужное для "скармливания" нейронке – "дофига" это как-то не число вовсе, поэтому кто-то сделал проект: http://automato.farm/portfolio/trainning-cards/
Чуваки распечатали 5000 карточек с собаками и получили 1.2 метра карточек или 8 килограмм картинок, этого кол-ва информации достаточно чтобы алгоритм начал узнавать собаку.
И тут странное – они продают этот набор за 5000 долларов. Многие часто обсуждают о том кто и как зарабатывает с помощью машинного обучения, ну что же, у этих чуваков самый странный способ из всех что я видел – на карточках с собаками.
Там по ссылке еще детали проекта, ниже фото набора.
А у меня к вам вопрос, считаете ли вы "видео-игры" (Это когда комбинируют 3D и реальную съемку в одном кадре) фигней?
🍅 Я томат – 66
👍👍👍👍👍👍👍 50%
👍🏻 Клевые, я бы поиграл – 52
👍👍👍👍👍👍 40%
👎🏻 Фигня же – 13
👍 10%
👥 131 people voted so far. Poll closed.
Отвратительно, вот что сказал бы мой папа посмотри он на это приложение для iOS: Socratic | http://apple.co/2jy6dkB
Это уже не первое приложение, которое способно решать математические уравнения по фотографиям, но первое на моей памяти которое может также решать обычные вопросы из тестов, вроде "Выпечка хлеба, это эндотермический процесс?" – алгоритм определяет тематику и категорию вопроса с помощь машинного обучения, анализирует тысячи домашних заданий и пытается подсказать нужную карточку с ответом, как пишут студенты – работает отлично.
Работает только с английским, бесплатно, даже in-app нет, что приятно. Но по своему опыту скажу, что ГДЗ по алгебре купленный мной в 7 классе было худшим, что со мной случалось в 7 классе, пришлось потом страдать и учиться самому отдельно.
Если качать лень, то вот видео:
http://shir-man.com/static/tg/socratic.mp4
Гифка где есть я и антиулыбка: http://bit.ly/2kBGz39
Читать полностью…
Вообще стоит начать с того, что VR/AR по моему мнению в будущем одно устройство.
Ну, в целом понятно почему – дополненной реальности, если мы говорим про очки, не может быть без VR, так как если закрыть черным виртуальным полотном экран AR очков и нарисовать вокруг пользователя горы – то получится как раз VR.
Текущий статус VR интригует – но это все еще далеко от повседневного использования или коммерческого успеха, насколько я понимаю зарабатывают в VR пока только эвент-агентства и инди-разработчики в стиме – первые, так как продают в пакете что-то в стиле "WOW" для клиента, вторые – так как довольно просто и приятно быть в плюсе если вас в команде пару человек, а не 200+ как в больших студиях.
А до того момента, пока VR не станет повседневным, мне кажется можно и не ждать каких-то особых успехов дополненной реальности (Есть слухи, что новый iPhone будет что-то поддерживать из AR технологий, в плане чипа трекинга объектов – но это слухи и скорее всего Apple просто уберет какую-то кнопку с устройства и обновит набор emoji ¯\_(ツ)_/¯ ).
Так вот, в видео ниже комбинация технологий Microsoft Hololens и HTC Vive для тестирования концепции VR и AR как единого целого – один участник рисует объект в виртуальной реальности, другой видит это все прямо здесь и сейчас в комнате.
Сама комната условна, так как по идее участники могут находится на любом расстоянии друг от друга. И не обязательно даже существовать – все это может быть презентацией продукта или симуляцией в целом, ну, в теории.
https://youtu.be/XPYb2IsZL68?t=46
Проект написан за пару дней и его исходный код открыт 💖
https://github.com/dag10/HoloViveObserver
На канале теперь больше тысячи подписчиков и чтобы выразить свою благодарность – я как всегда делаю глупый стикер с ошибкой, ура! 🤖💖🤓
Читать полностью…
Мнения в опросе выше разделились – 96 человек считают что такого не будет, 90 человек считают что будет, а я хотел бы показать ролик от 4 февраля, на который я наткнулся совершенно случайно:
https://youtu.be/af_9LXhcebY?t=31
Это видео, где датасет натренированный на музыкальных клипах певицы Françoise Hardy прогнан через нейронную сеть которая пытается повторить мимику и жесты говорящего. Иными словами аватар Françoise Hardy открывает рот, делает паузы, улыбается и т.п. Эффекты зума и смены ракурса добавлены автором специально, для тестирования алгоритма в условиях "стресса", мне кажется нейронка прекрасно справилась.
Ну и вот еще, что я хотел бы добавить относительно опроса в целом – конечно, 5 лет это моя влажная фантазия, но я настаиваю – нельзя руководствоваться скоростью технических открытий прошлого, для прогнозирования будущего, так как эта скорость не линейная и только растет (Прекрасный лонгрид на тему: https://d3.ru/684922).
И это видео сделал один человек, в свободное время, как хобби и получил неплохой результат – если бы за это взялся MS или Google, мне кажется за 5 лет они бы выкатили достойное решение, конечно, если бы им это было нужно.
В общем, лично я проголосовал что я томат.
А еще хотел сказать всем спасибо за то, что подписались на канал, *обнимает*
Нет, ну серьезно, Тимати и весь его Black Star уже можно этим заменить
Читать полностью…
Мне очень нравятся все эти события связанные с 3D принтерами и печатью металлом – современные алгоритмы печати рассчитывают как потратить меньше материала, и получить прочность не хуже "классической конструкции", а может даже и лучше.
Студенты из института TU Delft, Амстердам, напечатали раму для велосипеда – она весит 20 кг и не хуже любого другого велосипеда, во всяком случае он едет и довольно прочный.
Еще больше фото и видео процесса создания – http://bit.ly/2jOUMKb
Этим проектом студенты с помощью mx3d (это те чуваки которые планирую мосты печатать роботами – http://bit.ly/2jQSGF1) хотели показать, что технически печатать объекты среднего размера можно уже сейчас.
Кроме того – велосипед похож на транспорт чужого, что всегда плюс.
P.S. Я кстати выслал бы сейчас 3-4 фото этой рамы, чтобы вы не кликали по ссылкам но не делаю этого, так как у некоторых включены "уведомления" на моем канале – я конечно ценю, спасибо вам, но я прошу вас их отключить, чтобы я не волновался, что кто-то из вас ведет сейчас автомобиль, у вас прекрасная семья, беременная жена, мальчик на заднем сиденье зачитывает наизусть Бодлера, в машине играет сюита для виолончели от Йо-йо Ма, и тут приходит пуш от меня про велосипед и 3D печать, и БАБАХ СТОЛБ ВСЕ УМЕРЛИ ВЕЗДЕ КИШКИ МАЛЬЧИК ТРЯСЕТ МАМУ И ПРОСИТ ПРОСНУТЬСЯ ЕЕ ВОЛОСЫ СЛИПЛИСЬ И ОНА МОЛЧИТ
Не нужно такого, отключите 💖
Пришел с али неодимовый магнит. Вот, магничу.
Например, оказалось, что замок в туалете он способен вырвать с корнем, но не "отпустить" металл.
Провожу исследования дальше.
С вами был CERN Cheriomushki.
Ничего необычного, просто нейронка pix2pix пытается дорисовать лицо по скетчу.
http://shir-man.com/static/tg/pix2pix.mp4
Я кстати о ней писал уже тут: /channel/denissexy/54
💖🤖
Не так давно я получил это сообщение в фейбуке, так как делал там пост о нейрокотиках – он не очень интересный, там просто котики и фильтры которые мне понравились.
Ситуация показалась мне забавной, так что я хотел бы на всякий случай заранее вас отговорить платить за любые проявления neural art, во всяком случае таким подозрительным типам как я.
Вы открываете этот сайт https://dreamscopeapp.com, загружаете туда любое фото и получаете возможность в качестве эффекта загрузить любую картинку, это очень удобно и очень бесплатно. Более того, за 300 рублей в месяц вы получаете на выходе hd картинки. Более того у них есть приложения.
Не платите, пожалуйста, за neural art, никому, прошло то время когда нужно было у себя его на vps разворачивать.
Надеюсь, рынок услуг нейро-арта разрушен, а я пошел 🤓💖🤖
Наткнулся на интересный проект для дублирования стиля рукописного текста – http://visual.cs.ucl.ac.uk/pubs/handwriting/
Вы скармливаете алгоритму чьи-то рукописи, причем хватит даже пары слов и алгоритм создает вам рукопись этого человека.
Ниже пару примеров.
Интересно, как скоро подписи перестанут иметь юридическую силу, учитывая такие возможности копирования рукописного шрифта.
По ссылке и датасеты, и примеры и Линкольн с Кало 💖
"Больной ублюдок" обычно говорят после такого рода постов и отписываются пачками, но я правда считаю это интересным, честно!
Все вы знаете игру Super Mario World для Super Nintendo, это офигенная игра которая вышла в 1990 году и она один из лучших шедевров выходивших под эту платформу вообще, вы всё это прекрасно знаете. Так вот, эту игру как только не разбирали описывая ее код и сегменты памяти отвечающие за какие-либо действия игрока, ну оно и понятно, столько лет прошло с момента выхода – так вот, меня впечатляет другое, что люди знающие как работают алгоритмы внутри игры с помощью последовательности действий игрока способны перезаписать определенные ячейки памяти отвечающие за, например, местоположение игрока на глобальной карте. Иными словами – прыгнув в одном месте два раза, выкинув Йоши, сев на него обратно и проглотив монетку люди записывают в определенный сегмент памяти игры новые данные, о том, что сейчас например игрок у последнего боса. Более того, автор видео не только себя туда телепортирует, но и создает себе бонус в виде облачка для того чтобы боса было проще пройти. В общем – это использование игровых эксплоитов равносильно магии, как по мне.
Ссылка на видео с эксплоитом "Powerup Incrementation":
https://youtu.be/07mkQJ3Fecg?t=121
И любопытно сколько еще таких вещей может содержаться в привычном для нас софте – то есть, может некая система "автоматизированной тестировки багов и безопасности" могла бы найти такие вещи, которые нам бы и не снились – и через лет 10 окажется что весь софт выпущенный до 2027 года нельзя использовать вообще и считать что он безопасный.
Если вы умеете в ассемблер, то тут детальнее описано как это работает:
https://youtu.be/TqK-2jUQBUY
Кстати, этот чувак из первого видео довольно известный – на его канале можно найти эмулятор для Atari 2600 написанный в Майнкрафте без модов и Флэппи Бёрд внедренный в код супер марио "на ходу":
https://youtu.be/hB6eY73sLV0
Если вам вдруг интересно как в этом приложении для iOS работает смена пола по фотографии с помощью нейронной сети, то вот так или как-то так:
https://github.com/david-gpu/deep-makeover
Это нейронная сеть (DCGAN) заточенная под смену пола. К сожалению на выходе получаются картинки разрешением 80 на 100 пикселей, что совсем не много, но чтобы поиграться с собой женщиной или с собой мужчиной – должно хватить. Детали работы алгоритма по ссылке выше.
Исходный код открыт 💖
#Tensorflow #Python
Дорогие томаты, я там выше как-то уже писал, что VR это очень страшно. Многие мне написали, мол, это ты просто впечатлительный – я само собой такой, но настаиваю, что VR это очень страшно и сведет кого-то с ума.
Не так давно вышел Resident Evil 7, который я прошел и рекомендую всем – так вот он поддерживает Playstation VR.
И вы посмотрите как выглядит в RE7 "VR experience" – это ссылка на конкретное время в ролике, надеюсь телеграм ее поддерживает – осторожно – громкий звук и спойлер:
https://youtu.be/x76ga90mZck?t=4448
Играя просто на телевизоре ты это место проходишь сразу и спускаешься вниз, без всяких мыслей – а тут чувак 20 секунд боится вниз спуститься. В общем, чтобы быть VR стримером нужны металлические яйца 🙈
Ого!
https://youtu.be/EXW9ohzxsNE
В общем если коротко, Responsive Action-based Video Synthesis позволяет синтезировать видео в режиме реального времени – просто и быстро подвязывая его к каким-то действиям пользователя и результат которых вы сразу видите на экране – в теории это позволит по новому взглянуть на "видео-игры" (они в свое время по моему мнению не зашли как раз из-за ограничения свободы в игровом мире и "угловатости"), ну и видео редактирование. Работает алгоритм быстрее и проще чем Adobe After Effect, так как построен на другой архитектуре.
В видео, ближе к концу – аналог известной игры где управляя машиной пытаешься не врезаться в другую, впечатляет именно то, что авторы уверяют, что такое сделать очень просто.
Сайт проекта: http://bit.ly/2jq5jeN
Когда рекламный баннер машины с автопилотом не очень хорошо справляется с функцией рекламы автопилота:
https://gfycat.com/ThoughtfulEmbellishedGreendarnerdragonfly
Напомнило sv_cheats 1 –> noclip
Я уже как-то писал о том, что нейронные сети могут натянуть улыбку на кого угодно, ну так вот теперь вышло приложение для iOS которое это делает - ниже гифка с до и после, как по мне, вполне не плохо. Ну и там еще есть пару нейронных эффектов типа старости, молодости и смены пола 👸🏼
Ссылка на апп: http://bit.ly/2kBLCR8
Ссылка на прошлый пост про улыбку и нейронки: /channel/denissexy/123