47347
Личный блог Дениса Ширяева (🤍🇺🇦), про технологии, интересное или актуальное. В основном я по нейронкам. Связь и реклама: @thenbot
Тот случай, когда наткнулся на устройство и оно не выходит у тебя из головы. Жители больших и серых городов знают, как этого не хватает, когда ты просыпаешься и будит тебя не будильник и затянутое небо, а солнечный свет который попадает в квартиру — с тенью листвы, не слишком яркий, чтобы как в детстве в общем.
Так вот, в видео ниже — пико проектор на шарнире, который меняет направление света в зависимости от времени суток. Это выглядит и странно, и круто, и уже кибербанк.
https://vimeo.com/222447061#t=20s
Судя по всему это прототип, я уже 4 письма отправил автору и моих денег никто брать не хочет, но общий вектор движения технологии — мне очень нравится.
Сайт проекта:
https://komorebi.studio/
#реклама
Внимание Ростов-на-Дону и соседи, 9 сентября, Google Developer group из Краснодара и Ростова-на-Дону организовывают South DevFest 2017 — событие, продолжающее серию конференций DevFest.
16 спикеров и 400 участников расскажут о своем опыте и обсудят Kotlin, IoT, Android, Go, Firebase, Angular, PWA, CI, AR/VR, TensorFlow, кроссплатформенную разработку и Game dev.
Я, как человек который больше всего хотел научиться программировать и всегда делал это хуже всех окружающих, искренне завидую тем кто все это умеет делать и достаточно интересуется технологиями выше, что поймет спикеров — организаторы обещают людей с огромным опытом, так что должно быть интересно 🦄
Регистрация доступна по ссылке: https://goo.gl/PUEUTA
Гифка выше, не просто случайный набор кадров испорченный нейронной сетью переноса стиля. Это ученые демонстрируют фотореалистичные достижения нейронной сети которые лучше по результату чем даже у pix2pix, полюбившейся многим.
Собственно в гифке, датасет улицы наложен на кадры из GTA V и если у вас достаточно сильное воображение, как у автора этого канала, вы можете представить куда это идет и сказать вслух HOLY SHI~
Вот этот же момент в видео:
https://youtu.be/0fhUJT21-bs?t=118
Научный документ и код доступны по ссылке:
https://github.com/CQFIO/PhotographicImageSynthesis
Очень странная мода появилась в Китае с этими ресницами-диодами. Я не берусь судить с точки зрения красоты, но всячески поддерживаю наступающий киберпанк с точки зрения фаната Гибсона.
Внутри этой штуки LED диоды и небольшие источники питания, стоит это все — 5$ долларов. По ссылке ниже, можно посмотреть как женщина на себя это цепляет, выглядит странно, но наверное как только источники питания станут еще меньше, такого рода устройства будут еще популярнее и на все части тела 🦄
https://youtu.be/23aBq1dIK3A
То что нейронный сети уже узнают на фотографиях что угодно, это всем уже понятно.
Наткнулся на место, где можно поиграться самому с одним из таких датасетов и посмотреть поймет нейронная сеть, что на фото которое вы ей загрузите, или нет:
http://demo.cs.adelaide.edu.au/
Помимо сегментации (Generate segmentation), как на примере ниже, нейронная сеть может попробовать подписать текст (Generate caption) и объекты на вашей картинке (Object detection).
Результаты как правило хорошие, особенно если на фото есть люди, например, за обеденным столом. Особенно радует тот факт, насколько хорошо алгоритм вырезает область человека из фото, это значит, что через какое-то время в Photoshop станет на один удобный инструмент больше (запомните этот твит).
P.S. Вот прошлый пост, на тему распознавания объектов:
/channel/denissexy/421
Если попросить нейронную сеть (GAN) делать лица и наложить музыку, то получится примерно такое.
Достойная визуализация слова "крипота" 💖
Теперь вы можете порисовать вместе с нейронной сетью:
https://magenta.tensorflow.org/assets/sketch_rnn_demo/index.html
После того, как вы начнете рисовать объект, sketch-rnn попытается его дорисовать, работает довольно клево, ниже гифка. Сверху можно выбрать какой именно объект вы рисуете с нейронкой.
С телефона осторожнее — один датасет-каракуль весит около 5 мб.
Описание проекта находится тут:
https://magenta.tensorflow.org/sketch-rnn-demo ( 💖 Tensorflow)
В середине марта (до WWDC) Bloomberg делал пост о планах Apple на тему AR — там много слухов, часть из которых в итоге подтвердилась и в конце статьи речь идет о очках, которые, вполне логично выпустить, если решена проблема с трекингом поверхностей.
Ну так вот, по моему мнению, она решена в iOS 11:
https://www.youtube.com/watch?v=TBtwElmFbLA
И это настолько хорошо выглядит, что даже страшно представить, что было-бы, если бы кто-то из корпораций выпустил бы нормальные очки или линзы, в общем, устройство которые можно было бы использовать постоянно. Подождем немного и непременно узнаем.
Я так понимаю, что то, что показано в видео, было записано в специальной комнате с датчиками со всех сторон — но как же клево это все смотрится в AR 👾
На DTF вышел совершенно фантастический пост о возможностях AR kit в iOS11, с примерами. Я вот проморгал во время презентации на WWDС, что вокруг объекта в AR kit можно ходить и просмотреть его со всех сторон.
Жду не дождусь запуска AR kit на массовый рынок, чтобы посмотреть то, на что способны студии и инди разработчики 💖
https://dtf.ru/7618
Если вам кажется, что вы все понимаете в индустрии VR и вас сложно удивить, то я принес вам ссылку:
https://youtu.be/S5jWuwx1cP4
Я примерно понимаю, что происходит в видео, но расписывать это не возьмусь.
Вот официальная копипаста:
«We present FaceDisplay, a multi-display mobile virtual reality (VR) head mounted display (HMD), designed to enable non-HMD users to perceive and interact with the virtual world of the HMD user»
Скажу лишь только, что такой шлем очень бы пошел группе Daft Punk, но скорее всего не VR-геймерам (Если только за дело не взялась бы Nintendo)
Наконец, трезвые предсказания по VR\AR до 2025 года от Джези Скэла, профессора Carnegie Mellon University:
— Рынок VR игр достигнет $7,5-$22,5 млрд, что составит от 5% до 15% всей игровой индустрии [к примеру, рынок IoT платформ к этому времени не превысит $2 млрд]. Прогнозы Digi-Capital про рост рынка AR до $90 млрд к 2020 он называет «очень, очень неверным»;
— Рынок AR будет составлять всего лишь 15% от рынка VR;
— Большая часть взаимодействий с игровым миром будет реализованы через контроллеры, вроде Touch или Wands. Системы, которые бы отслеживали движения рук не будут активно внедрятся потому что а) дорого, б) они не точные, в) не передают тактильных ощущений;
— AR нужно много времени чтобы выглядеть так как повседневные очки. До этого момента AR будет громоздким и на улицах будет выглядеть глупо [Джэзи вспоминает чудовищный провал Google Glasses];
— Hololens не скоро станет повседневным явлением. Из-за тёмных стёкол сложно различить верхнюю часть лица. А общество не примет устройство, которое не позволяет установить естественный зрительный контакт;
— Никто не хочет быть собеседником человека с громадной камерой на очках, речь о приватность. Это еще одна проблема для развития повседневного AR;
— VR будет удерживать преимущество благодаря несравненно большему углу обзору;
— Сенсоры для аугментированной реальность находятся на стадии раннего детства: они недостаточно хорошо распознают окружающий мир и требуют много ресурсов.
И закончил он клёвой фразой «We are designing the eyes of the next generation. So I urge you to all work together to make sure we make the best damn eyes the world has ever known.»
(Да, у меня в последнее время любовь к скриншотам в стиле IE6, простите)
Читать полностью…
Собрал любопытные исторические карты обработанные нейронной сетью pix2pix
http://telegra.ph/Starye-karty-teper-novye-karty-06-08
Лучшее место в мире для учебы MIT (окей, я просто инженер) опубликовало в открытом доступе учебные программы по 21 дисциплине, включая Chemical Engineering, Civil and Environmental Engineering, Electrical Engineering and Computer Science (💖), Mechanical Engineering и тп, за 2016 год в открытый доступ.
Это значит, что вместо того, чтобы тратить 45000$ на год обучения, вы можете выучить все что вам нравится самостоятельно.
Ссылка которая сделает вас счастливым если вы любите учиться:
https://ocw.mit.edu/courses/
И если вам интересны курсы именно за 2016 год:
https://ocw.mit.edu/courses/new-courses/
В курсах есть все что нужно — видеоматериалы, презентации и задания, и все это само собой на английском.
Чтобы скачать какой-то курс нужно нажать кнопку как на скрине ниже — не за UX мы MIT любим.
В общем, успехов в науке 🦄
GAN конечно раз 100 уже упоминался на этом канале и карты он в стиле Google делал, и лица людей в HD генерировал, в общем никого уже не удивишь этим всем особо — но вот теперь по настоящему полезная ссылка — вы можете собрать аниме-девушку с теми параметрами которые вам кажутся интересными:
http://make.girls.moe/#/
Цвет глаз, волос, улыбка, очки и ленточки, в общем все это там можно конфигурировать под себя. Зачем это нужно я не знаю, зато примерно понятно, что лет через 10 никакой проблемы с внешним видом Siri или Google Now, или Kortana у человечества не будет — помощник будет выглядеть на ваш вкус.
Наконец-то ко мне пришел долгожданный ARM ноутбук за 100$, позже будет отчет о том, что это за зверь, а пока я покрасил его в Windows 95 и счастлив (Внутри Ubuntu 16.04 mate)
Читать полностью…
Продолжу доставать вас AR постами, простите 💖
По ссылке ниже эксперимент рендера в режиме реального времени с помощью iOS ARKit и Unity на iPhone 7.
То есть можно предположить, что кто-то достаточно талантливый в плане продакшена, сможет нас радовать фильмами в дополненной реальности с поддержкой геопозиционирования, и распознованием объектов, когда-нибудь.
https://www.youtube.com/watch?v=MyN2sPx-oy4
Сейчас, конечно, смотреть в телефон не очень удобно из-за небольших размеров экрана — но если бы это были очки, все было бы намного приятнее.
А вот что алгоритм подписал: "A man sitting on a bench next to a dog" ¯\_(ツ)_/¯
Читать полностью…
Многие пишут и спрашивают, забросил ли я канал (серьезно, человек 20 уже), нет не забросил, сейчас работы станет чуть поменьше и я выйду на привычное расписание, уже на следующей неделе 💖
https://vimeo.com/225331391
На видео ниже, вы можете посмотреть любопытный концепт фото-приложения в AR, то есть оно делает 2D снимки, привычные нам и оставляет их в том месте, где находилась камера в момент съемки.
Выходит довольно наглядно и во славу энтропии 👾
Любопытно было бы подвязать это к гео-данным и фоткам из инстаграма, чтобы посмотреть как выглядят все эти фото в реальном мире, и с каких ракурсов их фотографировали
Вы только представьте, через какое-то время, приложения по доставке еды обзаведутся такой AR фичей в рамках конкуренции между друг-другом:
https://www.youtube.com/watch?v=IjE1TnZ1S1c
Ох, скорее бы сентябрь, все это можно будет пощупать уже в продакшене. В целом и сейчас можно, но я искренне не люблю баги, поэтому решил не ставить новую версию iOS 11 раньше времени.
Это уже пятый пост про AR kit, я понимаю, что звучу как apple boy, но я все же о технологии, надеюсь Google допилит свой Tango на фоне таких успехов Apple с AR, и все в очередной раз изменится 🤖
И просто немного бытового применения AR
https://youtu.be/z7DYC_zbZCM
Вы наверное все слышали про то, что возможно телеграму достанется блокировка в РФ, а возможно и нет — я не знаю как там будет, про политику я не пишу принципиально, но пока мы вместе и никто нас не разлучил, я просто хочу сказать вам спасибо, за то, что так получилось, что вы читаете мой канал.
Веду я его где-то месяцев 6 уже и мне не всегда удается уделить ему достаточно времени, особенно в последние недели, но я даже и не думал, что хобби ковырять что-то в нейронках или делиться своими фантазиями о будущем, может кому-нибудь понравится настолько.
Спасибо, вам, вы такие сладкие что сахар горчит после вас!
(не удержался и сделал этот пост еще более мерзким)
И чтобы это сообщение несло хоть какую-то пользу, вот вам робот-картошка:
https://www.youtube.com/watch?v=oNjPHcIzQkM
А еще я зарегистрировал порнодомен где всегда есть актуальные копии постов с моего канала:
http://denissexy.com
💖 💖 💖
Трансфер стилей с помощью нейронных сетей, становится все лучше и лучше —14 июня появился документ описывающий работу алгоритма для переноса текстуры лица (если так можно сказать) с фотореалестичной детализацией. То есть вы задаете стиль который хотели бы получить и выбираете лицо, на которое хотели бы наложить этот стиль, и получается очень клево.
Сам документ вот: https://arxiv.org/abs/1706.04306
А ниже пример того, что удалось получить на выходе.
Помните француза который на документы свои рендеры подал вместо фото? Ну так вот, через какое-то время это сможет сделать любой желающий — было бы здорово получить такой инструмент внутри смартфона, чтобы селфи можно было бы не снимать, а генерировать 💖
Исходный код, пока, недоступен
Наконец-то кто-то сделал регулятор громкости который не стыдно поставить себе на сайт
Читать полностью…
На моём любимом канале «Kurzgesagt – In a Nutshell» новое видео:
https://youtu.be/WSKi8HfcxEk
О том как роботы захватывают рабочие места людей и о том, что в целом это не то же самое, что было в прошлом веке с автоматизацией производства — речь именно о замене людей алгоритмами, софтом.
Также в видео есть немного аналитики — на скриншоте ниже график возникновения новых рабочих мест в США, как видите, он так себе — а людей с каждым годом становится все больше.
С чем я абсолютно согласен — общество по всему миру будет меняться и поменяется еще при нашей жизни 💖🤖
Кто из нас не захотел бы быть доктором октопусом? Ну тем, который человеку пауку надавал еще, помните?
Так вот, в видео ниже дополнительная пара рук, которой управляют с помощью ног:
https://youtube.com/watch?v=sKjAp0iZ7dc