Нейроканал

08 July 2023 17:00

​Дорогая, проснись, вышел Снайдеркат по PyTorch

Наконец мы приближаемся к достойным длительностям обучающих видео. 25 часов туторов по PyTorch с объяснениями и всеми плюшками, что только возможны. Отмеченные как «для новичков». Так же прикладываем сайт из рекомендаций в начале видео, где можно учить PyTorch в текстовом формате, если вам это больше нравится.

Посмотреть:
https://www.youtube.com/watch?v=V_xro1bcAuA

Почитать:
https://www.learnpytorch.io/

#это_база #программирование

Нейроканал

06 July 2023 21:44

​Все python-фреймворки для ML за 200 секунд

Никогда не покупайте курсы, у которых в рекламе нечто подобное, иногда только на установку нужно потратить больше времени. А вот если вы только в начале своего ML пути и хотите выбрать, что изучать, можете быстренько посмотреть пару обзорных видео по самым популярным фреймворкам для ML — PyTorch и TensorFlow

Посмотреть (PyTorch за 100 секунд):
https://www.youtube.com/watch?v=ORMx45xqWkA

Посмотреть (TensorFlow за 100 секунд):
https://www.youtube.com/watch?v=i8NETqtGHms

#позалипать

Нейроканал

03 July 2023 21:37

​Мы же все тут эксперты по ИИ, так?

Поэтому можете посмотреть как конкретно этот эксперт по ИИ отвечает на вопросы из заморской запрещённой соцсети с птичкой на иконке. И заодно проверить, насколько ваше собственное мнение совпадает с ним или нет (и смог ли он вас в чём-то переубедить, ведь он в экране, а значит это +20 к убедительности).

Посмотреть:
https://www.youtube.com/watch?v=Puo3VkPkNZ4

#позалипать

Нейроканал

02 July 2023 12:11

​Мы на правильном пути до нетраннеров из Киберпанка

Если ИИ учился программировать на всём что есть в интернете, то конечно же он научился приёмчикам от хакеров. Конечно вряд ли на ютубе найдётся гайд, как получить доступ к серверам Google с помощью ChatGPT, но протестировать способности ИИ в специально сделанных Capture The Flag соревнованиях для хакеров можно.

Посмотреть (ИИ в CTF):
https://www.youtube.com/watch?v=ZG9DUQ0s0QU

Поcмотреть (разговор про ИИ и кибербезопасность):
https://www.youtube.com/watch?v=OJxRruHrSow

#программирование

Нейроканал

29 June 2023 21:52

​Продолжаем создавать окружение из фотографий

Мы уже показывали, как эксперты из Google моделируют 3D-панорамы и окружения с помощью нескольких фотографий одного объекта с нескольких сторон. Новизны в идее нет, но теперь модель работает в 20 раз быстрее и при этом хорошо справляется с тонкими объектами (например, велосипедные спицы). А ещё они обещают что вы теперь сможете смоделировать свою квартиру с помощью всего нескольких фотографий и непосредственно на смартфоне. Ну или кто-то, кто имеет доступ к камере вашего смартфона, хе-хе.

Посмотреть:
https://www.youtube.com/watch?v=31oxj6mcsOM

Почитать:
https://jonbarron.info/zipnerf/

#статья

Нейроканал

26 June 2023 18:44

​Надеваем перчатки, господа

Так как размерности любят убегать куда-то в вправо по оси натуральных чисел, человечество выдумало несколько способов вернуть их назад. В когорту таких способов уменьшить размерность, из которых мы уже обозревали SVD и PCA добавим, пожалуй, GloVE (изобретение Стэнфорда, основанное на похожести слов в подпространстве).

Посмотреть (хиндиш):
https://www.youtube.com/watch?v=Fn_U2OG1uqI

Посмотреть (лекция Stanford):
https://www.youtube.com/watch?v=ASn7ExxLZws

#это_база #лекция

Нейроканал

25 June 2023 10:00

​ИИ покусился на оптимизацию библиотек на C++ и победил

AlphaDev от Deepmind улучшил сортировочные алгоритмы из библиотеки LLVM libc++, получив 70% улучшение на коротких последовательностях и 1.7% на последовательностях до 250 тысяч элементов. Но есть нюанс.

О недооптимизированности сортировок из LLVM libc++ разработчики знали давно, но видимо ни у кого не доходили руки всё доделать. Однако сейчас патч от ИИ уже ушел в новую версию библиотеки. Возможно, если ИИ не будет писать за нас код, то его можно локально прикладывать к разнообразным функциям для возможной оптимизации. Но самим думать тоже надо.

Посмотреть:
https://www.youtube.com/watch?v=n2qCry_o2Fs

Почитать:
https://www.deepmind.com/blog/alphadev-discovers-faster-sorting-algorithms

#статья

Нейроканал

23 June 2023 10:05

​Немного линейной алгебры никому ещё не навредило

Под немного мы конечно же предполагаем полные курсы по линейной алгебре и матричным методам от MIT. Вся база для работы с матрицами, SVD-разложение, backpropogation, градиентный спуск, первые модели нейросетей (могут ещё спросить на собеседовании) и даже немного работы с сигналами в качестве вишенки на торте. Курсы пересекаются в некоторых местах, но это нормально. Так как это MIT, знание английского необходимо.

Посмотреть (линейная алгебра):
https://www.youtube.com/playlist?list=PL221E2BBF13BECF6C

Посмотреть (матричные методы):
https://www.youtube.com/playlist?list=PLUl4u3cNGP63oMNUHXqIUcrkS2PivhN3k

#это_база #математика

Нейроканал

22 June 2023 16:06

Catch me if you can… и выиграй скидку на курсы по Python!

Вместе с образовательной платформой Нетология сделали игру, в которой вам нужно попадать по питонам и получать за это скидку на курсы. Готовьте свой молоток — охота на Python в самом разгаре: https://tprg.ru/JRve

Реклама ООО «Нетология»

Нейроканал

21 June 2023 16:01

​Spark UDAF — мощный инструмент для анализа данных и обработки сложных операций агрегации в Apache Spark. Как с помощью него разработать свой агрегатор?

Поговорят об этом 27 июня в 20:00 с Вадимом Заигриным, ведущим эксперт по технологиям в Сбербанке и преподавателем OTUS.

Вебинар «Spark UDAF: разрабатываем свой агрегатор» приурочен к старту онлайн-курса «Spark Developer» в OTUS.

На открытом уроке рассмотрят агрегирование данных в Spark, стандартные агрегатные функции и создание собственных агрегатные функции (UDAF). После вебинара вы научитесь создавать собственные агрегатные функции.

Урок предназначен для разработчиков Spark, которые хотят выйти за рамки стандартных функций и узнать, как создавать собственные агрегатные функции. Не упустите возможность получить ценные знания, продолжить обучение вы сможете на курсе, доступном в рассрочку.

Для участия пройдите вступительный тест: https://otus.pw/8mj0/

Реклама ООО «Отус Онлайн-Образование» LjN8K7jGK

Нейроканал

17 June 2023 18:19

​Кажется кто-то изобрел лекарство от ИИ-фейков

Любые вотермарки, которые добавляют на выходы генеративных моделей на пост-процессинге можно очень просто удалить. А вот вотермарки, которые автор модели заложил в латентное пространство перед непосредственно этапом генерации (как например представленный здесь вариант «древесных колец»), уже так просто не удалишь. Правда проверить на наличие вотермарки может только автор, но в теории, если каждая крупная генеративная ИИ модель будет идти в паре с утилитой для обнаружения её «отпрысков», людям станет намного проще жить в нашем мире, покрытом слоем дезинформации.

Посмотреть:
https://www.youtube.com/watch?v=WncUlZYpdq4

Почитать:
https://arxiv.org/abs/2305.20030

#статья

Нейроканал

16 June 2023 18:01

​Что будет, если вы захотите, скажем, пристроить кота на Авито?

Система изучит объявление, проверит дубли среди 150 000 000 других объявлений. Затем кот пройдёт модерацию. Попадёт в базу данных, а потом в систему рекомендаций…

Впрочем, лучше один раз увидеть. А показывают Авито изнутри здесь: https://tprg.ru/D2Eo

Реклама ООО «Авито Тех» LjN8Jutzi

Нейроканал

15 June 2023 16:00

Фестиваль IT и спорта RUNIT пройдёт в Измайловском парке Москвы уже 18 июня

Сможете добежать до самого финиша? А достигнуть ещё большего?

СИБУР Диджитал подготовил «второй финиш» — ряд испытаний для тех, кто, достигая амбициозной цели, сразу же ставит перед собой следующую. Если это про вас, то вам в шатёр СИБУР Диджитал:

— примите вызов от настоящего дерзателя — Виктора Блуда. Он покажет, что значит выкладываться на максимум, и наградит участников;
— разомните не только ноги, но и голову: реши IT-загадки, чтобы выиграть призы;
— посетите «Галерею дерзателей» — выставку фото участников, сделанных во время забега. Найдите там свои эмоции достижений и заберите памятные снимки.

Добежать до финиша? Неплохо.
Пересечь второй финиш — цель, достойная вас.

https://runit.digital/

Реклама ООО «СИБУР» LjN8KD4Jj

Нейроканал

13 June 2023 19:09

​Я погромист, это фотошоп, меня не обманеш

Уверены, что многие из вас видели мемы с новой фичей из Photoshop. Для тех кто не в теме — с помощью силы генеративного ИИ в Photoshop появилась возможность изменять изображение локально с помощью текстовых промптов. А еще красиво переносить объекты, не теряя структуры фотографии. Можете полюбоваться на видео.

Посмотреть:
https://www.youtube.com/watch?v=Y119ZaHIPp0

#позалипать

Нейроканал

11 June 2023 10:46

​Пока большие языковые модели подвергаются цензуре, найдутся те, кто будет этому противостоять

Автор модели Wizard-Vicuna-30B (30 миллиардов параметров) заявляет, что эта модель абсолютно не подвергалась цензуре и пользуйтесь себе на здоровье. Однако, он предупреждает, что всё то, для чего вы будете использовать модель лежит на вашей совести. Что мы считаем правильным, ведь никто не должен судить производителя кухонных ножей, если они использованы кем-то не по назначению.

Посмотреть:
https://www.youtube.com/watch?v=BntGOaMrB90

Модель:
https://huggingface.co/TheBloke/Wizard-Vicuna-30B-Uncensored-GPTQ

#программирование

Нейроканал

08 July 2023 08:30

​Очередной ИИ учится ходить

Но на этот раз к обучению подошли с энтузиазмом антагониста фильма «Пила». Пересеченная местность, лабиринты, коробки в лицо — всё что нужно, чтобы ваш ИИ рос крепким и ходил прямо. Потому что без коробок в лицо, всё что он будет делать, это ползать червячком.

Посмотреть:
https://www.youtube.com/watch?v=L_4BPjLBF4E

#позалипать

Нейроканал

05 July 2023 21:36

​Стабильно диффундируем уже больше года

Набор различных применений и идей, воплощаемых в жизнь с помощью Stable Diffusion. Из интересного — вы можете превратить QR-код в аниме-девочку или красивый узор и он всё ещё будет работать. Ну и разнообразные обработки видео, картинок и всё такое прочее.

Посмотреть:
https://www.youtube.com/watch?v=DaLS4Baiqgk

Почитать:
https://arxiv.org/abs/2306.00986

#статья

Нейроканал

03 July 2023 16:05

​Как оптимизировать параметры запуска приложения Spark?

Поговорят об этом 11 июля в 20:00 мск на открытом уроке в OTUS.

Этот вебинар пройдет в рамках онлайн-курса «Spark Developer» в OTUS.

На занятии с экспертом разберут признаки ошибочной конфигурации, базовые настройки для повышения производительности и Ganglia как инструмент мониторинга кластера для определения узких мест работы приложения Spark.

В результате урока вы получите:

— сформированное понимание качества базовой настройки приложения Spark;
— понимание баланса использования ресурсов для приложения;
— умение идентифицировать ошибки, связанные с неправильной настройкой приложения;
— навык визуально анализировать параметры загрузки кластера в процессе работы приложения.

Урок будет полезен начинающим и опытным специалистам в области аналитики данных, Data Engineering, а также руководителям и менеджерам команд разработки. Не упустите возможность получить ценные знания, продолжить обучение вы сможете на курсе, доступном в рассрочку.

Для участия зарегистрируйтесь: https://otus.pw/czrz/

Реклама ООО «Отус Онлайн-Образование» LjN8KVXSG

Нейроканал

30 June 2023 22:13

​Будьте аккуратны с open-source моделями

Защита очень важна по жизни. Некоторую вы можете купить в аптеке — например крем от загара или спирали от комаров. А вот защиту от проблем модуля pickle, который используется на HuggingFace или в torch.load в аптеке уже не купишь. Поэтому внимательнее смотрите на код модели, предоставляемый на HF (ну или где-нибудь ещё). А какие могут быть последствия и как это работает, расскажет Янник Килчер.

Посмотреть:
https://www.youtube.com/watch?v=2ethDz9KnLk

#программирование

Нейроканал

28 June 2023 09:00

​Нет долбанного пути, ЖЕПА получила сиквел

На недавней выставке VIVA Tech в Париже, некоторая группа запрещенных на территории РФ людей (у них еще своя соцсеть есть), представила модель компьютерного зрения I-JEPA, основанная на архитектуре JEPA (Joint Embedding Predictive Architecture), про которую мы уже писали. Утверждается, что она распознаёт изображения способом, максимально приближенным к человеческому разуму. Не знаем, насколько правдиво данное утверждение, но нам кажется, что эта ЖЕПА стоит внимания и в ней стоит покопаться.

Посмотреть:
https://www.youtube.com/watch?v=6bJIkfi8H-E

Посмотреть:
https://www.youtube.com/watch?v=ehx8ydbYFDE

Почитать:
https://arxiv.org/pdf/2301.08243.pdf

#статья

Нейроканал

26 June 2023 16:00

​СИБУР Диджитал — команда настоящих дерзателей IT-промышленности

Они стремятся к масштабным целям, достигают их и принимают новые вызовы. Чтобы напомнить об этом, компания отправилась на фестиваль IT и спорта RUNIT, который прошёл 18 июня в Москве. В забеге участвовали 75 сотрудников, а один из них занял третье место на дистанции в 25 километров.

Но СИБУР Диджитал решил бросить вызов и другим участникам забега: подготовил «второй финиш» — ряд испытаний для тех, кто, достигая амбициозной цели, сразу же ставит перед собой следующую.

Гости фестиваля:
— Проходили «Проверку на дерзателя» от известного атлета и блогера Виктора Блуда.

— Разминали не только ноги, но и голову, решая IT-загадки и выигрывая ценные призы.

— Посещали «Галерею дерзателей» — выставку фото участников, сделанных во время забега.

— Выигрывали призы за сдачу пластиковых бутылок на переработку.

Тоже считаете себя настоящим дерзателем? Жаждете новых испытаний? Считаете, что задавать тренды промышленной IT-индустрии — цель, достойная вас?

Тогда присоединяйтесь к комьюнити и переворачивай IT вместе с СИБУР Диджитал: /channel/sdc_channel

Реклама ПАО «СИБУР Холдинг» LjN8K13PD

Нейроканал

23 June 2023 16:10

​А стоит ли вообще учиться одной из IT-профессий, если придётся конкурировать с нейросетями?

Если вы задаётесь этим вопросом, приходите на вебинар. Яндекс Практикум позвал экспертов, которые на своём примере покажут: нейросети — не конкуренты, а помощники. И в целом поговорят, как строить карьеру с учётом развития искусственного интеллекта.

Спикеры:
— Алексей Мартынов, технический директор Akil.io, проекта в области ИИ.
— Катерина Поль, старший дизайнер интерфейсов.
— Артём Исакин, руководитель трудоустройства в направлении анализа данных Яндекс Практикума.

Бесплатно, 27 июня в 19:00 Мск

Зарегистрироваться на вебинар

Реклама АНО ДПО «Образовательные технологии Яндекса»

Нейроканал

22 June 2023 21:32

​Отвлечемся от новостей на дне океана и посмотрим новости из мира ML

Их не так много, поэтому можно посмотреть и поближе. Люди из MIT создали ИИ, который со 100% точностью решает экзамен в MIT (прилагаем ссылку на статью) и опен-сорсная версия модели LLaMA (которая при меньшем количестве весов на порядок, показывает лучшие результаты чем GPT-3 с 175 миллиардами весов) OpenLLaMA 13B (13 миллиардов весов) вышла в открытый доступ.

Посмотреть:
https://www.youtube.com/watch?v=Tkijsu129M0

Почитать (статья из MIT):
https://arxiv.org/abs/2306.08997

#позалипать

Нейроканал

21 June 2023 17:17

​Правильно и быстро объясняем ML

Чтобы объяснить такую сложную тему, как ML и DS, необходимо обязательно делать скидку на то, какой человек перед вами и сколько у него знаний по теме. Поэтому держите инструкцию, как правильно это делать. Не пугайте своих детей лекциями Стэнфорда.

Посмотреть:
https://www.youtube.com/watch?v=5q87K1WaoFI

#позалипать

Нейроканал

20 June 2023 17:43

​DS это не только модели, но и статьи. А статьи как-то нужно публиковать

Янник Килчер даёт советы о том, как выживать в научном мире ML и DS и рассказывает про его опыт с публикацией статей и работы на конференциях. Вероятно, если вы студент, то некоторые вещи отсюда вы знаете. Но, если вы уже позабыли, что такое научная среда и как в ней вариться, то смотрим видео. Плюс необходимо сделать поправку на страны, где нет программы PhD и вам надо публиковаться согласно локальным правилам (если вы живёте в такой, если нет — то это 100% для вас).

Посмотреть:
https://www.youtube.com/watch?v=rHQPBqMULXo

#позалипать

Нейроканал

16 June 2023 19:30

​Когда не можем придумать новое, надо улучшать старое

Скорее всего, несколько человек сидели и думали, а как нам делать что-то своё в NLP, но без доступа к огромным вычислительным кластерам? И придумали. Архитектура Receptance Weighted Key Value (RWKV) объединяет в себе эффективность параллельных вычислений трансформера и эффективность инференса RNN. Да-да, RNN возможно скоро будут опять в моде.

Посмотреть:
https://www.youtube.com/watch?v=x8pW19wKfXQ

Почитать:
https://arxiv.org/abs/2305.13048

#статья

Нейроканал

16 June 2023 12:55

​Ящик Пандоры сложно закрыть, но кто-то пытается

Как вы помните, пару месяцев назад вышло открытое письмо от разнообразных важных людей в Big Tech сфере (или тех, у кого просто много денег) с воззванием к исследователям — прекратить большие эксперименты с ИИ. А вот разбор того письма.

Посмотреть:
https://www.youtube.com/watch?v=8OpW5qboDDs

#позалипать

Нейроканал

14 June 2023 15:40

​Паркету проигрывает не только линолеум и ламинат, но еще и csv

Если вы хотите ускорить работу с датафреймами и при этом вас бесит, что csv-файлы любят терять типизации при сохранении — то parquet-файлы, это то, что вам нужно. Занимают меньше места, читаются-пишутся быстрее чем csv и не теряют типизацию. Правда как и пол-паркет, они боятся воды, поэтому старайтесь на свой ПК ничего не проливать.

Посмотреть (разные варианты хранения данных, parquet на 7:17):
https://www.youtube.com/watch?v=u4rsA5ZiTls

Посмотреть:
https://www.youtube.com/watch?v=XFO5jdGsMek

Доки:
https://arrow.apache.org/docs/python/parquet.html

#программирование

Нейроканал

13 June 2023 17:01

​Финальная серия второго сезона «Паттерны и практики написания кода» доступна на канале AvitoTech

Юра Афанасьев рассказывает про работу DI-контейнера в целом и Service Locator в частности.

Все примеры в видео — на живом коде. Смотрите по ссылке: https://tprg.ru/vaKl

Реклама ООО «Авито Тех» LjN8KRTq9

Нейроканал

10 June 2023 12:09

​Если где-то есть интеллект, то рядом появляется и философия

Правда эта философия без веселых дедов, живущих в бочках, а философия сознания и как с ней связан искусственный интеллект. Если вы уже прошли базовое введение в философию в университете или с помощью роликов идущего-к-реке, то вам может быть интересно.

Посмотреть:
https://www.youtube.com/watch?v=ulJtuP9hk8Q

#позалипать