devsp | Unsorted

Telegram-канал devsp - Data Science | Machinelearning [ru]

15178

Статьи на тему data science, machine learning, big data, python, математика, нейронные сети, искусственный интеллект (artificial intelligence) Англоязычный канал по DS и Machinelearning -https://t.me/ds_international По сотрудничеству - @g_abashkin

Subscribe to a channel

Data Science | Machinelearning [ru]

​​🧬 Примите участие в международной конференции Data Fusion 2023 от ВТБ, которая пройдёт 13-14 апреля.

Конференция будет полезна разработчикам и специалистам в области Data Science, CDO, бизнес-заказчикам DS-продуктов и сервисов, представителям государства и науки.

Первый день конференции будет посвящен аспектам управления данными, практикам перехода на доверенные технологии, доступности дата-сетов для ИИ и другим темам, актуальным для CDO и руководителей бизнес-подразделений.

Программа 14 апреля адресована data science специалистам и исследователям. Темы докладов и сессий распределены по трем стримам: «ML+», «AI Classic», «ML Environment».

На конференции представят новейшие технологии и инструменты, а также будут проведены практические сессии и выступления ведущих предприятий. Не пропустите возможность улучшить свои навыки и расширить свои знания в области Data Science. 

Участие в конференции бесплатное. Успейте зарегистрироваться по ссылке: https://cnrlink.com/datafusion51

Читать полностью…

Data Science | Machinelearning [ru]

​​🧠Kubeflow: учимся устанавливать и запускать Kubeflow на локальной машине

Пошаговое руководство по установке и конфигурированию всех компонентов kubeflow на локальной машине.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​👨‍💻Представление, кластеризация и подобие в примерах, иллюстрациях и таблицах

Эта статья послужит введением в представление (embedding), подобие (similarity) и кластеризацию (clustering). Знать эти ключевые понятия машинного обучения нужно, чтобы понять, что такое скрытое пространство.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

31 марта МТС собирает крупнейшую в России IT-конференцию TRUE TECH DAY. Почему сейчас? Потому что давно пора показать, что скрывают «под капотом» топовые продукты продвинутых технологичных компаний. Каждый участник конференции протестит на себе true-технологии и испытает новые впечатления, меняющие мир пользователей. 

Что будет: 
→ 7 треков: AI, Main Track, Big Data, Architecture, Cybersecurity, Leading Change, Product Manager.
→ 50+ мировых спикеров с топовыми темами без воды и лирики
→ 10 часов нетворкинга и обмена опытом в Москве, Дубае, Тбилиси и Астане
→ много интерактивных и цифровых зон 
→ а после — грандиозная вечеринка со звездным лайн-апом 

Все спикеры и темы уже на сайте. 
Регистрируйся на True Tech Day по ссылке.
Участие бесплатно

Читать полностью…

Data Science | Machinelearning [ru]

​​Соревнование Data Fusion Contest 2023 в самом разгаре:

🔥У каждого участника есть шанс получить мерч от сообщества ODS. Поделись ссылкой на соревнование с другом и предупреди, чтобы он указал твой telegram-никнейм при регистрации в специальном поле “Откуда узнали о соревновании”. Каждую неделю мы будем разыгрывать наши брендированные футболки среди тех, кто пригласил больше всего участников 🎁

🔥В прошлую субботу мы объявили победителей первой фазы в задачах Атака и Защита, но в призовом фонде остались еще 1 400 000 руб. Участвуй в соревновании, сразись во втором турнире с решениями других участников и забери свой приз!


Регистрируйся по ссылке и убедись на собственном примере, что Adversarial ML может быть увлекательным и о-о-очень полезным 😉

Читать полностью…

Data Science | Machinelearning [ru]

​​💯Юмор ChatGPT

В последнее время ChatGPT набрал большую популярность. Автор решил проверить насколько умна эта нейросеть и решил научить ее шутить. Что из этого вышло вы узнаете в этой статье

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​💻Стратегии прогнозирования временных рядов в ETNA

Меня зовут Дима, я разработчик библиотеки ETNA в Тинькофф. Расскажу о том, как в задаче прогнозирования временных рядов появляются стратегии, какими они бывают и как воспользоваться стратегией в библиотеке ETNA.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🚀Кроссовки с машинным обучением. Как стартап хочет сделать революцию в ходьбе

Стартап Shift Robotics из Питтсбурга изобрел «обувь», которая позволяет ходить на 250% быстрее. При этом человек не затрачивает никакой дополнительной энергии. Такая пара кроссовок стоит 1400 долларов. Дороже любых Yeezy's в разы. Но зато — в буквальном смысле самая быстрая обувь в мире, которая способна превратить вас в Майкла Джексона на максималках. 

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​Ваша цель – погрузиться в новые практики и инструменты дата-инжиниринга или понять, подходит ли вам эта сфера? Тогда пора на обучение!

NewProLab запускает 12-й обновленный поток интенсивной онлайн-программы Data Engineer, который подойдет для дата-инженеров, аналитиков данных, бэкенд-разработчиков, техлидов и менеджеров.

За 8 недель обучения вы получите: 

 • 20 интенсивных занятий с преподавателями в зуме
 • 6 лабораторных работ - задач с реальными данными
 • Общий чат с участниками и поддержку координатора

В конце обучения вы научитесь решать задачи DE, структурируете ваши знания и поработаете с облачным кластером для решения лаб с реальными данными, освоите необходимые навыки настройки инфраструктуры и devops-практики для своих data-решений. А все материалы программы останутся у вас навсегда!

Старт программы 27 марта

Подробная информация и регистрация по ссылке.

Бонус: Получите скидку 23% при покупке программы по промокоду birthday23.

Читать полностью…

Data Science | Machinelearning [ru]

​​😏Я только спросить: разводим ChatGPT на откровенность по методу Илона Маска

О том, что чат-бот ChatGPT от OpenAI настроен жёстко фильтровать контент во избежание "срыва толерантности", доносится из каждого утюга.
А можно ли пробить холст на стене OpenAI и заглянуть в жестяной череп? Вдруг там лишь паутина, да дохлые мыши? Попробуем проделать этот опыт вместе с Илоном Маском.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​👾Отгадай слово: как мы создали игру с элементами машинного обучения и вышли в ноль за 2 месяца

Автор - главный разработчик игры «Отгадай слово» — игра, в которой нужно угадать слово, поняв логику искусственного интеллекта. Два месяца назад вместе с кофаундером Григорием Спировым наткнулись на игру https://contexto.me и решили локализовать ее.

В статье вы рассмотрите технологии и алгоритмы, которые использовались при разработке, и узнаете об совершенных ошибках на пути.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​👀 Как создать прототип системы для распознавания лиц за 60 минут

⏰ Когда: 28 марта, 17:00 МСК
📍 Регистрация 

Эксперт VK Cloud проведет практическое занятие и покажет, как разработать прототип системы Face Recognition c помощью сервиса Vision. 

Для выполнения задания вы можете подключить Vision в личном кабинете на платформе VK Cloud. Новые пользователи платформы получат 3 000 бонусных рублей для работы с облачными сервисами.


Что будет на воркшопе:

🔹 Обсудим, как работает Vision для идентификации и распознавания лиц, и разберем кейс компании Russia Running, которая создала сервис MY.PHOTO на базе Vision

🔹 Создадим прототип системы распознавания лиц  

🔹 Ответим на вопросы на QA-сессии

Спикер: 

🔸 Димитрий Муштаков, Product Manager сервиса Vision, VK Cloud

По итогам вебинара участники получат доступ к репозиторию с прототипом системы, чтобы быстро протестировать функциональность Face Recognition в собственных проектах.

Зарегистрироваться бесплатно

Читать полностью…

Data Science | Machinelearning [ru]

​​🤯Большие данные мертвы. Это нужно принять

Уже более десяти лет тот факт, что люди с трудом извлекают из своих данных полезную информацию, сбрасывают на чересчур большой размер этих данных. 

Мир в 2023 году выглядит иначе, чем когда зазвенели первые тревожные звоночки по поводу Big Data. Катаклизм обработки информации, который все предсказывали, не состоялся. Объемы данных, возможно, немного выросли, но возможности аппаратного обеспечения росли еще быстрее

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🚀Как спрогнозировать спрос на самокаты и не захламить город, версия Whoosh

Нельзя просто так взять и расставить электросамокаты в городе. Надо, чтобы они находились в нужное время, в нужном месте и в нужном количестве, чтобы выполнять свою транспортную задачу.

Автора зовут Никита Зеленский, он руководит отделом по работе с данными в Whoosh, разработчике технологических решений и операторе микромобильности. Эту статью он написал вместе с Иваном Маричевым, дата‑сайнтистом Whoosh. Он же и автор алгоритма, о котором пойдет речь.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🤖Data Mesh: что это такое и для чего он нужен инженерам

Команда VK Cloud перевела статью о новом подходе к построению архитектуры данных Data Mesh с помощью lakeFS — системы управления версиями данных с открытым исходным кодом, которая преобразует хранилище объектов в Git-подобные репозитории. Разбираем, что такое Data Mesh, суть этого подхода и как с его помощью повысить эффективность работы с данными.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🔥Встраиваем распознавание документов от Smart Engines куда угодно за пять минут

Авторы, Smart Engines, многие годы занимаются созданием ПО для распознавания документов, удостоверяющих личность, гибких форм, банковских карт, штрихкодов и так далее - всего более двух с половиной тысяч различных документов.

В статье авторы покажут пример того, как с помощью Docker, Python и SDK самому реализовать простейшее решение для распознавания документов. 

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​Математика дата саентиста - здесь мы публикуем математические задачи и гайды для машинного обучения с упором на практику. Проверяем ваши знания, а затем на основе ошибок предлагаем статьи и уроки. 

Если хочешь познать дзен и понимать как работают алгоритмы, а не просто импортировать их, подписывайся. Здесь реально учат.

@ds_math

Читать полностью…

Data Science | Machinelearning [ru]

​​👉🏻Революция генеративного ИИ началась — как мы к этому пришли?

Сегодня только и разговоров, что о ChatGPT, Midjourney и прочих DALL-E. Почему именно сейчас нейросети стали такими крутыми и развиваются семимильными шагами? Прорыв стал возможен благодаря новому классу невероятно мощных моделей искусственного интеллекта. В этой статье вы узнаете, с чего всё началось и как мы здесь оказались.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🔥Градиентный спуск простыми словами

Градиентный спуск - это способ обучения и совершенствования модели машинного обучения. Он делает это, постоянно пытаясь лучше предсказать правильный ответ, корректируя свое "мышление". Для этого используется математическая формула, чтобы определить, в каком направлении нужно двигаться, чтобы приблизиться к правильному ответу. Процесс повторяется много раз, пока алгоритм не сможет предсказать ответ настолько хорошо, насколько это возможно.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​💪Увеличь это! Современное увеличение разрешения в 2023

В статье автор подробно рассматривает современные алгоритмы повышения разрешения.

За последние годы авторы создали 3 бенчмарка Video Super-Resolution под разные кейсы использования, которые на данный момент занимают первые 3 (из 14) места в соответствующем разделе на сайте paperswithcode.com.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🎁ChatGPT показала 5 тысяч самых опасных файлов, с помощью которых можно легко взламывать сайты

Автор попросил нейросеть ChatGPT, представить, что она создала сайт и забыла удалить из корневой папки файлы, которые могут представлять наибольшую ценность для злоумышленников. В этой статье вы узнаете что из этого вышло.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🤔Как написать пайплайн для чтения рукописного текста

В этой статье мы, команда Sber AI, расскажем о пайплайне для распознавания текста и о нюансах обучения HTR‑моделей, а также поделимся датасетом школьных обезличенных тетрадей. Это почти 2 тысячи страниц с полной разметкой полигонов слов.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​⚡О трёх существенных недостатках известных алгоритмов обучения с подкреплением

Уже несколько десятилетий существуют такие алгоритмы машинного обучения с подкреплением, как Q-learning и REINFORCE. До сих пор часто применяется их классическая реализация. К сожалению, эти алгоритмы не лишены фундаментальных недостатков, значительно усложняющих обучение хорошей политике. Рассмотрим три основных недостатка классических алгоритмов обучения с подкреплением, а также решения, направленные на их преодоление.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🔥 В чем суть методов ансамблирования Bagging, Random Forest и Gradient Boosting?

Узнайте и примените их на практике 22 марта в 18:00 на открытом уроке онлайн-курса «Machine Learning. Professional» в OTUS.

Тема: «Один в поле не воин: методы ансамблирования в машинном обучении» 

💻 На уроке разберем: 
— Основные подходы к ансамблированию, которые сегодня используют в ML
— Популярные техники ансамблирования: Bagging, Random Forest и Gradient Boosting
— Когда и как их стоит применять для решения ML-задач

Урок будет полезен IT-специалистам, которые хотят освоить продвинутые методы ML и перейти в Data Science.

👉 РЕГИСТРАЦИЯ
https://otus.pw/Ex8i/

Читать полностью…

Data Science | Machinelearning [ru]

​​22 марта в 19:00 ШАД Helper проводит вебинар по теме «Как пройти Data Science собеседование».

Мы расскажем, как войти в мир IT со стороны Data Science, каким образом подготовиться к собеседованию в хорошую компанию.

О чем вебинар?
 - Поговорим про собеседования в топовые IT компании
 ⁃ Разберем типичные вопросы и задачи с собеседований на Junior позицию в Data Science
 ⁃ Расскажем про ШАД Helper, как происходит обучение
 ⁃ Познакомим вас с нашими преподавателями

Гости эфира: 
Александр Лыков  — академический руководитель в ШАД Helper.

Андрей Канунников — преподаватель по алгебре и дискретной математике в ШАД Helper. 

Егор Илларионов — преподаватель по теории вероятностей в ШАД Helper. 

Ирина Пионтковская — Head of Moscow Speech & Dialogs team in Huawei Noah's Ark Lab, а также руководителем прикладных исследовательских проектов в iPavlov.

В конце вебинара каждый участник получит от нас бонус!

Регистрация по ссылке 👉🏼 https://clck.ru/33mHAL

Читать полностью…

Data Science | Machinelearning [ru]

​​Взгляд компьютерным зрением на работу коммунальных служб

К третьему десятилетию двадцать первого века российская провинция так и не научилась содержать пешеходную инфраструктуру в достойном состоянии, но плотно обвешалась уличными веб‑камерами.

Автор в статье с помощью камер анализирует загрязненность улиц снегом, слякотью.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🧠Как я сделал синтез своего голоса

Всем привет! Меня зовут Гриша Стерлинг, я занимаюсь синтезом речи в SberDevices. Создать новый голос для синтеза — это долго и дорого. Мы постарались сделать этот процесс проще и доступнее, и в итоге я сам смог записаться на студии, а потом обучить модель разговаривать моим голосом.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​Чем больший объем данных используют на проекте, чем выше нагрузка на систему – тем более продвинутый SQL нужен разработчикам. Изучить SQL и свободно использовать его в работе поможет курс Практикума.

После 3 месяцев курса разработчики смогут:
— уверенно пользоваться простыми селектами, джоинами, индексами и оконными функциями;
— отладить запрос, который сгенерирован через ORM;
— составить сложные запросы на нативном SQL;
— применить продвинутый SQL, чтобы писать код для высоконагруженных систем,
— чувствовать себя спокойно на собеседованиях.

Записывайтесь и растите в карьере.

Читать полностью…

Data Science | Machinelearning [ru]

​​💪Как устроен виртуальный помощник для data-сервисов в «Магните»

Автор - главный системный аналитик в департаменте по работе с данными «Магнита». В этой статье расскажет вам о том, как устроен виртуальный помощник который помогает пользователям корпоративного хранилища данных ориентироваться в данных и сервисах департамента и других подразделений, развивающих инструменты для аналитики.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🤔Как специалистам в сфере аналитики и ML найти работу в IT за рубежом

В статье автор расскажет о конкуренции на западном рынке IT, об особенностях трудоустройства и подхода к работе в заграничном офисе международной IT-компании и о возможностях карьерного роста.

Читать...

Читать полностью…
Subscribe to a channel