741
Канал о Data Science, ML, AI - книги, курсы, статьи.
КАК ПОВЫСИТЬ ЗАРПЛАТУ 2Х?
💸💸Самый простой и очевидный способ это найти хорошую вакансию, подготовиться и заполучить ее.
Но если вы долго работаете на одном месте, у вас хороший коллектив и вообще отличная командная работа - вы не хотите никуда уходить🙄
В таком случае вы можете расчитывать на повышение зп на 20-30% в год/пол года (зависит от компании) или ожидать премию за хорошую работу, если постараетесь.
Но есть некая «несправедливость» на рынке труда 🙃:
- зарплатные вилки новых позиций могут быть выше, чем ваши текущие🙀
Это объясняется конкуренцией на рынке вакансий - компании вынуждены предлагать релевантные цифры, но это совсем не значит повышение зп всем уже имеющимся сотрудникам соответственно🤨
💵 Поэтому если вы хотите получать зп соответствующую рынку, вам необходимо часто менять место работы.
⁉️Так делают многие и в этом есть как + так и -, можете подумать о них в комментариях.
🤓Так же есть ещё один рискованный способ поднять свою зп - принести новый оффер своему начальнику, т.е. заполучить вакансию с интересными вам цифрами и сказать об этом на текущем месте.
‼️Если вы являетесь ценным сотрудником, вам могут предложить контр оффер и обсудить новые условия
⚠️Ну или пожелать вам хорошей работы на новом месте, к этому тоже нужно быть готовым.
⁉️Были ли у вас такие случаи?
Полезные ссылки для знакомства и работы с DataLens
Большой функциональный демо дашборд:
- datalens.yandex/demo - публичный, только чтение
- Развернуть дашборд в своем DataLens для редактирования
Сообщество:
- Телеграм чат (вы сейчас тут)
- Предложить и проголосовать за новую фичу
- Плейлист официальных видео на YouTube
Обучение:
- Быстрый старт, пошаговая инструкция
- Более детальные пошаговые инструкции по сценариям
- Туториалы по аналитическим функциям: агрегации, оконные функции, Level-of-Detail выражения
- Создание SQL-чартов (если вам нужно больше гибкости модели данных)
- Образовательные проекты
FAQ
- FAQ в документации
- ETL для DataLens?
- Яндекс.Метрика и DataLens
Публичные кейсы использования DataLens:
- КазаньЭкспресс - Аналитика retail маркетплейса
- Правительство С.-Петербурга - Аналитика городских сервисов
- Окраина - Аналитика на мясоперерабатывающем заводе
- МВидео - Платформа данных в облаке, геоаналитика
- Rubetek - Аналитика IOT по датчикам домов и квартир застройщика ПИК
- Moneycare - Кредитный брокер, корпоративный BI
- AnywayAnyDay - Аналитика онлайн туристического агентства
- JustSchool - Аналитика над CRM школы английского языка
- SevenTech - Аналитика технологического стартапа над ClickHouse
- НефтеТрансСервис - Промышленная аналитика интернета вещей
- RADAR - Аналитика аудитории наружной рекламы по всей России
- Цифровое образование - Аналитика олимпиад, учеников, школ
- Биологический Факультет МГУ - Предсказание и аналитика урожая
- tproger – Веб аналитика портала
- Car-Taxi - Продуктовая аналитика сервиса эвакуации авто
- Datanomics - Анализ результатов прогнозирования в ритейле
- Кинопоиск - Публичная статистика оценок фильмов
Примеры публичных дашбордов:
- Анализ качества воздуха
- Статистика коронавируса
- Погода
- Показатели Российских ВУЗов
- Демография Ставрополья
- Исследование про работу вахтовым методом в РФ
- Безработица РФ
- Пример с LOD выражениями от @ab0xa
Презентации:
- DataLens
- Yandex Cloud Data Platform
Помощь:
- Обсудить ваш проект
- Завести тикет в техподдержку
- Оставить заявку на помощь партнера Yandex Cloud
- Публичный каталог партнеров
КАК УПРАВЛЯТЬ DATA SCIENCE ПРОЕКТОМ?
В классической разработке программисты взаимодействуют с несколькими версиями кода - любая доработка это изменение исходной версии кода.
Чтобы предотвратить путаницу и ошибки, разработчики используют системы управления версиями, например, Git.
В системе управления версиями есть центральный репозиторий кода, представляющий текущее состояние проекта. Далем его копию, вносим нужные правки, тестируем и, если все хорошо, добавляем к исходной версии👌
😑В проектах связанных с машинным обучением все немного сложнее, помимо кода, есть ещё данные, модели и куча экспериментов, версии которых тоже необходимо отслеживать.
Так вот для контроля версий моделей можно использовать библиотеки с открытием исходным кодом ClearML/MlFlow.
А масштабные эксперименты удобно проводить в AirFlow, так как удобно использовать асинхронный граф между задачами.
А вы следите за своими экспериментами?
Сегодня, 02.06 в 19:00 будет стрим, поговорим о собесах 🤯 c DS @nikolay_frolov
Подключайтесь, задавайте свои вопросы 😅
Краткое саммари и полезные ссылочки:
Дмитрий прошёл путь: МГУ(экономический факультет) -> ШАД -> Яндекс (аналитик)-> небольшая компания по разработке игр на Кипре(аналитик) - Microsoft Прага (software engineer)
Важное замечание: в Яндексе на позицию аналитика/ аналитика- разработчика требуют больше hard skills, чем в Microsoft, по их меркам это полноценный разработчик.
Дмитрий владел английским на старте примерно B2-С1, но никакие специализированные тесты не сдавал, т.к требований таких нет.
В Microsoft готовился около 6 месяцем в своем темпе.
Начал с тренировок решения задач на: https://leetcode.comLeetCode
Затем на канале /channel/FaangInterview
готовился к собеседованию, там же находил людей, с которыми устраивали друг другу тестовые собеседования, тренировался так раз 8-10.
Так же для собеседования рекомендует пройти курс https://www.educative.io/courses/grokking-the-system-design-interview
О зарплатных вилках в разрезе гео/позиции/компании смотреть тут levels.fyi, соответсвует действительности.
Об остальных подробностях:
Как нашёл вакансию?
Почему устройство заняло 6 месяцев, хотя оффер получил быстро?
Какие ещё вопросы спрашивают на собеседовании?
Смотрите, слушайте запись⏬
❗️Вывод: все возможно/ реально , если определить план и двигаться к цели 🎯 , хотя это и может занять не мало времени и усилий.
24 марта в 18:00 мы в МТС проводим онлайн-митап для дата саентистов, дата инженеров и других дата гайз
Коллеги из МТС и ivi.ru расскажут про PU Learning и разберут принципы сортировки блоков с фильмами на главной странице IVI. После этого мы с Валерой Бабушкиным и Пашей Мягких устроим панельную дискуссию про использование Data Science в разных сферах бизнеса.
Участие, бесплатное, регистрируйтесь по ссылке:
https://mts-digital.timepad.ru/event/1962458/
ЧТО С НАЙМОМ В АЙТИ?
Многие компании, даже крупные и стабильные, вчера нанимавшие сотни сотрудников, остановили найм.
Да, звучит это так себе, но не стоит сильно переживать - это вынужденная временная мера, чтобы разобраться с происходящим, скорректировать стратегию и ключевые бизнес процессы.
❗️Я думаю на это потребуется от двух- шести месяцев и далее найм постепенно возобновят.
Также важно отметить, что помимо заморозки найма происходят сокращения и закрытия целых проектов/компаний т.е. освободились специалисты разных направлений с опытом и они активно ищут работу.
❗️Рынок труда изменился: предложение выросло, следовательно требования к кандидатам тоже вырастут - на работу возьмут сильнейших, хорошие специалисты везде нужны.
Ну а для начинающих это время усиливать свои скилы, пополнять портфолио, обучаться новым навыкам, желательно фундаментальным, а так же мониторить рынок и требования, так как сейчас многое меняется.
⁉️Также в поддержку начинающих я хочу поделиться ссылкой на дополнительную скидку 5% на все курсы школы SkillFactory: https://go.avnxt.site/b125ae747ad5ac01
Вы знаете, что я уже около двух лет менторю там ребят, но вот только сейчас подумала, чем же могу быть ещё вам полезна в это нелегкое время и вспомнила про такую возможность, вдруг кому нужно- ❗️не реклама❗️
https://russia.googleblog.com/2022/01/google-2021.html
Читать полностью…
Платформы для решения конкурсов по машинному обучению.
#learning
✔️ Kaggle — самая известная площадка для проведения конкурсов по машинному обучению. Там проходят как большие соревнования от известных компаний с большими призовыми, так и обучающие соревнования для тренировки навыков машинного обучения. В kaggle есть встроенный jupyter notebook (а-ля google colab), где можно запускать код (даже если вы не участвуете в соревнованиях). В соревнованиях есть обсуждения участников и публично доступные примеры решения задач — код, который выкладывают другие участники. Отлично, чтобы изучить, как другие люди решают задачи и прокачать навыки.
Также на kaggle есть раздел датасеты, в котором представлены много открытых датасетов для разных задач. Удобно, когда нужно найти датасет для создания своего пет-проекта или просто потренироваться в ML.
Однако конкурсы на kaggle, в которых есть призовой фонд — довольно сложные. 99% из них не подходят для новичков, шанс победить в них довольно мал. Если вы новичок и хотите бороться за призы в конкурсах, присмотритесь к следующим платформам:
✔️ boosters.pro — российская платформа для проведения соревнований по машинному обучению в странах восточной Европы. Сейчас тут нет активных компетишенов, но они иногда появляются. Они проще, чем на kaggle, и в них реально бороться за призы, не затрачивая на это все свободное время.
✔️ competitions.codalab.org — международная платформа для проведения соревнований. Тут часто проводят соревнования не очень крупные компании (те, которые не идут на kaggle).
✔️ All Cups — платформа для соревнований от Mail.ru. Здесь соревнования не только по мл — еще и по программированию, системному администрированию и созданию игровых ботов. Конкурсы бывают не только от Mail.ru, но и от партнеров. Уровень задач позволяет участвовать в них, не имея огромного опыта решения задач. Для совсем новичков есть песочница — тренировочные задачи.
У All Cups есть целое сообщество, привязанное к конкурсам, где люди общаются и обмениваются опытом. Вот сообщество VK, плюс у каждого трека (ML, программирование и т.д.) есть свои чаты в телеграме. Это отличная возможность влиться в тусовку и получить опыт решения задач.
✔️ Data Science Works — новая платформа для решения конкурсов по ML от Сбера. Пока функционал платформы небольшой: создание и проведение чемпионатов. Думаю, скоро появятся сообщество и другие функции а-ля встроенного колаба.
На платформе уже есть анонс первого конкурса: моделирования предпочтений покупателей продуктов. Конкурс стартует 30 ноября. Кажется, конкурсы на этой платформе тоже будут доступны новичкам и не-профессионалам.
Добавлю так же, что иногда конкурсы по ML проводятся в отрыве от платформ, а привязаны к конференциям. Такие конкурсы нужно отслеживать отдельно. Хорошим началом будет вступление в какое-нибудь ML-сообщество, где лбди интересуются конкурсами и мониторят их.
Ну что, ничего не забыла? Если хотите что-то добавить, пишите в комментарии ⬇️
https://blog.skillfactory.ru/chem-zanimaetsya-data-sajentist-v-it-magnit/
Читать полностью…
Приглашаем на тест-драйв Yandex DataLens по следам «BI круг Громова»
🗓 21 июля в 15:00 (Мск) эксперты «Ёлва», BI Consult и Yandex проведут тест-драйв Yandex DataLens в рамках road-show российских BI-решений.
На вебинаре познакомим с компонентами и архитектурой DataLens и детально разберем решение реального кейса:
▫️ Загрузка данных в Yandex Cloud с помощью Object Storage
▫️ Импорт данных в витрину ClickHouse и подключение DataLens к ClickHouse как к источнику данных
▫️ Создание набора данных (датасета)
▫️ Построение визуализаций и дашбордов в сервисе DataLens
Регистрация 👈
Олег Харатов из команды DWH выступит 21 июля на IT’s Tinkoff Data Meetup, чтобы поделиться знанием, как найти данные о данных. Приглашаем зарегистрироваться!
Тем временем в открытом доступе появился доклад Жени Николаева, коллеги Олега, который презентовался на Smart Data 2021. В нём — о продуктовом подходе к разработке платформы хранилища данных.
Кстати, мы даже статью такую писали. Помните?
#dwh_avitotech #видео_avitotech #avitoteam
Стажировки лучший способ притронуться к реальным задачам и получить первый опыт, а если повезёт то первый offer.
Поэтому я собрала несколько актуальных стажировок в крупных компаниях:
https://vk.tinkoff.ru/start_osen2022
https://job.mts.ru/youth#section-steps
https://job.megafon.ru/internship
https://job.ozon.ru/internships/
https://yandex.ru/yaintern/?ysclid=l5ebax4k61718876020
Рекомендую попытаться, подготовить резюме и порешать тестовые, пройти собесы🔥
Удачи 🍀
ЧТО ОБЯЗАТЕЛЬНО НУЖНО ЗНАТЬ В DATA SCIENCE?
1. Машинное обучение
Машинное обучение - это основа науки о данных. Специалисты по обработке данных должны хорошо разбираться в ML.
2. Моделирование
Математические модели позволяют выполнять быстрые вычисления и делать прогнозы на основе данных. Моделирование является частью машинного обучения и включает в себя определение того, какой алгоритм является наиболее подходящим для решения конкретной задачи.
3. Статистика
Статистика лежит в основе науки о данных. Уверенное владение статистикой может помочь извлечь больше информации и получить более значимые результаты.
4. Программирование
Для успешного выполнения проекта по DS требуется определенный уровень программирования. Наиболее распространенными языком программирования является Python. Он особенно популярен, потому что прост в освоении и поддерживает множество библиотек для data science и ML.
5. Базы данных
Специалист по обработке данных должен понимать, как работают базы данных, как ими управлять и как извлекать из них данные.
⁉️Продолжите список?
Запись стрима о собеседованиях в DS.
Ссылка на упомянутое соревнование:
https://www.kaggle.com/competitions/image-matching-challenge-2022
КАК УЗНАТЬ КАКИЕ ВОПРОСЫ ЗАДАДУТ НА СОБЕСЕДОВАНИИ???
Классическое собеседование можно разделитесь на три части:
1. Звонок от HR, расскажут о вакансии, узнают релевантно ли вам и ваш опыт, передадут резюме команде, если ок, назначат встречу;
2. Первый этап собеседования — рассказываете о себе и своём опыте подробно: какие задачи решали, какие подходы использовали, на какую метрику ориентировались и почему. 🙉Тут важно хорошо вспомнить, что вы делали, или прям просмотреть проекты, для этого хорошо бы иметь портфолио на git, к которому можно быстро обратиться. ☝🏻Это очень важно, так как чаще всего вопросы задают именно по вашим проектам, что, как и почему, разбираются на сколько хорошо вы понимаете то, что делали. ❗️После этого теоретического этапа могут дать тестовое задание - новичкам обязательно соглашаться и делать, потом можно будет так же добавить проект в портфолио. Если прошли первый этап, по итогам созвона или тестового задания идете дальше.
3. Второй этап собеседования проходит обычно с тимлидом/ техлидом и представляет собой техническое собеседование, где проверяют навыки программирования, знания алгоритмов и структур данных и тд.. ⁉️Вопросов может быть великое множество, но подготовиться вполне реально и полезно, выучив один раз будите счастливы многие годы. Если было тестовое, то могут задать вопросы по нему.
Интервью с Дмитрием Браженко.
Работа за границей: Яндекс ➡️ Microsoft
Ссылка: https://telemost.yandex.ru/j/81595513320297
О чем будем говорить:
1. Расскажи о себе: где учился, где работал( кратко карьерный путь в России, сколько лет опыта наработал).
2. Почему решил уехать работать за границу?
3. Карьерный путь за границей.
4. Что необходимо для устройства?
5. Особенности собеседований?
6. Как и где готовился к собеседованиям?
7. Уровень зп относительно уровня жизни там?
8. Какие планы дальше?
9. Если какие-то грабли/ тонкости, о которых хотел бы рассказать/ предупредить?
10. Можешь порекомендовать с чего начать этот путь релокации?
🎬 Ламповый стрим уже завтра. Поболтаем за жизнь и за DS. Начало в 18:00 по Мск.
👨🎨 Пригласил на стрим 3-х любопытных ребят (Андрей, Виктория и Иван). Про каждого для затравки расскажу в комментариях. Тут же в комментариях можете продолжать задавать вопросы и предлагать темы для обсуждений. Я все читаю🥷.
🤪 Про то, как начать в DS можно уже не спрашивать, вопрос уже избитый донельзя.
📜 Примерная повестка:
- Как работать и развиваться эффективнее.
- Организация рабочего пространства
- Пет проекты и стартапы
- Способы зарабатывать выше среднего в своей сфере.
📎Ссылка на стрим. Запись стрима будет 😇
Поделись постом со своими =)
ЧТО НАС ЖДЁТ ДАЛЬШЕ?
Отмечу сразу, несмотря на некоторое шоковое состояние всего рынка/ компаний, востребованность Data Science по-прежнему высокая, с некоторыми корректировками.
❓Чтобы понять о чем я, подумайте, что обычно происходит в кризис?
⁃ компании включают режим выживания: все силы концентрируются на основополагающих процессах, а проекты типа «развитие» замораживаются/закрываются.
Если трактовать с точки зрения влияния на DS, то проекты связанные с ключевыми процессами бизнеса никуда не денутся, а будут только набирать обороты, т.е аналитика и классический ML по прежнему будут сильным конкурентным преимуществом.
А вот проекты по внедрению передовых нейросетевых технологий CV/NLP/RL могут притормозить, если это непосредственно не влияет на бизнес или это не основные проекты.
❓Второй влияющий аспект:
⁃ перестройка инфраструктуры - по возможности переход на наше ПО и облака, например, Яндекс, благо есть open source, который нам ещё оставили.
Отсюда вывод: ценны фундаментальные знания (математика/ статистика/ алгоритмы) и навыки (программирование, работа с данными), а не знание конкретных инструментов.
В любом случае, это только начало и никто не может знать о всех изменениях, которые нас ждут, но я точно знаю, что в информационный век, только Data Science сможет нам помочь со всем этим справиться.
⁉️А какие процессы происходят в ваших компаниях???
❗️По поводу найма в DS, напишу в следующем посте.
❤️Ну а чтобы меня не потерять, мой вк https://vk.com/vicdscience
ГДЕ ИСКАТЬ РАБОТУ В ИТ ДЖУНУ?
IT | DATA SCIENCE
Сразу отмечу, что за мидлами гоняются HR сами, а желающих «войти в айти» много, поэтому для джунов ситуация обратная, но оно стоит того.
В первую очередь, конечно, на специализированных сервисах:
- [LinkedIn](https://ru.linkedin.comlinkedin/)
- [hh работа](https://hh.ru/)
❗️НО
LinkedIn закрыт, что вызывает неудобство, но мелкие, поэтому оформляете страницу, добавляйтесь к людям, если они работают в компаниях или на позициях вам интересных, знакомьтесь, расспрашивайте, заявляйте о себе и своих скилах.
[Hh](http://Hh.ru) стал достаточно дорогим и не все компании могут себе его позволить или просто расширяют воронку поиска кандидатов, поэтому используют и альтернативные источники размещения вакансий:
- [GeekJob](https://geekjob.ru/content/forhr)
- [Хабр Карьера](https://career.habr.com/info/employer) - где же ещё искать айтишников
- [Работа.ру](https://www.rabota.ru/v3_shop.html?section_id=3)
Добавлю также некоторые телеграмм каналы:
[Job for Analysts & Data Scientists](/channel/foranalysts)
[Profunctor job](/channel/profunctor_jobs)
[Tproger](https://timeweb.com/go?url=https%3A%2F%2Ft.me%2Ftproger_official&hash=35fd9c06c478d599aa97029d779f79c119f551e6)
[Careerspace](/channel/careerspace)
Для Data Science не забываем про сообщество ODS и их канал в slack, там так же размешают вакансии и легко развивать нетворк.
- Facebook - также много соответствующих групп и многие team leads на своих личных страницах размешают вакансии.
- Сайты компаний - хотите в Яндекс идите на сайт Яндекса, раздел вакансии, относится ко всем компаниям.
Рекомендация для людей без опыта: во всех сферах IT ценят за hard скиллы - конкретные практические навыки, поэтому ищем реальные проекты на фриланс платформах, ходим на хакатоны( там тоже активно хантят, вдруг вас заметят) и нарабатываем знания, оформляем на git и ура, вы уже ближе к целе.
Как долго и сложно искали свою первую работу в it, поделитесь опытом 👇
https://www.youtube.com/playlist?list=PL4_hYwCyhAvZLp0CTIDVQr9FtDR_7DaUr
Читать полностью…