LEFT JOIN

23 June 2023 09:30

А стоит ли вообще учиться одной из IT-профессий, если придётся конкурировать с нейросетями?
Если вы задаётесь этим вопросом, приходите на вебинар. Команда Яндекс Практикума пригласит экспертов, которые на своём примере покажут: с нейросетями нужно не конкурировать, а брать их в помощники.

🔜 Бесплатный вебинар — 27 июня в 19:00 по Москве

Эксперты, которые расскажут, как повысить свою ценность на рынке с помощью нейросетей:
🔵 Алексей Мартынов, технический директор Akil.io, проекта в области ИИ. Ведущий эксперт на курсах программирования в Яндекс Практикуме.
🔵 Катерина Поль, старший дизайнер интерфейсов, наставница на курсе «Дизайнер интерфейсов» в Яндекс Практикуме. Работала продуктовым дизайнером в «Ростелеком ИТ».
🔵 Артём Исакин, руководитель трудоустройства в направлении анализа данных Яндекс Практикума.

На вебинаре вы узнаете:
— что нейросети умеют уже сегодня и в каких проектах им можно делегировать рутину;
— какие профессии могут исчезнуть, а в каких AI-сервисы просто станут рабочими инструментами;
— кем стать, чтобы самому работать над нейросетями;
— как искусственный интеллект будет развиваться в будущем, и чему учиться уже сегодня.

Приходите, делитесь своими сомнениями и задавайте вопросы!

🔜 Зарегистрироваться на вебинар
#реклама

Реклама АНО ДПО "Образовательные технологии Яндекса", ИНН:7704282033, erid:LjN8K659h

LEFT JOIN

21 June 2023 11:33

Сколько стоит реклама в LEFT JOIN?
Сколько раз я слышал этот вопрос — десять, тридцать, сто? Больше!
Мы с командой решили ответить качественно и аргументировано и создали собственный медиакит.

Больше не тайна, сколько стоит рекламный пост в канале.
Однако, предупрежу, что размещаем мы не все подряд. Думаю, наши подписчики в этом смогли убедиться по хештегу #реклама.

LEFT JOIN

15 June 2023 15:21

Docker: с чего начать?
В современном мире многообразие технологий дает не только свободу выбора инструментов для рабочего проекта, но и создает кучу трудностей, которые замедляют работу. Проблемы часто возникают при работе с виртуальными машинами — перенос приложения из одной виртуальной машины в другую со всеми зависимостями может оказаться очень долгим процессом.

К счастью, был изобретен Docker — приложение для управления контейнерами, то есть изолированными виртуальными средами разработки. Как раз о Docker и идет речь во вводном докладе Питера МакКи. В нем он рассказывает про ключевую концепцию в Docker — Docker-образ. Это текстовый файл, который описывает последовательность действий при создании контейнера. Такая концепция позволяет без труда запускать точно такие же контейнеры на другом устройстве без особых усилий. Также, в докладе подробно раскрыта последовательность действий при создании контейнера:

🔵 Написание Dockerfile,
🔵 Создание образа из Dockerfile,
🔵 Создание контейнера на основе образа.

Кроме того, Питер показывает как взаимодействовать с Docker Hub, который по сути является GitHub'ом для образов. Обо всем по порядку и во всех подробностях вы узнаете из доклада.
#краткий_пересказ

LEFT JOIN

14 June 2023 11:21

ChatGPT: как будет меняться работа аналитика с развитием искусственного интеллекта
Кажется, уже все эксперты в разных областях и блогеры поговорили про ChatGPT и начало эпохи нейросетей. Однако, в подкасте Data Heroes мы это еще не обсуждали и… сейчас исправимся! 🐢

Мы знаем, что многие из вас уже устали от этой темы, но сегодня Николай и его гости постарались раскрыть ее шире и, конечно, пофантазировать о будущем! И те эксперты, кто пророчит конец света и восстание машин, и те, кто в порыве восторга и экстаза говорит о том, как чудесна станет жизнь в ближайшее десятилетие, соглашаются в одном — мир не будет прежним.

Итак, сегодняшний разговор именно об этом. А еще о том:
🔵Правда ли релиз нейросетей перекроит рынок труда,
🔵Как ChatGPT может помочь в анализе больших объемов данных,
🔵Какие проблемы возникают при работе с ChatGPT и как их решать,
🔵Какие есть альтернативы нашумевшей модели и насколько они хороши в деле,
🔵Как писать промпты, чтобы модель выдавала самый лучший результат, а не сплошные глупости,
🔵Правда ли, что в будущем роботы будут общаться между собой 🤯

Включайте подкаст и узнайте, как пережить восстание машин 🚀 (Шутка! Или нет?..)

СПИКЕРЫ:
1️⃣ Андрей Новиков — Lead Product Analyst, автор YouTube-канала Noukash">Noukash
2️⃣ Анастасия Никулина — CEO & Founder школы по Data Science и анализу данных с обширным бэкграундом в Data Science
3️⃣ Игорь Котенков — Head of Ai Department в Unleashing.AI, компания ML Consulting Agency, автор телеграм-канала "Сиолошная”

P.S. Над обложкой этого эпизода Data Heroes мы поколдовали с Midjorney, а затем наш дизайнер @lagmann оформила и кастомизировала ее, ведь нейросети все еще неидеальны и их результаты пока что требуют доработки.

Слушайте подкаст на платформах: Spotify, Anchor, Apple Podcasts, Google, Yandex, Overcast, Mave, Castbox, Telegram (↓)

#подкаст #DataHeroes

LEFT JOIN

13 June 2023 10:33

Как стать специалистом широкого профиля в работе с данными?
Для этого нужно расширять свои компетенции и выходить за рамки профессии «аналитик данных». В этом вам точно поможет курс от Яндекс Практикума, где вы научитесь разрабатывать архитектуру данных.

Выпускники курса смогут:
🔵 проектировать хранилища и пайплайны;
🔵 использовать инструменты DE: оркестраторы, контейнеры и не только;
🔵 работать со стриминговой обработкой данных и облачными хранилищами;
🔵 создавать хранилища Data Warehouse и Data Lake.

Что будет на учёбе:
— Реальные рабочие задачи и командные проекты;
— Код-ревью и поддержка от действующих инженеров данных;
— Вебинары и продакшн-опыт от экспертов в инженерии данных.

🔥 Приходите учиться, если хотите развить свои компетенции или перейти на должность Data Engineer!
#реклама

Реклама АНО ДПО "Образовательные технологии Яндекса", ИНН:7704282033, erid: LjN8KRTXV

LEFT JOIN

09 June 2023 09:48

☕️ Под утренний кофе: еженедельный дайджест о технологиях, данных и аналитике 🗞
🔵 Dataform для BigQuery в общем доступе
Dataform – это сервис для аналитиков и инженеров данных, который дает возможность творить SQL-чудеса в BigQuery. Ранее доступ к нему был ограничен. Теперь же и вы можете контролировать версии с помощью Git и CI/CD, обновлять таблицы без ковыряний в инфраструктуре и управлять жизненным циклом кода.

🔵 Falcon 40B LLM – новая языковая модель от AWS
AWS представила новую модель, рейтинг которой на Hugging Face уже в числе самых высоких. Натренировали «соколика» на Amazon SageMaker с помощью 1000Б токенов. Модель с 40 миллиардами параметров и открытым кодом, так что ждем новых сервисов и продуктов на ее основе!

🔵 Vision Pro: $3,499 за очки дополненной реальности — будущее уже здесь?
Apple анонсировала новый продукт, пространственный компьютер для дополненной реальности Vision Pro, который способен филигранно обогащать реальную обстановку цифровым контентом. И интернет уже, конечно, переполнен обсуждениями этого релиза…

Личное мнение
Это крутой продукт с абсолютно новым подходом и парадигмой к набившему оскомину VR. Все предыдущие попытки создать шлемы VR исходили из идеи погружения нас в альтернативную цифровую реальность, Apple же идет другим путем — их аквалангная маска расширяет присутствие цифрового контента и в большей степени конкурирует с очень крутыми мониторами, на которых можно смотреть контент.

Но не без «но»
Смущают две вещи (естественно, помимо цены):
1) Два часа работы — это как-то очень мало, у розетки что ли с ним сидеть?
2) В концепции фильмосмотрения — это, конечно, идеальный девайс для социопата-эгоиста, который смотрит кино в одиночку.

Рекламные ролики, конечно, ввергают несколько в шок, особенно в моментах, где человек с надетым шлемом на голову общается с детьми — как-то это кринжово. И, в целом, эффект сериала «Черное зеркало» достигнут.

А у вас какие мысли на счет нового продукта? Будущее ли это? Интересно было бы попробовать? (мне — очень) 😎

LEFT JOIN

08 June 2023 10:31

По данным Gemalto, 65% компаний не могут самостоятельно проанализировать данные. Поэтому те, кто научится с ними работать, будут востребованы и через десятки лет в любой индустрии: от финансового сектора до геймдева. При этом спрос на таких специалистов сильно превышает предложение, а зарплатная «вилка» middle-аналитиков стартует от 130 000 рублей.

Получить необходимые знания и практический опыт с нуля — на примере 32 бизнес-кейсов — можно на курсе «Аналитик данных» от Академии Eduson.

О курсе
🔵 Интерактивные тренажёры и методика от простого к сложному не дадут запутаться: начнете с Excel, а потом овладеете SQL, Python и Power BI. Преподаватели из «Яндекса», Datalatte, Softline и Ghetto Studio делятся опытом с первых уроков.

🔵 Личный куратор будет на связи 365 дней со старта обучения, а сама Академия поможет с трудоустройством и отправит ваше резюме своим компаниям-партнерам, среди которых Avito и ВТБ.

🔵 Чтобы пойти на повышение в должности или найти востребованную работу в IT — оставляйте заявку по ссылке.

🔥 Промокод LEFTJOIN зафиксирует за вами скидку 60% и бесплатную карьерную консультацию для быстрого старта в профессии.

#Реклама, ООО «Эдюсон», ИНН: 7729779476, erid: LjN8K87iN

LEFT JOIN

06 June 2023 10:52

Orb: новый криптопроект от основателя OpenAI и Worldcoin
Сэм Альтман, CEO OpenAI, и основатель крипто стартапа Worldcoin, с которым мы активно сотрудничаем в рамках проекта по разработке процессов инжиниринга и аналитики для них, решил приблизить наступление цифровизации общества на еще один шажочек своим новым проектом. OpenAI — это те самые, кто ChatGPT. А, если кто не знает, Worldcoin — это криптовалюта с собственным блокчейном и открытым исходным кодом.

Orb: прибор для сканирования радужки
Сфера стального цвета, которую вы могли видеть в новостях — это и есть Orb, устройство, которое, просканировав вашу радужку, присваивает вам World ID, своеобразный цифровой паспорт, и делает доступными любые web3 сервисы. Инструмент не хранит данные о радужке: он переводит их в код, который затем привязывается к конкретному человеку и, соответственно, конкретному кошельку.

Таким образом, криптовладельцам не придётся тревожиться о возможных потерях холодного кошелька или seed-фразы. Однако уже можно встретить и критиков проекта, которые метко подмечают, что для создания системы аутентификации и идентификации владельца кошелька необязательно сканировать именно радужку глаза, если она все равно шифруется в код.

«Особое мнение» все смотрели? Orb уже готов, осталось приделать ему лапки и отправить на поиски Тома Круза...

LEFT JOIN

02 June 2023 09:25

👀 Под утренний кофе: еженедельный дайджест о технологиях, данных и аналитике

🔵 На радость таргетологам: чат с ИИ в Google Ads
На днях в блоге Google вышла новость о том, что Google Ads теперь — «умный» сервис, который может сгенерировать текст для рекламы на основе вашего лендинга, изменить заголовок рекламы, чтобы он больше соответствовал поисковому запросу, собрать ключевики, подходящие под ваш продукт, и многое другое. Хочется верить, что рекламные таланты ИИ не навредят обычному пользователю Google и не сделают рекламу в поисковике чем-то, для чего нужен свой AdBlock.

🔵 Новая веха для NVIDIA: капитализация превысила $1 триллион
И все благодаря золотой лихорадке, распространенной спорами ИИ: Nvidia производит чипы для генеративных моделей, и именно это семейство продуктов позволило компании покрасоваться на почетном месте среди других лидеров рынка: Apple, Microsoft, Alphabet (материнская компания Google) и Amazon.

🔵 KDnuggets: подборка сервисов, позволяющих определить контент, написанный ИИ
Про то, как важно уметь писать тексты с помощью языковых моделей, мы уже писали. В своей подборке KDnuggets собрали 10 сервисов, которые могут помочь определить, написан ли был текст человеком или ИИ. Конечно, никто не дает 100% гарантий правильности постановки «диагноза», но на случай крайней необходимости можно попробовать.
#дайджест #под_утренний_кофе

LEFT JOIN

31 May 2023 11:10

Что происходит за кулисами подкастов? Разбираемся в новом эпизоде Data Heroes! 🦸‍♂️
Сегодня мы раскроем все секреты нашего подкаста и расскажем, как мы его создаем. Кроме того, мы пообщаемся с ведущими других известных подкастов, таких как "Data Coffee", "IT-шниками не рождаются" и "Это считается». В этом выпуске Николай и гости поделятся тем, какой путь проходит выпуск от идеи до релиза, поделятся своими фишками и личным опытом.

Вы узнаете:
🔵Почему Николай записывал первые выпуски в душном автомобиле? 😢
🔵Как набрать аудиторию и монетизировать подкаст?
🔵Что значит быть подкастером? Сколько очков популярности это дает (и дает ли вообще)?
🔵Как успевать работать, жить и делать контент? Что мотивирует команду подкаста продолжать?
🔵Какие сложности есть в ремесле ведущего подкаста?
🔵Как сделать интервью с гостем интересным и избежать неловких пауз в разговоре?

Также наши гости обязательно поделятся “подкастерскими хитростями” с теми, кто только начинает свой путь в подкастинге. Включай эпизод и погружайся в закадровую жизнь вместе с нами! 🦜

Спикеры:
🔵 Алекс — подкаст Data Coffee
🔵 Ира Пилявская — подкаст Это считается
🔵 Беслан Курашов — подкаст IT-шниками не рождаются

Слушайте подкаст на платформах: Spotify, Spotify for podcasters, Apple Podcasts, Google, Yandex, Overcast, Mave, Castbox, Telegram (↓)

#подкаст #DataHeroes

LEFT JOIN

25 May 2023 14:26

SETTERS MEDIA — издание для тех, кто согласен на будущее
На этой неделе наши друзья @setters вышли на совершенно новый уровень создания контента — запустились как полноценное медиа о будущем.

Медиа о будущем — что это?
Теперь их обновленном сайте будут выходить материалы в рамках четырех важных тем:
🔵 Дело — истории людей, которые выбирают делать: строить карьеру, запускать бизнесы и развивать команды.
🔵 Техно — будущее технологично, поэтому стоит внимательно следить за развитием технологий.
🔵 Тренды — чтобы понять, куда катится мир, нужно наблюдать за тем, что в этом мире обсуждается ярче всего.
🔵 Смыслы — то, чего всем нам не хватает — основные идеи в искусстве, психологии и культуре.

Причем тут все-таки будущее?
Ребята объединили темы, которые они будут обсуждать в телеграм-канале и блоге, единой философией. Их манифест — видео, которое правда стоит посмотреть, чтобы прочувствовать их посыл. Посыл заключается в следующем:
«Будущее в любом случае наступит. И нам с вами выбирать, каким оно будет. Для этого стоит наблюдать и выделять из хаоса происходящего действительно важные детали, тем самым его упорядочивая».

Звучит действительно здорово (даже заставляет остановиться и подумать о важном). Спасибо, @setters, теперь будем с еще большим интересом наблюдать за вашим проектом!

LEFT JOIN

23 May 2023 11:43

Инструмент AI Functions для Databricks SQL: на заметку онлайн магазинам (и не только)
Зачастую, служба поддержки — один из самых высоконагруженных отделов компании. И у нас есть хорошие новости!

В этой статье в блоге Databricks подробно разбирается способ применения модели GPT для оптимизации работы службы поддержки. Подобное взаимодействие с языковыми моделями и встраивание их в рабочий процесс менеджеров, взаимодействующих с обращениями и отзывами клиентов, в ближайшем будущем неизбежно станет новой реальностью, поэтому спешим вас познакомить!

Основная идея
AI Functions позволяет использовать весь генеративный и аналитический потенциал языковой модели GPT-3.5 Azure OpenAI прямо внутри Databricks SQL. С помощью такого инструмента можно классифицировать данные, генерировать шаблоны сообщений для службы поддержки, сортировать обращения в порядке срочности, искать закономерности и многое другое.

Кстати, аналогичный инструмент для PostgreSQL, использующий OpenAI GPT API, уже можно попробовать на GitHub. Однако этот плагин является неофициальным, экспериментальным, поэтому его не рекомендуется использовать с рабочими базами.

LEFT JOIN

19 May 2023 11:43

Автор книги «Пиши, сокращай» ОЧЕНЬ нервно курит

LEFT JOIN

17 May 2023 11:29

Это Data Heroes и мы… немного волнуемся 😌
Потому что сегодня мы пробуем для совершенно новый формат подкаста — интервью с гостем! В этом эпизоде Николай пообщается с Владимиром Шаровым — со-основателем международной компании в области IT-консалтинга Navicon.

Владимир поделился с нами историей своего пути в бизнесе и того, как Navicon стал одной ведущих компаний в своей нише. Вы узнаете:
🔵Как компания выходила из кризисов (а их было аж 3!)?
🔵Как строили бизнес раньше, когда не было коучей и тренеров по бизнес-мышлению?
🔵В чем главный ингредиент успеха Navicon?
🔵С какими трудностями могут столкнуться начинающие руководители и как к ним подготовиться?
🔵Кто такой хороший руководитель и как им стать?

И, конечно же, Владимир поделиться полезными советами для начинающих руководителей! Включай подкаст и погружайся в невероятную историю построения и развития собственной консалтинговой компании 💫

О спикере:
Владимир Шаров — co-founder Navicon
Корпоративный телеграм-канал — @navicon

Обязательно пишите в комментарии, если вам понравилось это интервью — будем стараться записывать этот формат чаще! 🔥

Слушайте подкаст на платформах: Spotify, Spotify for Podcasters, Apple Podcasts, Google, Yandex, Overcast, Mave, Castbox, Telegram (↓)

#подкаст #DataHeroes

LEFT JOIN

15 May 2023 12:31

Рынок труда данных: 2022 vs 2021
Мы собрали данные с HH, а Рома Бунин (Reveal the Data) вновь их визуализировал и сравнил количество и заработные платы вакансий в сфере аналитики и инжиниринга данных за 2022 и 2021 гг.

Печальным выводом служит заключение, что количество вакансий упало на 8%. Утешает то, что это данные по Москве и Петербургу.

Другое интересное наблюдение: инженеры данных стабильно востребованы и их зарплаты уверенно росли.

Познакомиться с исследованием подробно можно здесь и здесь.
@leftjoin

LEFT JOIN

22 June 2023 10:39

Зачем вообще нужно уметь пользоваться Docker?
Вы скорее всего уже устали слышать слово «докер». Может сложиться впечатление, что это что-то загадочное и непонятное, особенно для аналитика данных. Поэтому я хочу показать вам небольшой тред из твиттера, в котором Женя Козлов рассказал про то, зачем эта компетенция нужна и как ее получить. В треде вы найдете массу полезных источников и статей, которые помогут вам понять, что же такое не только Docker, но и контейнеризация в целом.

Советую сохранить этот тред, чтобы регулярно повторять базовые вещи!

P.S. А еще, я начал регулярно вести Twitter-аккаунт, делиться там мнением относительно новых трендов и делиться опытом в SQL и анализ данных. И постить мемы, разумеется!

Подписывайтесь ❤️

LEFT JOIN

19 June 2023 09:07

Город засыпает, просыпаются рекрутеры и делают выбор — кто попадет в команду разработки внутренних продуктов?

Ребята из МТС любят играть в мафию и проводить One Day Offer. Недавно они подумали: «Почему бы не совместить эти две активности и заодно не найти аналитиков разных профилей?».

Команда МТС развивает сервисы в рамках собственной экосистемы HR Tech. Это может быть разработка системы управления эффективностью или создание корпоративного портала для сотрудников. И у них крайне амбициозные планы — стать первым цифровым HR с комплексным подходом к разработке и поддержке внутренних продуктов. Но для этого им нужны настоящие профи.

Готовы участвовать и проверить — вы Дон SQL или мирный аналитик? Кликайте по ссылке и успевайте начать игру до 19 июня включительно!

LEFT JOIN

15 June 2023 11:11

Аналитик-разработчик в Yandex.Cloud
Yandex.Cloud — облачная платформа, которую используют тысячи компаний и предпринимателей, от технических специалистов до международных корпораций. Она позволяет быстро и просто получить доступ к современным технологиям обработки и хранения данных – виртуальным машинам, управляемым базам данных, распознанию и синтезу речи.

Сейчас команда Yandex.Cloud ищет аналитика-разработчика!

Что нужно будет делать?
Собрать юнит-экономику бизнеса, а также заниматься построением прогнозной модели (бизнес-моделирование процессов, форкастинг временных рядов) и работать над воронкой (гипотезы, эксперименты, оценка непрямых эффектов).

Вы — тот, кто им нужен, если вы:
🔵 Получили техническое или математическое образование, уверенно владеете Python и можете написать сложную бизнес-логику на SQLв удобном для чтения виде,
🔵 Умеете перевести в ТЗ нечетко сформулированные задачи и понимаете реальные потребности бизнеса, ставите себя на место заказчика,
🔵 Сможете детально и понятно объяснять результаты исследований,
🔵 Аккуратны, самостоятельны, инициативны, внимательны к деталям и знаете английский язык.

А еще?
Будет большущим плюсом, если вы уже работали в сфере облачных технологий!

Если вы пройдете собеседование и вас примус в команду:
🔵 Вы станете частью сильной команды, с которой можно расти, получите возможность влиять на процесс и результат и сможете работать в гибком графике. А еще сотрудникам предоставляемся расширенный ДМС и существует система премий, которые начисляются каждые полгода после прохождения ревью.
🔵 Также, компания предоставляет сотрудникам скидки в бассейнах, фитнес-центрах и магазинах партнеров и оплату курсов, тренингов и участия в профильных конференциях.

🔥 Уже захотелось начать работать в Yandex.Cloud? Отправляйте отклик на их вакансию!
#реклама

LEFT JOIN

13 June 2023 15:24

Как случайность объясняет мир вокруг нас?
Давайте продолжим разговор про главный инструмент аналитиков данных и дата саентистов — про статистику.

Мы уже освежили в памяти базовые вещи, вспомнили, что такое выборка и генеральная совокупность, вспомнили как посчитать основные описательные статистики.

Сегодня давайте вспомним одну из самых главных вещей в статистике — центральную предельную теорему (ЦПТ). Если уже все про нее знаете, все равно просмотрите карточки — потом блеснете на собеседовании фундаментальными знаниями.

P.S. Помните, что никто не в силах вам запретить поставить забавную реакцию этому посту или переслать пост из канала @leftjoin лучшему другу.

LEFT JOIN

12 June 2023 12:12

Исчерпывающая лекция Андрея Карпаты, сооснователя OpenAI, о GPT 🎓
На форуме Microsoft Build 2023, который состоялся в этом мае, помимо презентаций новинок от Microsoft, были и другие заметные выступления. Например, с потрясающей лекцией «State of GPT» выступил Андрей Карпаты из OpenAI.

В своей презентации он рассказал о том, как тренировалась модель GPT и как создать ассистента, аналогичного ChatGPT. Он рассказал о токенизации, предварительной тренировке, fine-tuning и обучении с подкреплением на основе отзывов людей (RLHF).

Андрей — это, можно сказать, один из пап ChatGPT, поэтому послушать его лекцию, сопровожденную подробными слайдами, — настоящая находка для фаната языковых моделей. Лекция, если что, на английском 🇨🇦

LEFT JOIN

08 June 2023 14:32

Фишки, которые должен знать каждый пользователь ClickHouse
ClickHouse славится тем, что не тормозит и поддерживает SQL. Но не все знают, что правильная архитектура базы может ускорить выполнение запросов до немыслимого уровня.

В своем докладе генеральный директор компании Altinity (которая занимается консалтингом по использованию и настройке ClickHouse) Роберт Ходжес расскажет несколько лайфхаков, которые могут вам пригодиться при проектировании базы данных.

Мы хотим выделить 2 лайфхака, которые показались нам особенно полезными:
🔵Во-первых — трассировка запроса. Оптимизировать запрос крайне непростая задача, которая требует богатого опыта и интуиции. Не всегда понятно до конца, какие действия производит СУБД во время обработки запроса. К счастью, в ClickHouse есть возможность увидеть трассировку запроса, то есть последовательность действий, которые были выполнены системой.

🔵Другой лайфхак может помочь при построении таблицы для данных, у которых структура не очень строгая. Если заранее не известно, какой набор полей будет в каждой записи, можно воспользоваться массивами. В одно поле записывается массив названий различных показателей, в другое - массив значений этих показателей. Такое архитектурное решение удобно за счет богатого арсенала функций для работы с массивами.

Остальное, как всегда, в самом докладе на блестящем английском!
#краткий_пересказ

LEFT JOIN

07 June 2023 09:42

На чем держится весь мир анализа данных?
Друзья, мы перезапускаем нашу самую любимую рубрику из закрытого проекта FULL JOIN — основы статистики. В ближайшие несколько недель мы пройдемся по самым простым вещам, а затем начнем вспоминать чуть менее тривиальные понятия и аспекты матстата.

Начнем с того, что с ростом любой компании растет и объем генерируемых данных. Но какой толк от данных, если их не анализировать?

Анализом данных, как вы и сами знаете, занимаются аналитики данных. Но что на самом деле он из себя представляет? Давайте вспомним азы статистики, на которых зиждется весь анализ, чтобы эта терминология у вас отскакивала от зубов, а все понятия прочно и однозначно закрепились в голове. Как говорится, чтобы если вас ночью разбудили и спросили, вы ответили без запинки. Или, что более вероятно, если вас спросят об этом на собеседовании в компанию мечты.

P.S. Если вам это все давно хорошо знакомо, то этим постом лучше поделиться с другом, ведь лучший подарок — книга пост из канала @leftjoin.

LEFT JOIN

05 June 2023 10:27

⚖️ ChatGPT: доверяй, но проверяй 🧑‍⚖️
Хотя, возможно, другой заголовок был бы уместнее для сегодняшнего поста: «Подлог в заведомо корыстных целях с использованием ChatGPT». А дело все вот в чем: англоязычный Twitter бурлит тредами о шумной истории, в которой юридическая компания в качестве примеров для суда в рамках одного дела привела кейсы, полностью выдуманные ChatGPT.

🔵 Кратко
Адвокат Стивен Шварц в деле против авиакомпании, во время рейса которой получил травмы его подзащитный, в качестве примеров аналогичных судебных тяжб привел названия, описания и имена участников дел, сгенерированные ChatGPT. Чтобы упростить суду работу (или, возможно, разъярить судью), он даже сопроводил дело скриншотами из чата.

Все могло бы показаться невинным: человек мог не знать, что ChatGPT — не поисковик и не агрегатор информации, а инструмент на основе языковой модели. Но вся соль ситуации начинает «чувствоваться», когда, читая переписку адвоката и ChatGPT, ты понимаешь, что промпты, составленные первым, вероятнее всего, были очень качественны, так как ответы, данные вторым, полны деталей и уверенности в достоверности предоставляемых фактов. Так, на вопрос адвоката: «Точно ли это существующее дело?», ChatGPT отвечает: «Да, я проверил, это дело существует в надежных юридических базах LexisNexis и Westlaw».

Следующее заседание суда, которое даст характеристику действиям Стивена и сдвинет дело с мертвой точки разбирательств по поводу использования ChatGPT, пройдет 8 июня.

💬 А нам-то оно зачем?
А лишь затем, что вся эта история довольно поучительна: ChatGPT — это инструмент для генерации текста, кода, идей и прочего. Но использовать его, не проверив полученную информацию, — так себе идея и, вероятнее всего, будет в будущем наказуема согласно регулируемым законодательством канонам.

LEFT JOIN

01 June 2023 11:52

Подарок подписчикам: SQL data-аналитик вместо вас на ChatGPT 🚀
Наслушавшись курсов про промпт-инжиниринг, мы c коллегой Егором собрали небольшое решение, которое будет писать SQL-запросы для вашей базы данных вместо вас.

Как оно работает?
Используя Jupyter ноутбук и ChatGPT API, вы сможете сгенерировать структуру вашей базы данных в формате JSON с помощью нашего скрипта. А затем, используя созданный контекст и описание БД, ChatGPT начнет писать SQL-запросы, как это делает любой аналитик, прошедший курсы Яндекс.Практикума.

Круто, где можно найти решение?
Код доступен в открытом репозитории, и каждый может забрать его себе. You’re welcome!

Кстати, про подобные фишки и примеры кейсов моей компании Valiotti Analytics я чаще пишу в своем LinkedIn профиле, поэтому подписывайтесь, чтобы быть в курсе всего самого актуального из мира англоязычной аналитики данных и генеративных моделей.

LEFT JOIN

26 May 2023 10:11

☕️ Rebooted! Под утренний кофе: еженедельный дайджест о технологиях, данных и аналитике 🗞
Не ждали? Или скучали и сгорали от любопытства, когда мы снова начнем выпускать новостные дайджесты? Надеемся, что второй вариант! Возрождаем нашу «кофейную» традицию и угощаем вас порцией свежих новостей.

🔵 Microsoft Fabric: новый продукт на основе ИИ
На этой неделе разработчики из Microsoft анонсировали релиз предварительной версии своего нового детища, единой интеллектуальной платформы для хранения данных и аналитики Microsoft Fabric. Намеченный в преемники PowerBI, этот многофункциональный «тяжелоатлет» объединит в себе и пространство для данных, и платформу для управления моделями, и аналитический инструмент в рамках одного интерфейса.

Звучит неплохо, но не скажется ли это на перемещении задач с плеч инженеров на аналитиков? И как это повлияет на качество работы последних?

🔵 Meta: около 6К человек уволены
Еще с ноября прошлого года, когда Meta начала сокращать сотрудников (что диковинным образом совпало с датой релиза ChatGPT), каждая волна увольнений стала повсеместным инфоповодом. Конечно, число сокращенных сотрудников поражает, но и не стоит забывать, что это компания со штатом в более чем 70К человек по всему миру.

🔵 AiDIN от Alteryx: движок генеративного ИИ
AiDIN был анонсирован во время конференции Alteryx Inspire и в качестве своих возможностей предлагает свой потенциал ИИ для аналитики данных и обнаружения закономерностей. С точки зрения концепции выглядит как продукт будущего, включающий в себя основные достижения ML последнего полугодия: автомоделирование, обработка естественного языка, умный анализ локации, компьютерное зрение. И все это с содействием ИИ.
#дайджест #под_утренний_кофе

LEFT JOIN

24 May 2023 10:27

Новые вакансии по вашему запросу на сайте: Prompt Engineer
Ранее мы уже писали про reverse prompt engineering и бесплатный курс по созданию промтов для ChatGPT. А сегодня хотели бы поделиться новостями русскоязычного рынка труда, ведь, как выяснилось, многие из наших подписчиков находятся в России.

Если вы введете название вакансии «Prompt Engineer» в поисковую строку hh.ru и снимете ограничение поиска по городу, в котором HH вас «поселил», то увидите не менее 20 подходящих вакансий.

Сейчас может быть самое удачное время для того, чтобы освоить новые навыки и влиться в индустрию, пока многочисленные онлайн школы не начали выпускать «сертифицированных» специалистов.

А если кто-то уже успел занять свое место в нише, будем рады рассказам и инсайтам!

LEFT JOIN

22 May 2023 12:29

Перезагрузка блога leftjoin.ru: на старт, внимание, марш!
Последний год наш блог был на паузе, так как мы уделяли больше внимания другим проектам. Но делиться информацией в формате статей и лонгридов нам ой как хотелось, поэтому мы приняли решение вернуться!

Первая статья уже на сайте
Чтобы стать полноценным медиа о данных и технологиях, мы усердно взялись за блог. И уже выпустили первый материал — обзор на достаточно свежую базу данных Hydra (нет-нет, ничего общего с почившим маркетплейсом в даркнете). В статье мы расскажем о её основных особенностях, составим запросы для решения нескольких задач и сравним время их выполнения.

Ну, что ж, с перезапуском нас! 🔥
P.S. Делитесь в комментариях, как вам статья?

LEFT JOIN

18 May 2023 11:12

Reverse Prompt Engineering или «Верни все, как было!»
Знаете, кто такой «засланец»? В кино это пришелец, который попадает на Землю и живет среди людей, не раскрывая своей натуры. Мы к чему: судя по буму статей, публикуемых в англоязычных источниках, «засланцев» в мире контента скоро станет очень много.

А спонсором такого натиска являются, конечно же, языковые модели. С этим фактом остается только смириться, но что если хочется не просто плавать в этом океане контента, сгенерированном AI, но и самому седлать волну и стоять у штурвала?

И вот тут-то и возникает необходимость в таком приеме по работе с языковыми моделями, как reverse prompt engineering.

Какие возможности он открывает?
🔵 Узнать, какой промпт мог быть использован для генерации имеющегося текста, если он был написан AI.
🔵 Узнать, какой промпт мог бы быть использован для генерации имеющегося текста, будь он написан AI, а не человеком.
🔵 Добыть любую ценную информацию из имеющегося текста.
🔵 Создать с помощью AI аналогичный текст на любую тему и с любыми структурными изменениями, взяв исходный текст как образец.

Reverse prompt engineering кратко
1️⃣ Сформулируйте для ChatGPT основную задачу.
2️⃣ Вставьте статью, которую вы хотите проанализировать.
3️⃣ Попросите ChatGPT извлечь из нее основные данные, например, ключевые слова.
4️⃣ Дайте ChatGPT задачу составить промпт к статье, основываясь на этих данных.
5️⃣ Скопируйте и вставьте этот новый промпт обратно в ChaGPT, указав нужную тему для статьи и, если хотите, даже ключевики или стиль изложения.

А зачем оно, собственно, надо?
Тут все просто: контент — это инструмент воздействия на мир и взаимодействия с ним, и если вы хотели бы быть услышанным и замеченным, только грамотно написанный, информативный и качественный с концептуальной точки зрения контент даст вам ту суперсилу, о которой вы мечтаете. Будь вы студент, блоггер, крупный бизнес с насыщенным контент-планом, reverse prompt engineering — это хорошее подспорье в любом деле и обязательный к освоению навык.

LEFT JOIN

16 May 2023 10:48

2023: год ChatGPT. И курсов по ChatGPT
ChatGPT продолжает штурмовать заголовки новостей и уже стал самым частым инфоповодом, связанным с ИИ. Один за другим появляются онлайн курсы. Недавно я наткнулся на один такой, который советую к прохождению, «Бесплатный курс по ChatGPT».

Курс AIacademy содержит полезные инсайты, которые пригодятся тем, кто планирует работать с ChatGPT. Лектор курса Илья Мартын вообще порадовал тем, как он вежливо общается с чат-ботом. Вы только взгляните на отрывок!

LEFT JOIN

12 May 2023 17:07

Ребята из Setters запустили в своем канале новую рубрику «Что я купил в этом месяце» и предложили мне стать их первым гостем.

А я как раз купил офигенный штатив для записи моих теннисных матчей через SwingVision и телепромптер для сьемки новых видосиков. Да, скоро контента про аналитику данных станет еще больше!

В их канале я еще рассказал о других недавних покупках (обновление подписки на Youtube и новые заколки для дочки оставил за кадром), которые принесли мне море эмоций и стоили каждого потраченного евро.

P.S. Дочка все-таки считает, что заколки тоже проходят по этим двум критериям и должны быть в списке.