databases_secrets | Unsorted

Telegram-канал databases_secrets - Базы данных | Access, SQL, Big Data

30088

Всё о базах данных простым языком. Сотрудничество: @max_excel РКН: vk.cc/cHhG5h

Subscribe to a channel

Базы данных | Access, SQL, Big Data

Как правильно использовать большие данные: строим хранилища на MPP-СУБД

В этой статье автор поделится опытом, как снизить капиталовложения в оборудование с большим объемом памяти, добиться производительности и высокой отказоустойчивости при создании DataLake и корпоративного хранилища данных.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Фильтрация данных в SQL

В этом ролике автор подробно и наглядно разбирает процесс фильтрации данных в SQL с использованием оператора WHERE.

00:00 Ключевое слово WHERE и фильтры для выбора строк
01:55 Операции, которые можно использовать в WHERE
02:32 Использование BETWEEN в WHERE
03:05 Использование IN в WHERE
03:58 Использование LIKE в WHERE
04:59 Логические операции AND, OR и NOT в WHERE
07:36 Итоги

Смотреть это видео на youtube: youtu.be/Q8UmK7wC9Hk

Читать полностью…

Базы данных | Access, SQL, Big Data

Инфраструктура для data engineer Kafka

В этом материале автор покажет, как можно использовать Kafka в дата-инженерии и как её "пощупать".

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Как мы перенесли архив данных из Teradata в GreenPlum с помощью Hadoop и PXF

В этой статье автор расскажет о полученном опыте и результатах переноса архива данных объёмом более 400 Тб из Teradata в GreenPlum, а также о трудностях и решениях, связанных с этим процессом.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Мастер-класс: SQL с нуля

Знание SQL – один из важных навыков, ведь практически любой сайт, от маленького блога до крупнейшего интернет-ресурса, использует базы данных. Чтение почты, перевод денег другу, покупки в интернет-магазинах или регистрация на сайте – всё это происходит через обращение к различным базам данным.

На этом мастер-классе автор разбирает работу с СУБД Microsoft SQL Server при помощи Microsoft SQL Server Management Studio.

В процессе вы научитесь:
• подключаться к серверу баз данных;
• восстанавливать базу данных из резервной копии;
• основным элементам интерфейса Management Studio;
• основным элементам самой СУБД SQL Server;
• смотреть содержимое и структуру таблиц;
• разберете базовые команды для выборки и обновления данных в таблицах.

Смотреть это видео на youtube: youtu.be/xd2H4jR1nrI

Читать полностью…

Базы данных | Access, SQL, Big Data

Теория и основные технологии MongoDB

В этом видеоуроке автор подробно разбирает основные технологии MongoDB, использующиеся в процессе разработки. Вы рассмотрите, чем MongoDB отличается от других баз данных, что такое кластеры, коллекции и документы.

Смотреть это видео на youtube: youtu.be/Rq_tgaJN_zQ

Читать полностью…

Базы данных | Access, SQL, Big Data

SQL HowTo: TOP-N на субинтервалах

Автор периодически сталкивался с однотипными задачами вида "показать TOP-N позиций на каждом из вложенных интервалов некоторого периода", поэтому в этой статье он решил описать создание эффективного, но компактного запроса для PostgreSQL, который решает такую задачу.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Организуем High Availability PostgreSQL

Чтобы система долго работала без сбоев и перерывов, нужно поработать над отказоустойчивостью. В этой статье автор даст несколько способов её построить и покажет готовое решение.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Разработка баз данных: Интервью

0:17:38 Программист под Oracle и PL/SQL
0:20:13 Согласованность данных
0:25:38 Тесты в БД
0:28:55 API в базах данных
0:31:17 Хранение кода и системы контроля версий
0:33:38 CI & CD
0:40:00 Про администраторов баз данных (DBA)
0:42:47 Как происходят вмешательства в базу
0:49:13 Кодревью
0:58:04 Про бэкапы
0:59:07 Инструменты
1:01:53 Задачи в ритейле
1:06:28 Работа с большими данными
1:10:30 Чем хорош Oracle как провайдер БД

Смотреть это видео на youtube: youtu.be/_liOxMtBNR8

Читать полностью…

Базы данных | Access, SQL, Big Data

Как оплачивать зарубежные сервисы в 2026 году?

Можно бегать между посредниками и бояться блокировок после оплаты, а можно выпустить международную карту Lumio Pay и пользоваться любимыми сервисами без рисков.

— выпуск карты за 2 минуты
— лучший курс пополнения на рынке (у конкурентов на 20% выше)
— пополнение рублями или криптой
— чистые BIN карт, оплата без риска блокировок

Пока все ищут идеальное решение, оно у тебя перед глазами: @LumioPay

Читать полностью…

Базы данных | Access, SQL, Big Data

​​Хочешь быстро подтянуть свои знания в Excel и Google Sheets?
Устал собирать информацию по крупицам?

Тогда самое время воспользоваться специальным онлайн-курсом от Skillbox: «Excel + Google-таблицы с нуля до PRO», который научит тебя всем необходимым навыкам.

Ты получишь:
• Обучение, основанное на практике;
• Общение с наставником;
• Скидку 50%; 🎁
• Курс PowerPoint в подарок;
• Вечный доступ к курсам;
• Возможность рассрочки;
• Диплом Skillbox.

Не упусти такую возможность, прокачивай свои навыки: clck.ru/3RfjPF

Читать полностью…

Базы данных | Access, SQL, Big Data

Как ХК «Авангард» автоматизировал бизнес-аналитику?

После переезда на новую арену у клуба вырос объём данных о продажах билетов, кейтеринге и мерчандайзинге. Чтобы оперативно работать с этой информацией, «Авангард» автоматизировал отчётность и построил дашборды на Yandex DataLens и Yandex Cloud. Теперь бизнес-пользователи могут практически в реальном времени анализировать фактический спрос и сравнивать его с прогнозом. А с помощью нейроаналитика в DataLens можно просто задать вопрос по данным — система сама найдёт нужную информацию и сформулирует ответ. За три года выручка от продажи билетов выросла более чем на 80%. Подробнее о кейсе — в ролике.

👉 Узнать больше о Yandex DataLens

Читать полностью…

Базы данных | Access, SQL, Big Data

Основы работы в Oracle SQL Developer

В этом видеоуроке автор подробно и наглядно разбирает основы работы с бесплатной визуальной средой разработки Oracle SQL Developer, а также основные преимущества и недостатки использования данной среды.

Смотреть это видео на youtube: youtu.be/yZHAI9wfaE0

Читать полностью…

Базы данных | Access, SQL, Big Data

Теория баз данных

В этом видеоуроке автор подробно разбирает основы баз данных.

00:55 Содержание
01:59 БД и СУБД: MySQL vs PostgreSQL
03:58 Состав БД: индексы, транзакции, триггеры
07:10 SQL vs NoSQL
11:40 Типы данных
15:27 Как описывать поля в ТЗ
17:31 Типы связей
19:55 Выбор типа поля
24:00 Как описывать связи в ТЗ
27:17 Как проектировать связи в БД
30:34 Ключи Primary и Foreign
34:30 Нормализация
36:48 Лайфхаки
39:18 Миграции, сиды, дампы

Смотреть это видео на youtube: youtu.be/YdCGGBUCoDQ

Читать полностью…

Базы данных | Access, SQL, Big Data

Проблемы при переходе с MS SQL на PostgreSQL: типы данных

В этой статье автор продолжит серию и поделится проблемами некоторых различий типов данных в MS SQL и PostgreSQL.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Как зарабатывать на мобильной игре

Как привлекать пользователей, работать с монетизацией и развивать мобильную игру в 2026 году?
Обсудим вместе с экспертами игровой индустрии России на RuStore Mobile GameDev Conf. 2 ноября, Москва + онлайн.
Участие бесплатное, по регистрации

Зарегистрироваться

#реклама 16+
rustore.ru

О рекламодателе

Читать полностью…

Базы данных | Access, SQL, Big Data

Сравните модели GigaChat на своей задаче в GigaPlatform AI Studio

Это среда, в которой можно менять настройки моделей и проверять ответы на своих запросах.

В AI Studio можно:
• Сравнить ответы двух моделей на одном запросе.
• Сравнить ответы при разной температуре.
• Настроить системный промпт и проверить его на нескольких запросах.
• Сохранить промпт и историю диалога в JSON.

Пять рабочих сценариев разобрали в статье.
Попробуйте AI Studio бесплатно и без ВПН.

Читать полностью…

Базы данных | Access, SQL, Big Data

Solar JSOC - Флагманский SOC с гарантией

Гарантии крупнейшего коммерческого SOCа России теперь доступны вам.

Узнать больше

#реклама 16+
rt-solar.ru

О рекламодателе

Читать полностью…

Базы данных | Access, SQL, Big Data

Авторизованные курсы по оборудованию Eltex от дилера №1

Проводим учебные курсы, включающие практические занятия и лабораторные работы.

По итогу успешной сдачи экзаменов обучающемуся выдаётся официальный сертификат от завода Eltex.

⚡Обучение в офисе или онлайн

⚡Опытный преподавательский состав

⚡Лабораторные работы - 50% времени

⚡Обучение юридических и физических лиц

Записаться

#реклама 16+
eltexcm.ru

О рекламодателе

Читать полностью…

Базы данных | Access, SQL, Big Data

Ищете где скачать Excel?

Хватит мучиться, воспользуйтесь интернет-магазином с оригинальными ключами KeySoft. Вы сможете приобрести лицензионный продукт, в котором будут доступны все функции без каких-либо ограничений:

• Лицензионная подписка для Office 365 Pro+

• Лицензионный ключ активации для Office 2021 Professional Plus

Преимущества KeySoft:
✔️ широкий ассортимент
✔️ только официальные продажи
✔️ разнообразие способов оплаты
✔️ быстрая и квалифицированная техподдержка
✔️ более 3000 положительных отзывов на независимых ресурсах.

На все товары Microsoft действует промокод на скидку 5% — NEW5 — успейте воспользоваться!

Читать полностью…

Базы данных | Access, SQL, Big Data

3 дня. 60 откликов. 1 оффер.

Очень интересный кейс произошёл у команды Софи — ии-ассистента для поиска работы.

К ним в поддержку написала девушка, которая отписалась от продукта ещё месяц назад:

«Мне прислали оффер!»


Начали разбираться — оказывается, она пользовалась только 3 тестовыми днями.

То есть за 3 дня ии-ассистент успел сделать 60 откликов. Потом она отписалась.

А уже позже — из этих откликов её позвали на интервью, и одно из них привело к офферу.

«Оффер с той вакансии, куда я сама никогда бы не откликнулась»


Изначально Аня отменила подписку, так как было дорого. Ребята честно спросили у Ани, считает ли она теперь, что подписка стоит своих денег — и получили утвердительный ответ.

В следующий раз доступ в Софи откроется 20 октября.

Если хочешь получить 3 дня бесплатного доступа - подписывайся на этот канал, все анонсы будут там.

Читать полностью…

Базы данных | Access, SQL, Big Data

+1 навык в копилку
Разбираемся с одной из самых популярных СУБД

Умение работать с СУБД PostgreSQL — база, которая точно не будет лишней. В бесплатном курсе от Selectel собрали все необходимое для погружения: от основ реляционной модели до создания таблиц и работы со сложными запросами. Вы актуальную теорию, практические задания и экономию десятков часов на самостоятельных поисках информации.

Курс подойдет как для первого знакомства с PostgreSQL, так и чтобы освежить и структурировать знания. Регистрируйтесь и начните обучение бесплатно

Реклама. АО "Селектел". erid:2W5zFJoGXgV

Читать полностью…

Базы данных | Access, SQL, Big Data

Яндекс открыл исходный код YTsaurus Flow — фреймворка для потоковой обработки данных

Он обрабатывает события по мере поступления, а не ждёт, пока они накопятся для пакетной обработки. Инфраструктурную часть фреймворк берёт на себя: долгосрочное состояние хранит в динамических таблицах YTsaurus, а число партиций для каждого этапа подбирает автоматически и сам перераспределяет нагрузку между машинами. Код открыт под Apache 2.0.

Как это работает на практике, видно по кейсу Рекламы. Чтобы дообучать модели, нужно понять, кликнули ли по показанному объявлению, и приложить к этому ML-факторы. Раньше события раскладывали по почасовым таблицам, а клик мог попасть в соседний час, поэтому self-join показов и кликов через MapReduce делали, только дождавшись следующей таблицы. Уже при нарезке на почасовые таблицы промежуточные копии данных по несколько раз писались на диск и читались обратно.

Теперь события группируются по ключу на лету, и клик попадает в ту же запись состояния, что и показ. Тяжёлую очередь факторов (сотни терабайт в час в сжатом виде) в состояние не пишут: её читают с отставанием на час, когда клик, если он был, уже учтён.

В итоге задержка сократилась с десятка-другого часов примерно до двух, почти на порядок, и без лишней записи огромных объёмов данных.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Организация хранения исторических данных в Oracle

В этой статье автор разберет разные способы организации хранения исторических данных в Oracle. Под историческими данными будем понимать историю (лог) изменения данных в таблице.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Основы SQL

В этом ролике автор рассматривает на практике работу с основными командами языка запросов SQL.

00:00 Подготовка базы данных
04:36 Выбор данных (SELECT)
08:30 Указание текущей базы данных
09:58 Чувствительность к регистру
12:14 Выбор определенных колонок
15:28 Фильтрация с помощью WHERE
20:59 Фильтрация с И и ИЛИ
26:38 Поиск строки по шаблону
29:18 Свой среди чужих
31:26 NULL когда данные отсутствуют
34:27 Сортировка данных
38:37 Добавление записей
45:36 Обновление данных
52:32 Удаление данных

Смотреть это видео на youtube: youtu.be/WhzZZqoM-AY

Читать полностью…

Базы данных | Access, SQL, Big Data

Как мы продукт на PostgreSQL переводили

В этой статье автор поделится своими наработками как научить приложение работать с СУБД PostgreSQL и провести первую миграцию боевой системы.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Деревья ltree в PostgreSQL – простым языком

В этой статье автор подробно разберет иерархические деревья ltree в PostgreSQL и расскажет о базовых приёмах извлечения данных из таких деревьев.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Как был создан потоковый SQL-движок

Потоковый SQL-движок обеспечивает, чтобы результаты SQL-запросов всегда оставались актуальны, и их не приходилось пересчитывать. Даже в тех случаях, когда меняются данные, на которых основан запрос.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Как собрать полноценную платформу для обработки, хранения и визуализации данных в едином интерфейсе

В гибридной инфраструктуре локальный и облачный контуры можно соединить через Cloud Interconnect по приватному каналу. Это позволяет распределять нагрузки между собственными мощностями и облаком в рамках одной инфраструктурной схемы.

Для работы с данными Yandex Cloud обновила on-premises-платформу Stackland, которая разворачивается внутри инфраструктуры компании. Теперь на ее базе можно собрать полноценную платформу данных из готовых PaaS-компонентов: ClickHouse и PostgreSQL для хранения и обработки, Object Storage и Trino для аналитики, Airflow для оркестрации процессов и DataLens для визуализации.

Для оптимизации хранения Intelligent Tiering автоматически распределяет данные между тремя классами Object Storage в зависимости от частоты обращения. А Billing API позволяет отслеживать расходы с детализацией до отдельных сервисов и ресурсов.

Таким образом, компании могут объединять локальную и облачную инфраструктуру, разворачивать платформу данных в собственном контуре и управлять затратами без необходимости собирать каждый компонент с нуля.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Проблемы при переходе с MS SQL на PostgreSQL: активное использование временных таблиц

В этой статье автор подробно расскажет о наиболее распространенной проблеме, возникающей при переходе с MS SQL на PostgreSQL.

Базы данных

Читать полностью…
Subscribe to a channel