🗞 Виз Ньюз

12 November 2024 21:56

Давно не публиковал проекты, к которым имею непосредственное отношение. Наконец-то, появился повод — запускаю в бета-тестирование микросервис Tilemapper по созданию плиточних карт России на основе данных пользователей:

https://mizinov.pro/tilemapper

Принцип работы простой:
1. Загружаете данные:
— в виде CSV файла (код региона | значение параметра) или
— в виде ссылки на Google-таблицу (должна быть доступна на чтение по ссылке)
2. Настраиваете цветовую легенду и другие параметры плиток
3. Скачиваете результат в формате PNG или SVG

Плиточную раскладку взял свою, которую использует ТАСС (можно скачать с github). Tilemapper ориентирован на задачи срочной визуализации, без необходимости программирования или регистрации в платных онлайн-сервисах. 😎

Дальше планирую добавить пресеты цветовых раскладок и сохранение пользовательских настроек в локальный кэш браузера.

Велкам, пишите баг-репорты и отзывы или просто пользуйтесь по необходимости. Если возникнут вопросы по использованию — задавайте. 😊

#сделалпроект

🗞 Виз Ньюз

31 October 2024 07:24

Акула датавиза Моритц Стефанер (Moritz Stefaner) поделился новым проектом, над которым работал в последнее вермя — визуализация Индекса климатической уязвимости и конфликтов (CCVI, Climate—Conflict—Vulnerability Index).

«Проект впервые предоставляет целостный взгляд на глобальные риски, связанные с климатом и конфликтами, с высокой временной и пространственной детализацией.

На основе множества общедоступных источников данных, информация охватывает не только климатические опасности, но и уровень подверженности и уязвимости населения»

Кажется, у Моритца уже есть свой узнаваемый стиль в дата-дизайне. Его работы я начинаю узнавать просто глядя на них.

https://climate-conflict.org (данные тоже дают скачать, если хотите поиграться)

@dataviznews

🗞 Виз Ньюз

18 October 2024 11:03

Недавно писал о ресурсе, на котором собраны тысячи исследовательских публикаций по визуализации данных.

И вот наткнулся на работу профессора Северо-Восточного университета (Northeastern University), в которой визуально собраны все публикации с еще идущей конференции IEEE VIS 2024. Мой любимый UMAP с навигацией и вспомогательными блоками.

История закольцовывается тем, что на конференции представлен его доклад о создании этого самого инструмента 🙂

@dataviznews

🗞 Виз Ньюз

17 October 2024 08:24

Прикольный студенческий проект о генерации пространственных планировок (квартирных, например) с использованием диаграмм Вороного.

«В работе представлена методика создания планировок с использованием диаграмм Вороного, где формы комнат определяются расстоянием от точек Вороного. Такой подход позволяет гибко изменять планировку стен, перемещая эти точки, что помогает удовлетворять различные ограничения, такие как размеры и соединение комнат.

Алгоритм итеративно перемещает центроиды Вороного до тех пор, пока не будет достигнута оптимальная планировка. В итоге, эта методика предлагает интерактивный способ создания разнообразных и функциональных планов с минимальным участием пользователя."

https://github.com/nobuyuki83/floor_plan

@dataviznews

🗞 Виз Ньюз

15 October 2024 05:20

На этой неделе проходит крупнейшая в мире конференция по визуализации данных — IEEE Vis.

Я ее очень ждал и собирался ехать на нее лично, что бы провести демо новой версии Космографа, над которой мы сейчас активно работаем. Но судьба распорядилась иначе, и два мощных урагана во Флориде заставили организаторов перевести конференцию в онлайн формат, а демо-сессю вообще отменить 😭

Конференция эта с академическим уклоном, в этом году я с большим любопытством слежу за работами, связанными с LLM.

Если вам тоже интересно, то статьи оттуда можно найти на сайте https://vispubs.com, где собрано несколько тысяч академических публикаций по визуализации данных, начиная аж с 1986 года 🙀

@dataviznews

🗞 Виз Ньюз

24 September 2024 03:19

Fathom — компания Бена Фрая (Ben Fry), одного из авторов Processing — выкатили супер быстрый инструмент для анализа CSV файлов Excel-таблиц прямо в браузере под названием Rowboat.

Попробовал открыть файл на 500 мегабайт, и это заняло всего несколько секунд! Интерфейс тоже супер быстрый, за что отдельный респект.

Интересно, что под капотом. У меня есть догадки, но до конца докопаться не смог.

https://rowboat.xyz (бесплатно, но нужно зарегаться даже что бы пример посмотреть)

@dataviznews

🗞 Виз Ньюз

25 July 2024 07:23

Горячо любимая мной Амелия Ваттенбергер (Amelia Wattenberger) поделилась своим экспериментальным проектом для изучения синтаксиса SVG, на котором строится львиная доля всех онлайн визуализаций.

Можно через интерфейс добавлять визуальные элементы (SVG-примитивы, такие как прямоугольник, круг, и так далее), и тут же видеть, как меняется код, даже разобрать векторную кривую на части. А еще можно делать наоборот — менять код, и смотреть, как меняется картинка. Все по заветам Виктора Брета!

@dataviznews

🗞 Виз Ньюз

03 July 2024 07:23

Заметил, что много обсуждений вызвал факт, что Всемирный банк включил Россию в список стран с высоким уровнем дохода.

В связи с этим хочу поделиться визуализацией Income Mountains от Gampinder. По сути, это график распределения уровня доходов в мире.

Возможно, вы удивитесь, узнав, что половина людей в мире живут на сумму менее 8 долларов в день (700-800 рублей, включая все их траты).

Если вы получаете среднюю Московскую зарплату (данные разнятся, но давайте возьмем 100 тыс. рублей в месяц), то вы зарабатываете больше чем 85-90% людей на планете.

А если вы живете, например, в Калифорнии, получаете среднюю зарплату и вынуждены сводить концы с концами, то вы все равно входите в 0.5% самых богатых людей.

Выводы делайте сами, можем обсудить в комментариях.

@dataviznews

🗞 Виз Ньюз

22 June 2024 16:11

Меньше чем через час обсуждаем Outlier с @analyst_club, приходите

https://youtube.com/live/-mUWP2qRSYo?feature=share

🗞 Виз Ньюз

20 June 2024 18:12

🌐Как проходила главная датавиз конференция года

С 12 по 14 июня в Чикаго проходила конференция Outlier 2024, это ежегодная конвенция Data Visualization Society - нашего всемирного "профсоюза".

Главной темой были Disruptive innovations (да, звучит интересно, и непонятно). Мой типичный доклад про дашборды, конечно же, не взяли, но я все равно поехал, чтобы живьем окунуться в эту атмосферу.

А в рубрике мир тесен оказался Никита Рокотян, победитель Information Is Beautiful 2023 и World Visualization Prize 2019, автор канала Виз Ньюз. Мы с ним земляки, но в Екатеринбурге ни разу не пересекались, зато на другом конце планеты удалось встретиться.

И мы решили завтра устроить подкаст, поделиться с вами инсайтами и трендами, которые вынесли с этой конференции.

🔹Начнем на Ютубе 21 июня в 18 мск (у Никиты это будет 8 утра, у меня 11)

🔹 Трансляция состоится тут

🗞 Виз Ньюз

06 June 2024 18:05

Кажется, я забыл добавить ссылку на визуализацию выше. Держите: http://blog.echen.me/embedding-explorer.

И если интересны подробности, можете почитать блог автора. Он — CEO компании SurgeAI по размечиванию данных, и они продают датасеты для тренировки нейронок, насколько я понял.

🗞 Виз Ньюз

10 May 2024 05:23

📚 На какие англоязычные датавиз ресурсы можно подписаться

Недавно коллеги у меня поинтересовались, на какие рассылки можно подписаться, чтобы узнавать что-то новое из мира визуализации данных. Поскольку на Западе люди лишены возможности читать уютные телеграм-каналы, пришлось вспоминать и составлять список.

- Альберто Кайро (Alberto Cairo) недавно завел блог на Substack. В его материалах обычно много хороших примеров из реального мира с объяснением того, как делать правильно, а как нет.
https://theartofinsight.substack.com

- Еще мне нравится блог Энрико Бертини (Enrico Bertini, ко-хост известного подкаста Data Stories и датавиз-исследователь).
https://filwd.substack.com

- Отличный блог Flowing Data (за авторством Nathan Yau) c регулярными постами.
https://flowingdata.com/newsletter

- Энди Кирк (Andy Kirk) раз в месяц публикует свои любимые визуализации.
https://visualisingdata.com/newsletter

- У Information is Beautiful тоже есть рассылка (я не большой фанат, но в список не мог не внести).
https://informationisbeautiful.net/about

- Наконец, любопытный блог под названием Junk Charts, где автор берет плохие по его мнению визуализации и переделывает их.
https://junkcharts.typepad.com/junk_charts

Если тоже подписаны на что-то классное, чего здесь нет, — пишите, добавлю в список.

@dataviznews

🗞 Виз Ньюз

03 May 2024 07:18

👆В дополнении к Настенькиному посту скажу, что у Streamlit достаточно интересная история.

Это опен сурс проект, начатый в 2018 году, а в 2022 его купила компания Snowflake за ни много ни мало 800 млн. долларов 🤯 Не знаю точно, какие у них на Streamlit были планы, но в то время они хотели делать платформу визуальной аналитики для своих сервисов. Я тогда собеседовался к ним на должность инженера визуализации данных, но они решили, что мои проекты слишком творческие.

🗞 Виз Ньюз

30 April 2024 01:42

Умельцы из твиттера сделали инфографику о том, как топ ChatBot Arena менялся за последний год.

Чат-гпт все ещё держится, но ей дышать в затылок. Конкуренция идёт серьезная. Посмотрим, есть ли у ClosedAI ещё козыри в рукаве.

Что такое ChatBot Arena – тут.

@ai_newz

🗞 Виз Ньюз

23 April 2024 18:29

Шорт-лист конкурса HSE Creative Open / Инфографика! 🌟

Ух, судить было не просто!
Но жюри лишь чуть-чуть подрались в процессе выявления победителей! 🥰
Посмотреть результаты можете по ссылке!

Работы очень классные и в очень разных жанрах! Дата-арта столько восхитительного, о моя коллекция будет пополнена! ❤️

Если что, награждение победителей и призёров состоится в эту пятницу 26 апреля в театре «Практика».
Начало церемонии в 19:00.
Регистрация вот тут.

Картинка украдена у Нади Андриановой отсюда ☺️

🗞 Виз Ньюз

07 November 2024 07:23

Nomic анонсировали функцию скроллителинга, которую можно будет добавлять к своим картам.

Она показалась мне немного скучной, но, возможно, это из-за того, что у меня пока нет задачи, где эта функция была бы полезна.

Если бы вы таким пользовались, напишите в комментариях, пожалуйста, для чего именно.

https://www.nomic.ai/blog/posts/atlas-story-congressional-tweets

@dataviznews

🗞 Виз Ньюз

18 October 2024 17:43

Настенька пишет, что аналогичная карта есть еще и для публикаций c конференции CHI 2024 (посвященной взаимодействию людей и компьютеров, human-computer interaction).

1763 работы, и с каждым годом их все больше. Удачи, если хотите за всем этим следить 🙃 Хотя вот такие вот карты делают эту задачу немного проще.

У меня есть похожая карта для всех статей с https://vispubs.com, поделюсь на как-нибудь ей тоже.

@dataviznews

🗞 Виз Ньюз

18 October 2024 08:24

🔭 Коллеги исследуют рынок аналитиков

Вы наверняка уже читали об этом в соседних каналах, но не грех напомнить. Ребята из NEWHR с 2018 исследуют рынок и проводят регулярные опросы. И если не от нас с вами, то откуда у нас же возмуться данные о своей собственной индустрии.

Что исследуют?
- Зарплаты и их динамику.
- Рейтинг работодателей для аналитиков
- Где и как работают аналитики
- Как меняется зона ответственности аналитиков
- Как аналитики ищут работу и выбирают работодателя.
- Чему учатся аналитики
- Каких экспертов котируют

А вам что с этого?
- Ребята планируют делиться со всеми участниками исследования промежуточными результатами, а также обещают приглашение на закрытый стрим, где буду делиться всеми находками и отвечать на вопросы.

Окончательные результаты исследования будут опубликованы в начале 2025.

Ссылка на опрос: https://forms.yandex.com/u/66ea88f5e010db2807c79c4f/

🗞 Виз Ньюз

16 October 2024 08:24

Делюсь с вами большущей доской, на которой собраны различные инструменты для OSINT — разведки по открытым данным. А вот тут еще можно посмотреть вебинар с обзором этих инструментов.

Автор — Клаудия Титце (Claudia Titze), известный в узких кругах OSINT специалист. Еще на ее сайте можно найти интересные видео, в которых она рассказывает про некоторые свои расследования.

@dataviznews

🗞 Виз Ньюз

29 September 2024 15:33

Мой прекрасный коллега Ярослав сделал залипательную визуализацию нашей болтовни наших дискуссий в дорогом-любимом датавиз-чатике. Радует, что чатик живёт и движуха не затухает 🤓

🗞 Виз Ньюз

25 July 2024 15:31

По традиции забыл поделиться ссылкой. Держите — http://svg.wtf

🗞 Виз Ньюз

03 July 2024 08:58

И вот другой классный проект от них же — Dollar Street.

Фотографии людей и их быта с указанием уровня дохода. Данные немного устаревные, но сути это не меняет.

@dataviznews

🗞 Виз Ньюз

25 June 2024 01:54

Коллеги ищут волонтеров для работы над интересным исследовательским проектом. Звучит, как отличная возможность прокачать свои навыки в машинном обучении, если вы начинающий специалист. Ниже привожу информацию и контакты.

---
Идея проекта — применить машинное обучение к теории групп, и в результате написать совместную статью в хорошем рецензируемом журнале.

Минимальное требование — вы знакомы с питоном, и у вас есть несколько часов свободного времени в неделю (альтернативно — можно не знать питон, но хорошо знать теорию групп). Будете работать под руководством опытных специалистов в области машинного обучения и приобрете навыки по современным методам нейронных сетей, reinforcement learning и т.д.

Если Вам интересно участие - напишите @alexander_v_c (Александр Червов), чат для обсуждений тут .

Проект осуществляется при участии опытных специалистов (и многие ведут телеграм каналы):
Александр Червов (к.ф.-м.н. 25 лет math&DS )
Кирилл Хоружий (ex-Физтех, Max Planck Institute of Quantum Optics)
Андрей Лукьяненко (Kaggle Grandmaster, 11 лет в IT &DS)
Александр Абрамов (Kaggle Master, SberDevices, 10 лет в DS)
Павел Снопов (ИППИ РАН)
Владимир Шитов (Helmholtz Munich)
Сергей Нечаев (д.ф.-м.н., directeur de recherche au CNRS-Universite Paris-Saclay)

🗞 Виз Ньюз

20 June 2024 18:12

Кринжую от видео Алексея, на и ладно! Приходите в субботу послушать про то, как прошел Outlier 🦻

🗞 Виз Ньюз

17 June 2024 06:23

Вот и закончился Outlier в Чикаго. Было интересно и весело. Повстречались с @analyst_club вживую.

Лишний раз убедился в том, что международное датавиз-сообщество открытое и разнообразное (аналитики, разработчики, художники, ученые, …). А еще оно динамично меняется, много новых лиц. Это вам не научные конференции, где из года в год одни и те же люди 🙂

Из того, что запомнилось: был веселый доклад Илая Холдера (Eli Holder) из студии 3iap про их работы. В том числе про то, чем может быть чревато плохое отображение погрешностей на графиках; а еще про поляризацию политических взглядов с занимательными иллюстрациями.

И выступление Стива Франконери (Steve Franconeri, профессор психологии Visual Thinking Lab, Northwestern University) про то, как наш мозг воспринимает визуализации. Стив поделился своими исследованиями и другими материалами и доклада тут.

Ну и мои слайды тоже держите 👇

@dataviznews

🗞 Виз Ньюз

06 June 2024 07:06

Забыл поделиться новостью: мой доклад на Outlier был принят, а также меня пригласили поучаствовать в панели, посвященной визуализации и генеративному AI 🤖

Так что на следующей неделе лечу в Чикаго участвовать в конференции и общаться с местным датавиз-сообществом. Поделюсь с вами своими слайдами после выступления.

Пока готовлюсь, наткнулся на экспериментальную визуализацию эмбеддингов, которая дает возможность взглянуть не только на карту точек, но еще и на вектор признаков для каждой точки. Пока не понимаю, насколько это нужно, но хочется взять на заметку.

@dataviznews

🗞 Виз Ньюз

08 May 2024 19:52

Information is Beautiful напомнили о старом, но классном и до сих пор актуальном проекте по анализу и визуализации популярности четырехзначных пин-кодов на основе утекших 3.4 миллионов кодов.

Удивительно, как много людей просто использует свой год своего рождения.

Подробности на картинке. А если захотите детальной аналитики — вот оригинальная статья автора из далекого 2012.

@dataviznews

🗞 Виз Ньюз

03 May 2024 07:18

Недавно показали Streamlit – питоновская библиотека для разработки веб-приложений. В том числе для интерактивных визуализаций и мини-дэшей.

Хороший дизайн и даже их дизайн система в открытом доступе!

Примеры приложений:
- prettymap
- генератор твитов
- showflake health

Очень напоминает shiny 💫

🗞 Виз Ньюз

27 April 2024 22:12

Майк Босток с коллегой рассказали про загрузчики данных — абсолютно восхитительную фичу в Observable Framework. Загрузчики призваны решить проблему последней мили, то есть выгрузку и обработку данных непосредственно для задачи визуализации.

Майк иллюстрировал свой рассказ анализом трафика Observable, а это данные ~8000000 запросов к API. Визуализация времени выполнения каждого запроса, с цветовой разметой типа задач. Как на общей картине отлично видно дорогие по времени задачи, паттерны поведения пользователей и некоторые аномалии. И как анализ визуализации позволил ему с командой оптимизировать ряд слабых мест в API Observable.

Для тех, кому сложно вникать на английском языке, Яндекс Браузер в целом справился с переводом видео. Рекомендую всем неравнодушным — как всегда у Майка абсолютно замечательная демонстрация силы датавиза. Материал есть в виде статьи.

#observable #код

🗞 Виз Ньюз

08 April 2024 06:35

🟨 Небольшая новость для фронтенд-разработчиков: на прошлой неделе мы выпустили Unovis 1.4.

В ней вы найдете:
– Аннотации! Теперь поверх любого графика можно разместить текст. Главное — можно делать это динамически, привязав к данным;
– Поддержку искривленных линий для отображения связей на графе, SVG-иконки для узлов, а также длинные подписи на связях;
– Точки разной формы на легенде.

И помимо этого, конечно же, мелкие улучшения и исправления багов.

Подробности на сайте: https://unovis.dev/releases/1.4