Как стать автором
Обновить
63.04

Визуализация данных *

Облекаем данные в красивую оболочку

Сначала показывать
Порог рейтинга
Уровень сложности

Система визуализации и мониторинга. Grafana + Prometheus

Уровень сложности Простой
Время на прочтение 5 мин
Количество просмотров 3.8K
Системное администрирование *IT-инфраструктура *Визуализация данных *
Туториал

Немного расскажу про установку Grafana на windows и настройку базовых метрик систем.

Пару слов о самой Grafana и для чего она нужна.

Grafana – это платформа для мониторинга, анализа данных и визуализации собранных данных с открытым исходным кодом. По сути она используется для визуального представления собранных метрик для более комфортного слежения за состоянием системы.

В данной статье буду использовать:

Читать далее
Всего голосов 7: ↑7 и ↓0 +7
Комментарии 6

Новости

Профилирование Python — почему и где тормозит ваш код

Уровень сложности Средний
Время на прочтение 10 мин
Количество просмотров 5.4K
Блог компании RUVDS.com Python *Отладка *Визуализация данных *
Туториал
Перевод

Представьте ситуацию: вы написали скрипт для обработки каких-то данных на ноутбуке, ушли попить кофе, а когда пятнадцать минут спустя вернулись, завершилось едва ли 10%.

Почему скрипт работает так медленно? Какая его часть тормозит? Дело в чтении данных, их обработке или сохранении? Как ускорить исполнение? Действительно ли скрипт вообще медленный?

Ответить на все эти вопросы поможет инструмент под названием «профилировщик» (profiler).
Читать дальше →
Всего голосов 43: ↑42 и ↓1 +41
Комментарии 6

Опыт визуализации данных на геокарте

Уровень сложности Средний
Время на прочтение 9 мин
Количество просмотров 1.1K
Блог компании Usetech Геоинформационные сервисы *Визуализация данных *
Кейс

Всем привет! Меня зовут Евгений Яфаркин, я dotnet backend разработчик. В этой статье я хочу поделиться своим опытом решения задач, связанных с отображением данных на геокарте: как самим решением, так и инструментами, которые мы для этого использовали. 

В первую очередь, статья будет интересна техническим специалистам. Также, найденное решение, как и решение по визуализации данных, будут интересны владельцам продуктов.

Статья разбита на две большие части: 

Читать далее
Всего голосов 4: ↑1 и ↓3 -2
Комментарии 0

Опыт PT: BI на страже кибербезопасности

Уровень сложности Средний
Время на прочтение 5 мин
Количество просмотров 1.1K
Блог компании Visiology Информационная безопасность *Big Data *Визуализация данных *Хранение данных *
Из песочницы

Привет, Хабр! Сегодня мне хотелось бы поговорить о том, как можно применить BI, а также оценить роль, которую BI играет в цифровой трансформации компании. Ответы на эти вопросы мы получили на своем опыте, когда начали внедрять новую аналитическую платформу и обнаружили интерес к ней со стороны многих департаментов компании. Под катом — история, как мы перевели BI в Positive Technologies на единую платформу.

Узнать больше про этот кейс
Всего голосов 16: ↑13 и ↓3 +10
Комментарии 3

Истории

Симулятор Графического Монохромного Дисплея на Graphviz

Уровень сложности Простой
Время на прочтение 4 мин
Количество просмотров 2.4K
Визуализация данных *Промышленное программирование *Программирование микроконтроллеров *Производство и разработка электроники *Электроника для начинающих
Туториал

В разработке электроники часто приходится делать отладку при помощи графических дисплеев. Есть и вовсе законченные устройства с точечными экранчиками.

Проблема в том что у языка Си нет встроенной библиотеки для отрисовки битовых матриц в отдельном окне подобно тому как это есть в Python или C#. Поэтому отлаживают такой код обычно на конечных устройствах.

В этом тексте я написал как можно отлаживать графические дисплеи на DeskTop PC без самого физического дисплея.

Читать далее
Всего голосов 10: ↑9 и ↓1 +8
Комментарии 13

BI-аналитика на коленке: делаем веб-аналитику в DataLens

Уровень сложности Средний
Время на прочтение 4 мин
Количество просмотров 1.4K
Python *Визуализация данных *Веб-аналитика *
Из песочницы

Привет. Я Витя, продуктовый аналитик в Тинькофф Страховании. Как и многие мои коллеги, я привык работать с готовыми мастер-системами, готовыми ETL-процессами, готовыми инструментами работы с данными. Всё это я уже давно воспринимаю как должное.

Однако что делать, если ты - человек с большим бэкграундом в аналитике, а перед тобой pet-project, где хочется тратить на всё 0 рублей, на проекте пару рук и ещё ничего не настроено?

Читать далее
Всего голосов 7: ↑7 и ↓0 +7
Комментарии 0

Исправляем мнемосхему диспетчеризации за 2 часа

Уровень сложности Простой
Время на прочтение 3 мин
Количество просмотров 2.9K
Интерфейсы *Визуализация данных *SCADA *Дизайн Инженерные системы *
Из песочницы

Вдохновившись статьёй моего друга про печальность интерфейсов в промышленном секторе (АРМ), я решил сделать свою версию того же самого, но с немного другим уклоном.

В том посте были комментарии из серии «всё везде регламентировано, раз так сделано — значит умные люди подумали», но если в условном Газпроме за АРМ наблюдает инженер или техник, который отличает на схеме трехходовой клапан от обратного, то в гражданских системах часто за этим следят те же диспетчера, что следят за пожаркой, диспетчеризацией лифтов и прочих систем, диспетчера часто меняются, новые могут не знать чего то, а для того же ТЦ быстрота фиксации и ликвидации аварии могут спасти много денег.

Этим я хотел показать, что удобно и красиво вовсе не значит анимации на каждый переход + тени и градиенты. Ну Хабр тому доказательство, как бы.

Читать далее
Всего голосов 24: ↑24 и ↓0 +24
Комментарии 21

Статистика по финансовым рынкам или будни дата-аналитика

Уровень сложности Средний
Время на прочтение 8 мин
Количество просмотров 2K
Python *Визуализация данных *
Кейс
Recovery mode

Есть крутой статистический портал, аггрегатор данных по большинству финансовых бирж - WORLD FEDERATION OF EXCHANGES (WFE). На этом сайте представлен широкий спектр разнообразных данных, множество интересных показателей - раздолье для дата-аналитика. Какие биржи самые крупные? Какие имеют самую высокую динамику развития? Где больше всего активности? На эти и многие другие вопросы можно ответить, зная python и приложив немного усилий и фантазии.

В этом посте в качестве упражнения покажу, как можно поиграть с данными, посмотреть статистику и понаблюдать за динамикой выбранных показателей.

Читать далее
Всего голосов 6: ↑5 и ↓1 +4
Комментарии 10

Как показать миллион зданий на карте — и не сломать браузер

Уровень сложности Средний
Время на прочтение 7 мин
Количество просмотров 4K
Блог компании 2ГИС JavaScript *Работа с векторной графикой *Геоинформационные сервисы *Визуализация данных *
Кейс

В 2ГИС мы аккумулируем огромное количество геоданных, с которыми взаимодействуют миллионы пользователей ежедневно. Анализируя их, мы можем получить ценную информацию и найти важные идеи для развития городов. Эти данные также полезны организациям.

Чтобы помочь бизнесу и муниципальным организациям, мы решили создать 2GIS PRO — инструмент для GPU-аналитики, с возможностью визуализации огромного количества данных на карте в виде диаграмм и графиков.

Расскажем, как мы получаем такую картинку, как это всё работает под капотом, и посмотрим, на что способен ваш браузер, ведь ему предстоит отображать сотни тысяч объектов одновременно.

Расскажем, как мы получаем такую картинку, как это всё работает под капотом, и посмотрим, на что способен ваш браузер, ведь ему предстоит отображать сотни тысяч объектов одновременно.

Читать далее
Всего голосов 18: ↑18 и ↓0 +18
Комментарии 13

Моделирование движения космических объектов (симулятор гравитации)

Уровень сложности Простой
Время на прочтение 6 мин
Количество просмотров 3.2K
Python *Анализ и проектирование систем *Визуализация данных *Визуальное программирование *
Туториал

Моделирование планетарного ускорения, солнечной системы и взаимодействия любого количества объектов на космической карте в замкнутой системе!

Читать далее
Всего голосов 5: ↑4 и ↓1 +3
Комментарии 31

Как мы организовали бета-тест для нового BI и набрали 57 доработок

Уровень сложности Простой
Время на прочтение 4 мин
Количество просмотров 427
Блог компании Modus BI Визуализация данных *Облачные сервисы *
Кейс

Привет, Хабр! На связи Саша Чебанов, Product Owner компании Modus.

Аудитория нашего основного продукта – это холдинги сегмента enterprise и госструктуры. Но скоро у нас выходит продукт для совершенно другого сегмента – для малого и среднего бизнеса, с которым мы никогда не работали.

И нам было важно, во-первых, проверить на практике функционал продукта, во-вторых – посмотреть, как поведут себя пользователи из незнакомого сегмента.

Мы решили провести бета-тест: набрать хорошую команду из ЦА и экспертов, чтобы они прошли по всему циклу использования продукта и дали нам фидбэк. В этой короткой и простой статье я расскажу, как мы это организовали.

П.с. Текст не технический

Читать далее
Всего голосов 3: ↑2 и ↓1 +1
Комментарии 0

Как мигрировать на российский BI без потери качества?

Время на прочтение 4 мин
Количество просмотров 1.3K
Анализ и проектирование систем *Big Data *Визуализация данных *
Роадмэп

После ухода основных вендоров BI-решений: Qlik, Tableau, Power BI, проблема экстренного импортозамещения коснулась многих.
Во избежание приостановки процессов бизнес начал искать возможности продления лицензий или миграции на другую платформу без потери функциональности.
Делюсь эффективными шагами при организации проекта миграции на отечественную платформу на примере перехода с Qlik на PIX BI.

Читать далее
Всего голосов 9: ↑2 и ↓7 -5
Комментарии 0

Начал бегать с марта 2023. Итог 40 беговых тренировок. Организм не тянет. Это провал? Анализируем и визуализируем данные

Время на прочтение 2 мин
Количество просмотров 24K
Визуализация данных *Здоровье

Поледний раз нормально бежал будучи студентом на сдаче нормативов для получения зачета по физкультуре. И вот сустя десятки лет попытался начать бегать для здоровья. Первая пробежка получилась всего 300 метров и пульс зашкалил. Вторая - 1 км. А 3-я уже с пульсометром - 1.5 км и она первая на графиках ниже.

Читать далее
Всего голосов 35: ↑24 и ↓11 +13
Комментарии 235

Ближайшие события

«Стачка» — IT-конференция
Дата 15 – 16 сентября
Время 09:00 – 18:30
Место Ульяновск
Business⁢ Day: Retail CPG
Дата 28 сентября
Время 09:50 – 14:00
Место Онлайн
XIX конференция разработчиков свободных программ «Базальт СПО»
Дата 29 сентября – 1 октября
Время 10:00 – 19:00
Место Переславль-Залесский Онлайн

Визуализация данных в VR и AR: мыльный пузырь или новая эра BI?

Время на прочтение 5 мин
Количество просмотров 1K
Блог компании Quillis Big Data *Визуализация данных *AR и VR
Мнение

Надо сказать, что потенциально и у VR (виртуальная реальность), и у AR (дополненная реальность) всегда были отличные шансы завоевать корпоративный мир, не смотря на кардинальные отличия. AR совмещает отображение реального мира и элементы компьютерной дорисовки как в форме дополнения, так и в форме маски к реальным объектам, и именно этой технологии предрекали наибольший рост. VR, в свою очередь, является полностью смоделированным опытом в любом исполнении, который может даже не иметь ничего общего с демонстрацией действительности.

Однако пока что визуализация данных в VR и AR не практикуется повсеместно, это все еще экзотика, несмотря на огромный интерес к теме и прогнозы колоссального роста сферы. Так, еще в 2019 году TAdviser опубликовал свое исследование, где были представлены данные от ARtillry Intelligence, прогнозирующие 113% совокупного годового темпа роста (CAGR) в сегменте корпоративных AR-приложений на западном рынке в период 2017-2022 гг., что, в свою очередь, должно было сделать данный сегмент крупнейшим подсектором Cross-Reality. В то же время, сегменту корпоративных VR-приложений давали прогноз в 55% CAGR. Но сегодня из 2023 года мы можем констатировать, что темпы роста отраслей были в несколько раз менее значительными.

Почему так произошло? Это временное затишье или для обманутых ожиданий действительно были весомые причины? Мы можем попробовать разобраться в этих вопросах на примере нашего любимого подсегмента визуализации данных, и, забегая вперед, хочется сказать, что мнения экспертов противоположно отличаются друг от друга. Одни утверждают, что VR и AR – это неизбежное будущее визуализации больших данных, т.к. они просто не помещаются на плоскостях, а другие считают, что осмысление данных – это важный навык, который не получится затмить никакими модными фичами, а новый трехмерный формат ничуть не упрощает анализ, а иногда даже усложняет его.

Читать далее
Всего голосов 4: ↑4 и ↓0 +4
Комментарии 6

КЛКТ. Полноформатное исследование за полминуты

Уровень сложности Простой
Время на прочтение 6 мин
Количество просмотров 762
Работа с 3D-графикой *Визуализация данных *Медгаджеты Здоровье
Обзор

Рентген-исследование – необходимая часть диагностики для решения очень многих задач. Однако этот этап часто вызывает вопросы, недопонимания и сомнения. Почему конусно-лучевой компьютерной томографии можно не бояться и что она расскажет о пациенте, отвечает рентгенолог клиник эстетической ортодонтии Конфиденция, Валентина Рощина. 

Для начала разберемся с тем, что такое КЛКТ. Конусно-лучевая компьютерная томография (КЛКТ) – метод 3D-диагностики высокой точности с применением компьютерного томографа. Таким методом диагностики пользуются многие специалисты, посмотрим кто и зачем.

Читать далее
Всего голосов 3: ↑2 и ↓1 +1
Комментарии 4

FineBI-g brother is watching you: как мы начали анализировать действия пользователей в Fine

Уровень сложности Средний
Время на прочтение 8 мин
Количество просмотров 934
Блог компании Tele2 Big Data *Визуализация данных *Хранение данных *Хранилища данных *
Туториал

Привет, Хабр! Мы — BI-команда Tele2. В прошлом году, как и многие наши коллеги по рынку, мы столкнулись с проблемой поиска альтернативы BI-платформам покинувших нас вендоров. О том, как подходить к замене платформы, уже много рассказано здесь и на других ресурсах. В этой статье мы остановимся на конкретном кейсе — как мы решили задачу поиска и последующего анализа действий и полномочий наших пользователей, а также взяли под контроль обновление источников. Под катом мы рассказываем, как собрать датасеты в FineBI, на которых можно построить дашборды о дашбордах и получить данные о посещаемости отчетов, их расположении в директориях и доступах к ним пользователей.

Читать далее
Всего голосов 3: ↑3 и ↓0 +3
Комментарии 3

Эти прекрасные древовидные карты (альтернатива pprint)

Уровень сложности Средний
Время на прочтение 7 мин
Количество просмотров 4.3K
Блог компании RUVDS.com Алгоритмы *Обработка изображений *Визуализация данных *
Обзор
Перевод

Древовидные карты — это инструмент визуализации, позволяющий обобщать данные разной формы и размеров. На сегодня они чаще всего используются для отображения файлов, занимающих всё пространство диска, но путём некоторых доработок их можно сделать гибким инструментом для анализа и навигации по беспорядочным массивам данных.
Читать дальше →
Всего голосов 43: ↑43 и ↓0 +43
Комментарии 11

Разница между векторными и растровыми картами

Уровень сложности Простой
Время на прочтение 3 мин
Количество просмотров 2.1K
Maps API *Геоинформационные сервисы *Визуализация данных *
Обзор

При визуализации геопространственных данных часто используется картографическая подложка в виде Яндекс/Google/OSM/etc, которая в основном бывает двух видов - векторная или растровая. Однако, когда дело доходит до интеграции карт в свое приложение, то не всегда очевидно какой тип больше подойдет.

В этом посте мы рассмотрим основные различия между этими двумя типами и обсудим, когда следует использовать одно или другое. Но сперва давайте определимся что есть что.

Читать далее
Всего голосов 10: ↑5 и ↓5 0
Комментарии 0

Жизнь и смерть в данных

Время на прочтение 10 мин
Количество просмотров 6.1K
Математика *Визуализация данных *Научно-популярное
Аналитика

Мне тут стало интересно, а на сколько лет можно прожить больше если исключить те факторы риска, на которые можно влиять самому? Чтобы ответить на этот вопрос я взял открытые данные одного из самых масштабных исследований влияния факторов риска на смертность “Global Burden of Disease 2019” [1] и с их помощью рассчитал оценку увеличения ожидаемой продолжительности жизни при условии исключения управляемых факторов риска. Чтобы было интереснее я оформил результаты в виде дашборда куда можно зайти выбрать страну, пол, возраст и факторы риска и посмотреть результаты. Под катом подробнее о процессе обработки данных, исходники самого дашборда на питоне и конечно подробно посмотрим на графики, там интересно.

Читать далее
Всего голосов 25: ↑23 и ↓2 +21
Комментарии 12

Анализ временных рядов, или как предсказать погоду на завтра

Уровень сложности Средний
Время на прочтение 9 мин
Количество просмотров 5.4K
Python *Математика *Визуализация данных *Машинное обучение *TensorFlow *
Из песочницы

Прочитав статью, вы узнаете, как можно прогнозировать погоду с точностью до двух градусов на 3 месяца вперед, причем здесь преобразование Фурье и машинное обучение

Читать далее
Всего голосов 21: ↑17 и ↓4 +13
Комментарии 32

Вклад авторов