Котятки🐱,
на прошлой неделе мне задали очень интересный вопрос на подумать: какие элементы в рамках дизайна дашборда я бы убрала под кнопку "Вжух - сделать красиво!"
Переводя на русский, что именно должно измениться после нажатия этой кнопки?
Толщина линий? Подписи? Визуальный мусор?
🔮Пока я составляла ответ на этот вопрос, наткнулась на иной способ "сделать красиво": добавить эмоцию!
1)Вот тут вы найдете принцип эмоционального сторителлинга для дашборда:
https://pipdecks.com/pages/emotional-dashboard?srsltid=AfmBOoppp7xYonr5Cv_TLeXqddVcRMJ_cJ3ZxoAz5qIXMaa1Sit-n2Fy
2) Вот тут будут все тактики сторителлинга в формате шортридов:https://pipdecks.com/pages/storyteller-tactics
3) Ну и вот тут можно будет скачать все тактики в виде карточек👇

Котятки🐱,
мы тут как бы за датавиз, но про всякую дичь тоже не забываем)
У меня в избранном валялось сообщение, в котором было написано "Что думаешь?" и ссылка на это:
https://github.com/yaronn/blessed-contrib
Наконец, я по ней прошлась. И там дашики в пиксельарте, которые можно выводить прямо в терминале.
Два вопроса: за что и зачем?
P.S. в общем, если у меня дома останется из компов только китайская линукс-панелька из журнала вог, или же все BI резко вымрут, а luxms обанкротится, мы знаем, что делать.
P.P.S. Эта история пойдет в ту же копилочку городских легенд, что и история про хранилище на shell-скриптах.

Котятки😼, у Modus BI нормальный такой Хабр, у меня в подборке валялась их статья про инфобез и немного про ролевые в BI, делюсь: https://habr.com/ru/companies/modusbi/articles/801715/

Котятки😼,
Сегодня был мой последний день работы в VK, это было весело и интересно) ❤️Но я барышня простая, периодически чувствовала себя Фейнманом в НАСА, - оч интересно, крайне технологично, «IT как производство» порой завораживает, порой угнетает.
Итак, мои мысли безработного котика сегодня:
1 Всегда иметь DRP (план на случай аларм и цунами) и график дежурств на выходных - хорошо.
2 Дашборды в Jira - чистое зло.
3 Я не люблю панельные дискуссии совсем, но когда бывшие и текущие коллеги сходятся пообсуждать Data Mesh - поднимаю жопку и иду послушать конференцию. https://cloud.vk.com/events/vk-cloud-conf24/

​​Котятки🐱,
статья на хабре про безопасность данных в BI разбудила во мне старые боли.
Безопасность данных в BI является критически важной, поскольку эти системы обрабатывают и хранят большие объемы информации, включая конфиденциальные данные. И именно на этих данных принимаются решения, - этот класс систем является традиционным эндпоинтом. Все заканчивается на нас, котятки)
Угрозы безопасности данных в BI можно классифицировать на несколько основных типов - я нашла картиночку с полным списком, разберу то, с чем столкнулась и где набивала шишки.
1) Несанкционированный доступ: ваша кузница дашбордов - всего лишь один из эндпоинтов, по крайней мере в крупной компании, и вопрос ролевой модели должен звучать всегда: согласованно ли организован доступ по всей цепочке доступа к данным?
Нет ли у меня нигде дырок, когда, например, папка, в которой лежат дашборды, закрыта, но API, из которой тянется чувствительный датасет, можно дернуть из Postman без токена?
2) Искажение данных: какую математику мы берем на борт, то у нас и получится. Но даже если механика сборки показателей одинакова и датасет одинаков, пытливый и упорный ум найдет способ сманипулировать данными. Тема дискриминации на данных всегда актуальна)
3) Требования регуляторов: ФЗ-152 и аттестация по нему - тот еще квест, зато в конце нам не будет больно. Но это не точно.
4) Ошибки пользователей: я ловила вшитые пароли там, где их быть не должно, замену техпользователя на перс аккаунт (и наблюдала, как смена владельца таблицы повлекло за собой отказ в чтении данных со стороны СУБД),
Практические рекомендации простые:
Ограничить количество пользователей с правами администратора.
Использовать роли для группировки пользователей с аналогичными правами.
Регулярно пересматривать и обновлять права доступа в соответствии с изменениями в бизнес-процессах.
Настраивать мониторинг действий пользователей для выявления подозрительной активности (и да, для этого надо для себя определить, что в вашем королевстве будет считаться "нормальной активностью")
Что почитать?
Оч простенькая статья https://iso.ru/ru/press-center/journal/1868.phtml - в ней, в основном, ставятся правильные вопросы, которые вы должны себе задавать.

Котятки🐱,
наткнулась сегодня на рекомендацию чего-то, что меня заинтересовало более книжки с кабанчиком, поэтому, гуляя по парку, я начала курс "System Design for Interviews and Beyond" (скачать можно много где, а зыринг тут https://rutube.ru/plst/699855/?ysclid=m4aypqtvxs665037908)
В парке было холодно, мои руки замерзли, а листать телефон носом - вообще не удобно, скажу вам.
Поэтому дошла я только до требований.
В связи с этим расчехлила свои экзамплы, связанные с BI , делюсь тут:
1) Про минимум нефункциональных требований (FURPS+), которыми я оперирую при определении требований к дашикам https://www.marcinziemek.com/blog/content/articles/8/article_en.html
2) Шаблон BRD к дашборду (только структура): https://community.fabric.microsoft.com/t5/Desktop/Business-Requirement-Document-Template/m-p/4292574
3) Экзампл нормальной заполненной спецификации дашборда: https://urban.digit.org/local-governance-product-suite/local-governance-stack/dashboards-and-analytics/dashboards-and-analytics-service-configuration/dashboards-ui-configuration
P.S. Это по факту описание дашика, структура которого идеально ложится в базовый шаблон спецификации (а дальше уже каждый подкручивает под себя).

Котятки🐱,
сегодня пятничка, и самое время себя чем-то побаловать.
1)Сегодня я шарилась по французским сайтикам, но путь опять меня привел к моему любимке - https://ourworldindata.org/
В частности, дата-история про историю искусственного интеллекта сегодня мой топ:https://ourworldindata.org/brief-history-of-ai
2) Поиски удивительного занесли меня на сайт дизайнера Даниила Криворучко и его графикой воссоздания состояния солнечной системы -https://myshli.com/project/blindsight для собственного фильма.
Что ж, это поистине прекрасно, моим графичкам есть куда стремиться, а сайт "про создание фильма" - тот еще образчик сторителлинга https://blindsight.space/memories/

📈Начинаем конференцию! Через 5 минут, в 11:00 по Москве

Ссылки на трансляции
Youtube
ВК видео

Котятки😼
Я еще со времен Moscow dataviz Awards (премия по датавизу, была тут https://moscowdatavizawards.com ) подписана на исследования Яндекса, они там участвовали.
Сегодня на волне конференции по сторителлингу вспомнила, что там лежат хорошие дата-истории, которые и студентам можно дать за образец, и как учебное пособие для разбора сторителлинга использовать.
А что пишу? Нашла старый ресурс по ИИ 2020 года. Гляньте, как все мы ошибались в оценках.
https://yandex.ru/company/researches/2020/ai-news

Котятки😻
Я практически всегда пишу что-то про штуки, которые чаще всего являются индивидуальными хард -скиллами.
Сегодня же делюсь статьей, в которой подробно разбирается, как ‘готовить’ аналитиков как команду, подбирать их для проектов и получать максимум от их умений, - как положено, там внутри и кейсы, и статистика, и даже графички) Мы же тут про датавиз😼
Линк:
https://big-i.ru/innovatsii/tekhnologii/797103/

Котятки😼,
У меня с доисторических времен огромная любовь к Qlik(и нет, не потому,что они могут очень хорошо кэшировать данные и пользователи не возмущаются, что все медленно грузится). Основная причина этой любви кроется в таблицах: прямая и сводная таблицы в QlikView - это те маленькие покорители сердечек самых консервативных пользователей, которые хотят ‘табличку,как в эксель’.
Ну что ж, у меня в стеке снова Qlik)
А ниже реклама ребяток, которые в силах вам помочь, если вы, как и я, снова будете в большой BI-игре)👇

Котятки😻
Почти на каждом проекте я сталкиваюсь с data-разведкой, он же EDA. Казалось бы, зачем? Увы, не везде есть s2t и всякая разная описательная документация для источников и витрин, а еще реже встречается отлаженный процесс документирования изменений(наверно, последний раз такой эталонный процесс я встречала в проекте на хранилище в одном московском банке).
Механика и инструменты - в целом, ясны, а вот мануал-сборная солянка должен быть под рукой.
Держите https://habr.com/ru/amp/publications/752434/

​​Котятки 😻,
Сегодня мое утро началось с книженции ‘Одураченные случайностью’ (мой рекомендасьон), дошла до анализа трендов и не смогла остановиться в своих поисках.
Что открыла:
-материалов по временным рядам и трендам много, и есть даже в стиле ‘как для типичной Даши’, типа такого
https://ru.hexlet.io/courses/analytics-in-business/lessons/trends/theory_unit
-материалов для bi-аналитиков также много, то есть я как упоротый таблоист нашла себе гайды у Марии и классику по PBI в любом виде:
https://maryiamaziuk.com/time-series-analysis/
https://medium.com/@natashanewbold/trend-analysis-in-microsoft-power-bi-9f37957f9490
Но вот парадокс: всякие лайфхаки с анализом трендов через укрупнение по интервалам или метода переформирования ряда через ввод промежуточной группировки и анализ дельт - вообще не нашла (только по прямому запросу той же формулы Стерджеса). Короче то ли это было в моей жизни какое-то тайное консалтинговое знание, то ли пятничка, и я гуглю плохо. 😞

Котятки😻
Сегодня я залипла на статью про UX-манипуляции, которую вытащила из канала про бизнес/системный анализ
https://habr.com/ru/articles/865868/
Стала искать в своих заметках подобное,- и увы, полноценного гайда, как обольстить пользователей не нашла, только статьи с советами.
Но! Нашла у себя полный перечень антипаттернов с примерами и оч веселой подачей)
Поделюсь, пожалуй (и стырю себе):
https://www.oxagile.com/article/welcome-to-dashboardland-where-bi-mistakes-turn-into-insights/

Как просто верстать отчёты в PowerBI и не страдать?

На бесплатном вебинаре расскажет Мария Гришина - ведущий BI аналитик в ООО Салаир (РЖД) и автор телеграмм-канала «Power BI Design» создаст отчёт, который будет не только ровным, но и сочным, а главное — удобным для восприятия!

Что будет на вебинаре:
- раскроем секреты грамотной верстки
- поделимся полезными приёмами и лайфхаками
- узнаем, как правильно расставлять акценты, использовать цветовые схемы и шрифты так, чтобы ваши отчёты вызывали восторг у коллег и руководства.

🕗 Встречаемся 17 декабря в 19:00 по мск

Зарегистрироваться на вебинар

Давно не было подборок с интересными визуализациями!

🎞 Title Drops — увлекательное исследование явления title drop. Это момент, когда персонажи фильма произносят название самого фильма. Оказалось, что такие сцены встречаются гораздо чаще, чем кажется, и не только в биографических картинах.

🏆 Эффектно и лаконично анимированные результаты спортивных соревнований.

📰 Исследовательская статья о визуализациях Второй мировой войны с особым акцентом на карты из газет того времени.

📚 Карта книг, чаще всего упоминаемых на HackerNews. Все книги разделены по тематикам и дополнены краткими описаниями. В основном делятся связанным с бизнесом и программированием, но есть и наука с художественной литературой.

🏙 Любопытный хитмап преступлений в разных городах США. Данные взяты из открытых баз и обновляются в среднем раз в месяц.

Вакансия
2ГИС ищет менеджера продукта для 2GIS Pro —своей новой geoBI-системы управления и аналитики геоданных. Если стало интересно, пишите Ирине.

Котятки😻,
Каюсь, я люблю всякий опенсорс в двух случаях:
-у меня нет денег/бюджета
-класс решаемых задач в текущий и будущий момент настолько широк, что я понимаю, что рано или поздно придется брать напильник.
В остальных случаях я предпочитаю купить что-то вендорское или же страдаю, если нахожусь в архитектурных ограничениях.
Сегодня решала логическую задачку ‘что взять на data quality, если у тебя майкрософтовский стек’, и увлеклась - пошла тыкать в Great Expectations.
Про него можно почитать тут https://habr.com/ru/articles/739254/, а я шла по гайду тут https://anujsyal.com/mastering-data-quality-in-etl-pipelines-with-great-expectations и закончила туториалом https://github.com/datarootsio/tutorial-great-expectations/blob/main/tutorial_great_expectations.ipynb

Ну и документация, конечно же: https://greatexpectations.io
Ну что могу сказать?
-не верьте людям, которые питонячат в крупных компаниях как дата-инженеры, когда они говорят ‘да, есть коннекторы’ - они в качестве коннекторов понимают не тыкание на иконочку и ввод адреса и кредов, а sqlalchemy
-что хорошо дата-инженеру с airflow под боком - может быть не удобно с SSIS
-набор проверок (expectations) может быть недостаточен, особенно если это вас в качестве источника стоит интересная 1С.
Ну а так рекомендасьон, в целом норм.