Доказательство теоремы CAP — теперь с картинками!
Теорема CAP гласит, что распределенная система может отвечать только двум требованиям из трех: согласованная, доступная и устойчивая к фрагментации.

Почему так? Ответы в коротком иллюстрированном гайде по ссылке — ну, или у нас в посте, но без иллюстраций. Гайд не углубляется в тонкости, но знакомит с основными  понятиями.

🔜 Представим простую распределенную систему — два сервера, которые обмениваются данными друг с другом и с внешним клиентом. На них хранятся данные о значении некой переменной V.

У этой системы могут быть следующие свойства:
🔵 Согласованность (Consistency) — если клиент отправляет запись V = 1 на один сервер, то второй при чтении должен вернуть такое же значение. Если на одном сервере V = 1, а на втором все еще V = 0, то система не согласована.
🔵 Доступность (Availability) — оба сервера, если только никто не пролил на один из них чай, отвечают на запросы клиента на запись и чтение данных.
🔵 Устойчивость к фрагментации (Partition tolerance) — система продолжает работу, даже если какое-то количество сообщений от одного сервера не доходят до второго.

🔜 Наконец-то подходим к доказательству.
🔵 Если система устойчива к фрагментации и доступна, она не может гарантировать согласованность — рано или поздно возникнет ситуация, когда клиент отправит запись на один сервер, а до второго она не дойдет. Тогда один выдаст V = 1, а второй V = 0.
🔵 Чтобы обеспечить устойчивость и согласованность, системе придется пожертвовать доступностью — то есть отказаться вносить данные, если она не может гарантировать, что все ее узлы получат обновление.
🔵 Практически в любой реальной распределенной системе неизбежны потери данных между нодами. При этом, она, скорее всего, не упадет — то есть она будет устойчива к фрагментации. А если она устойчива к фрагментации, то мы возвращаемся к пункту 1.

🔜 Все так просто?
На самом деле нет. К каждому пункту из поста можно добавить звездочку и написать дополнение, которое все усложняет, но это уже не влезет в пост.

Пришло время рассказать про мою книгу по аналитике для руководителей

Мы с командой уже довольно долго над ней работаем, и вот, наконец-то, этот процесс движется к завершению.

Мы уже задизайнили обложку (да, на картинке она) и теперь приближаемся к тому, чтобы отправить тираж в печать.

Ребята из «Эксмо» — крутые. Они помогли нам сделать классный продукт, который скоро попадет на полки книжных магазинов. Мы много раз переписывали материал и в итоге получился труд, который позволяет собственникам или топ-менеджерам получше разобраться в том, что такое работа с данными, какие роли в этом процессе важны, для чего вообще нужна аналитика, и как она помогает расти бизнесу.

Интересно ли вам было бы полистать такую книгу?

🔜 @datakolya 🔜

Как ИИ помог игрокам в го стать лучше
Все возрастающее влияние ИИ не всегда делает жизнь лучше. Тут и регулярные судебные разбирательства из-за авторских прав, и уже не скрытые угрозы вытеснить людей с рынка труда, и исследования, которые доказывают, что слишком активное использование ИИ ведет к потере критического мышления.

Но не все так плохо. Иногда ИИ помогает, наоборот, раскрыть человеческий потенциал.

💬 В го играют уже больше 2000 лет. Неудивительно, что за все это время уровень игроков вышел на плато. Какими бы гибкими ни были правила игры, рано или поздно люди нащупают все возможные стратегии и комбинации.

Так было до 2016 года, когда DeepMind представила AlphaGo — ИИ, который смог обыграть профессиональных игроков в го. Поражение подстегнуло их к созданию новых креативных стратегий и помогло выйти с плато по уровню игры, которое тянулось аж с 1950-х годов.

Есть вероятность, что ИИ, который с каждым годом все умнее, однажды все-тки выйдет за границы людских возможностей. И тут уже догнать его не удастся даже самым лучшим игрокам. Но все равно история выглядит очень даже вдохновляюще: ИИ помог увидеть новые возможности в древней и, казалось бы, от начала и до конца изученной игре (насколько вообще можно изучить такую игру, как го).

Нужен ли на самом деле мобильный BI?
На днях мы записывали подкаст с Иваном Вахмяниным из Visiology. Получился обстоятельный разговор про отечественный рынок BI, и историю Visiology услышать из первых уст было крайне интересно.

🔜 Среди прочего, Иван высказал интересную мысль о том, что несколько лет назад все носились идеей того, что BI должен быть в мобильном приложении, однако на практике почти никто не пользуется «мобильным BI».

Стало интересно узнать у вас. 👇🏻

Сергей Громов про Qlik, «Круги Громова» и BI-рынок в России
Если вы хоть как-то связаны с аналитикой и BI, скорее всего, про гостя нового выпуска вы хотя бы краем уха слышали.

И если не слышали про Сергея Громова, то про его исследование рынка российского BI «Круги Громова» — точно.

Вот рынок BI и обсудили:
🔵Какие риски несет (а какие не несет) использование ушедших из РФ BI-тулов в обход блокировок?
🔵Почему именно круги Громова и как вендоры BI относятся к этому проекту?
🔵Как дата-консалтинги зарабатывают деньги и какие навыки и знания нужны, чтобы успешно работать в этой сфере?

А еще про роль руководителя, сложности разработки своего продукта и отличия технологической компании от консалтинговой и продуктовой.

Смотреть: YouTube, VK Video
Слушать: Spotify, Apple Podcasts, Яндекс Музыка

Тренды в онлайн-образовании с точки зрения аналитики
У наших друзей из SETTERS Media вышел интересный материал про тренды в эдтехе. Вот несколько интересных моментов из него:
🔵 Для студентов большую роль играет сообщество, возможность пообщаться с экспертами и запустить первые совместные проекты.
🔵 Набирает популярность тренд на быстрое обучение — короткие видео, которые позволяют быстро освоить какой-то конкретный навык.
🔵 Студенты активно прокачивают софт-скиллы — наибольшей популярностью пользуются креативность, коммуникация и принятие решений.
🔵 Конечно, без ИИ не обходится — его активно внедряют и в учебные программы, и в процессы.

Многие из этих трендов мы тоже успели заметить, потому что целый сезон подкаста Data Heroes был посвящен онлайн-образованию. Но кажется, что они в большей степени относятся к креативным и гуманитарным направлениям. А вот с ИТ и аналитикой все немного сложнее.

🔜 Хотя креативность в ней тоже важна, вряд ли именно это самый востребованный навык. А быстрое обучение вообще скорее навредит — поможет нахвататься знаний по верхам, но не даст базу, которая необходима для работы в ИТ. Разве что без ИИ никуда, но и тут есть свои нюансы — мы уже много раз писали, что это не столько ценный помощник, сколько неопытный джун за которым все надо перепроверять.

А вы что думаете — эти тренды актуальны для онлайн-обучения ИТ-профессиям или у нас тут своя атмосфера? 👀

EdTech — третий материал цикла «Безответственные прогнозы» от SETTERS Media 🩶

🔡Лидеры среди soft-skills сменяются ежегодно — какие наиболее актуальны сейчас?

🔡Почему комьюнити — это одна из важнейших составляющих успеха при обучении?

🔡Классическое обучение vs формат быстрого обучения?

🔡С чем связан спрос на «помогающие профессии»?

Рассказывает генеральный директор
образовательного холдинга
Ultimate Education Павел Мосейкин ➡️ссылка.
🌧🌧🌧🌧🌧🌧🌧🌧🌧🌧
🌧🌧🌧🌧🌧🌧🌧🌧🌧🌧
🌧🌧🌧🌧🌧🌧🌧🌧🌧🌧

Data Science проект, который не смог
Пет-проекты есть у многих — их делают либо для портфолио, либо просто для души. Проблема с ними в том, что, когда нет внешней мотивации, легко потерять интерес и так и не закончить начатое.

🔜 Так и получилось у дата-саейнтиста Мартина Леллепа, который 1600 дней работал над своим проектом — с начала 2020 до конца 2024.

Суть была в том, чтобы собрать и проанализировать текстовые данные с немецкого новостного сайта, который ежедневно размещал короткие новости про COVID. Автор хотел провести семантический анализ и анализ метаданных: то есть определить, о чем чаще всего писали, как часто, в какое время и так далее. А также поделиться получившимся датасетом с общественностью.

Система работала полуавтоматически: заходить каждый день на сайт и копировать ссылки надо было вручную, а структурирование данных происходило уже без его прямого участия. В блоге есть более подробное описание и даже схемы.

Держался он довольно долго, но через 4 года ему это просто надоело. Знакомая ситуация? Наверняка да. Автор вывел для себя несколько правил, как избежать такого в будущем и сделать работу над проектами более приятной и эффективной:
1️⃣ Сразу продумать, как вы будете это презентовать. Не отпугнет публику слишком мрачная направленность датасета?
2️⃣ Не откладывайте самое интересное на потом — он свои данные так и не проанализировал. Старайтесь регулярно «подбадривать» себя промежуточными результатами, делитесь ими с коллегами, чтобы получить фидбек.
3️⃣ Автоматизируйте все, что можно.
4️⃣ Учитывайте частоту сбора данных — если раз в день это еще можно сделать руками, то если это нужно делать чаще, процесс надо автоматизировать.
5️⃣ Храните сырые данные. Еще пригодятся.
6️⃣ Когда возможно, используйте облачные технологии — мало того, что это удобно, так еще в работе пригодится.

В общем, проект хоть и не взлетел, но все равно подарил полезный опыт. А как вы мотивируете себя, чтобы продолжать работу над личными проектами и не терять энтузиазм?

Зарплаты маркетологов под прицелом данных
Все любят считать чужие деньги, а мы пошли дальше — сделали это красиво и понятно. Вместе с CLAN Recruiting мы не просто опросили спецов из маркетинга, но и превратили их ответы в удобный интерактивный дашборд.

О процессе визуализации исследования и инсайтах — в новой статье.

Читайте и оставляйте комментарии 🔜 https://vc.ru/hr/1846874

GLOBAL TECH FORUM: цифровая трансформация бизнеса
21 марта в Москве пройдет конференция GLOBAL TECH FORUM, посвященная цифровизации бизнес-процессов. LEFT JOIN выступает инфопартнером мероприятия.

В конференции примут участи эксперты из крупных технологических компаний, включая Роскосмос, Сбер, Росбанк, X5 Tech, Северсталь, Альфа-Банк, Уралхим Инновация и других — всего ожидаются более 80 спикеров и более 2000 участников. Они поделятся своим опытом в сфере цифровой трансформации и и расскажут об ИТ-сервисах и решениях, которые используют в своей практике.

В программе:
🔵 Разбор 100+ кейсов из разных направлений бизнеса — слушатели узнают, как автоматизируют процессы в HR, маркетинге и других направлениях.
🔵 4 трека — GLOBAL TECH, ⁠HR TECH & ED TECH, ⁠CLIENT TECH и ⁠MARKETING TECH & SALES TECH.
🔵 Открытая сцена, где компании представят свои технологичные решения для автоматизации бизнеса.
🔵 Практические интенсивы и нетворкинг.

Конференция пройдет оффлайн в кластере «Ломоносов», Раменский бульвар, д.1. Увидеть программу и купить билеты можно на сайте. Укажите промокод JOIN15, чтобы получить скидку 15%.

Открыты две вакансии в LEFT JOIN
Апдейт по вакансиям: их уже две (обе Middle), и мы рассматриваем part-time занятость c перспективой перехода на полный день.

Работаем удаленно по GPT+3. Зарплата в рынке, корпоративный английский, интересные проекты, демократичная атмосфера в компании без бюрократии и прочей духоты.

От аналитика ждем:
🔵 Опыт от 2 лет,
🔵 Уверенный Python и SQL,
🔵 Опыт работы с двумя и более BI-системами,
🔵 Релевантное высшее образование и знание мат. статистики.

Предстоит строить ad-hoc отчетность, разрабатывать отчеты в BI-системах и витрины данных.

🔜 Полное описание вакансии на huntflow. Откликайтесь там же или пишите напрямую нашей HR Татьяне @tanya_zab.

От инженера данных ждем:
🔵 Опыт от 3 лет,
🔵 Уверенное владение SQL, Python, Airflow, bash.
🔵 Опыт разработки ETL, проектирования и разработки хранилищ данных и аналитической отчетности, а также работы c Kafka, S3 и dbt.
🔵 Релевантное высшее образование.

Предстоит создавать и поддерживать ETL/ELT-процессы, обеспечивать корректность работы отчетов и консистентность данных, создавать и сопровождать витрины данных и вести документацию.

🔜 Полное описание вакансии на huntflow. Откликайтесь там же или пишите напрямую HR @tanya_zab.

Сломалась платформа vc, но не мы — все те же маркетологи, все те же зарплаты
Помните, мы публиковали статью про зарплаты маркетологов и наш интерактивный дашборд? Площадка не дала нам возможность продвинуть ее так, как хотелось, поэтому мы решили попытать счастья еще раз.

И как никогда нам нужна ваша поддержка в виде лайков и комментариев.

Поддержите нашу статью еще раз 🔜 https://vc.ru/hr/1846874