Привет! Это Юлия Алыкова. Сегодня у нас необычный формат мастерской.

ДАННОЕ СООБЩЕНИЕ (МАТЕРИАЛ) СОЗДАНО И (ИЛИ) РАСПРОСТРАНЕНО ИНОСТРАННЫМ СРЕДСТВОМ МАССОВОЙ ИНФОРМАЦИИ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА, И (ИЛИ) РОССИЙСКИМ ЮРИДИЧЕСКИМ ЛИЦОМ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА

Мы будем рассказывать про историю журналистики данных!

Сначала мне казалось, что рассказывать будет особо нечего, потому что первые дата-журналистские тексты появились в России менее пяти лет назад, а в США — не более десяти лет назад.

Но стоило только углубиться… и вот я уже рассматриваю визуализации данных шестого тысячелетия до нашей эры
🤯🤯🤯

Этот обзор мы подготовили вместе с образовательной компанией «Нетология», у которой есть онлайн-курс по журналистике данных. Новый набор стартует уже 12 ноября, обучение продлится 7 месяцев. На курсе научат анализировать данные, программировать, делать визуализации и рассказывать истории.

❗️Важно!
Для подписчиков Мастерской есть дополнительная скидка 5% по промокоду ISTORIES2021 (действует до 31 декабря 2021 года).

И еще из приятного — на курсе преподает редакторка нашего дата-отдела Алеся.

Привет! Возвращаемся к урокам по скрейпингу с помощью Python!

ДАННОЕ СООБЩЕНИЕ (МАТЕРИАЛ) СОЗДАНО И (ИЛИ) РАСПРОСТРАНЕНО ИНОСТРАННЫМ СРЕДСТВОМ МАССОВОЙ ИНФОРМАЦИИ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА, И (ИЛИ) РОССИЙСКИМ ЮРИДИЧЕСКИМ ЛИЦОМ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА.

В этот раз разбираемся, как работает библиотека Scrapy. Сначала она может показаться немного сложной. Но если разобраться, вы получите отличный инструмент, который очень быстро собирает информацию с сайтов и легко подстраивается под любые задачи. Попробуем начать с основных действий, которые нужны в скрейпинге: будет переходить по страницам, заходить внутрь ссылок и собирать информацию о книгах на сайте интернет-магазина.

Смотреть выпуск!

Привет! Сегодня у нас выходит вторая и заключительная мастерская про развиитие журналистики данных в России.

ДАННОЕ СООБЩЕНИЕ (МАТЕРИАЛ) СОЗДАНО И (ИЛИ) РАСПРОСТРАНЕНО ИНОСТРАННЫМ СРЕДСТВОМ МАССОВОЙ ИНФОРМАЦИИ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА, И (ИЛИ) РОССИЙСКИМ ЮРИДИЧЕСКИМ ЛИЦОМ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА

Для этого выпуска мы попросили дата-журналистов из разных СМИ рассказать, что они думают о профессии, и составили небольшой практический гид по дата-журналистике в России.

Рассказываем, что с ней будет в ближайшие годы? (спойлер: будет сложно, но интересно) Где учиться и где работать?

Рассказываем→

И напоминаем, что у «Нетологии» стартовал курс по журналистике данных, на котором с нуля научат создавать дата-материалы.

Курс подойдёт:
🔹 журналистам, которые хотят научиться делать исследования на данных,
🔹 специалистам, которые работают с текстами в компаниях и должны использовать данные в своей работе.

Для подписчиков Мастерской есть дополнительная скидка 5% к уже действующей на сайте до 45% по промокоду ISTORIES2021 (действует до 31 декабря).

Привет! Продолжаем изучать парсинг на Python с помощью Scrapy.

ДАННОЕ СООБЩЕНИЕ (МАТЕРИАЛ) СОЗДАНО И (ИЛИ) РАСПРОСТРАНЕНО ИНОСТРАННЫМ СРЕДСТВОМ МАССОВОЙ ИНФОРМАЦИИ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА, И (ИЛИ) РОССИЙСКИМ ЮРИДИЧЕСКИМ ЛИЦОМ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА.

В прошлом видео мы познакомились с библиотекой и попробовали собрать информацию о книгах из одного раздела онлайн-магазина.

В этом уроке разберемся, как быстро собрать информацию обо всех книгах во всех категориях каталога с помощью класса crawlspider.

Смотрите виде по ссылке→


А если вы хотите научиться не только парсить с помощью Python, но и создавать сайты и приложения, это можно сделать на курсе в SkillFactory.

Кроме скидки 50% в эту «черную пятницу» по промокоду ВАЖНЫЕ ИСТОРИИ в подарок будет доступен 14-недельный курс «Soft Skills для digital-менеджеров». Акция действует до 30.11.2021

Привет, это Соня Савина! В ноябре у «Важных историй» вышло несколько дата-материалов.

ДАННОЕ СООБЩЕНИЕ (МАТЕРИАЛ) СОЗДАНО И (ИЛИ) РАСПРОСТРАНЕНО ИНОСТРАННЫМ СРЕДСТВОМ МАССОВОЙ ИНФОРМАЦИИ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА, И (ИЛИ) РОССИЙСКИМ ЮРИДИЧЕСКИМ ЛИЦОМ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА

И на этой неделе мы решили поделиться с вами тем, как проходила работа над историями, как и обещали. Сегодня начну я.

Для материала «Сижу и богу молюсь, чтобы доехать живой» я проанализировала открытые данные о российском общественном транспорте. Идея родилась, когда мы наткнулись на очередное поручение президента модернизировать общественный транспорт в регионах. Чиновники обещают улучшить ситуацию не первый год, уже несколько лет в России проходит транспортная реформа – а значит это повод проверить, в каком состоянии транспорт находится сейчас.

Искать основную статистику было нетрудно: данные по наличию транспортных средств, их изношенности и возрасту публикует Росстат и Минтранс, об аварийности на транспорте – ГИБДД.

В начале работы идея была амбициозная: мы выгрузили все государственные контракты на перевозки, чтобы проверить, есть ли в этой сфере конфликт интересов. Но оказалось, что не все перевозки проходят через процедуру закупок, и в некоторых регионах пришлось бы искать реестры перевозчиков на сайтах муниципальных транспортных органов. Проверить владельцев каждой компании-перевозчика вручную оказалось слишком масштабной задачей.

Поэтому мы решили рассказать подробно о ситуации с общественным транспортом на примере одного города и отправились туда с камерой, чтобы самим поездить на разваливающихся автобусах и маршрутках, и поговорить с жителями, которые передвигаются на них ежедневно. Мы выбрали Астрахань – в рейтинге городов по качеству общественного транспорта, который опубликовала компания SIMETRA, он занял последнее место. Там мы поговорили с жителями поселка, которым не на чем добираться до города; с астраханским урбанистом; бывшей водительницей троллейбуса, которая потеряла работу, когда муниципальное транспортное предприятие обанкротилось; семьей с ребенком на инвалидной коляске, которые не могут перемещаться по городу из-за отсутствия доступной среды на транспорте; водителями маршруток и другими местными жителями.

В итоге получился видеорепортаж, который продолжает традицию дата-отдела «Важных историй» показывать, что за каждой цифрой в обезличенных государственных данных скрываются живые люди.

Привет, это Даша Таланова! Недавно для @istories_media я написала, как по всей стране сносят памятники архитектуры ради новостроек.

ДАННОЕ СООБЩЕНИЕ (МАТЕРИАЛ) СОЗДАНО И (ИЛИ) РАСПРОСТРАНЕНО ИНОСТРАННЫМ СРЕДСТВОМ МАССОВОЙ ИНФОРМАЦИИ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА, И (ИЛИ) РОССИЙСКИМ ЮРИДИЧЕСКИМ ЛИЦОМ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА

Чтобы понять масштаб проблемы, я обратилась к реестрам Минкульта за 2008 и 2021 годы. Там содержатся перечни объектов культурного наследия, которые охраняет государство.

После сравнения реестров оказалось, что в 16 регионах России с 2008 года количество памятников под охраной государства сократилось более чем в два раза. Это стало отправной точкой исследования.

Понять причины массовой утраты исторических зданий мне помогли данные Росстата, эксперты и градозащитники. Большой проблемой стало отсутствие у Минкульта данных об аварийности ОКН. Искать их пришлось вручную на сайтах комитетов и департаментов по сохранению культурного наследия. В итоге собрать статистику удалось только по нескольким субъектам.

Вологодская область попала в топ регионов и по проценту аварийных, и по проценту снятых с охраны памятников. Мы отправились туда, чтобы вживую увидеть заброшки и обугленные фасады исторических зданий, а также пообщаться с теми, кто пытается сохранить то, что еще осталось от Вологды.

Неравнодушных к массовым сносам оказалось так много, что мы решили дополнительно съездить на родину волонтерского движения «Том Сойер Фест» Самару, чтобы поговорить с его основателями.

В результате видео-история рассказывает не только о масштабах и причинах утраты культурного наследия, но и о людях, которым небезразличны история и облик их родных городов.

Привет, это Алеся Мароховская, редакторка дата-отдела «Важных историй» и Катя Бонч-Осмоловская из дата-отдела «Новой газеты»! Недавно у нас вышло совместное исследование о мифах вокруг мигрантов и о тех, кто эти мифы формирует.

ДАННОЕ СООБЩЕНИЕ (МАТЕРИАЛ) СОЗДАНО И (ИЛИ) РАСПРОСТРАНЕНО ИНОСТРАННЫМ СРЕДСТВОМ МАССОВОЙ ИНФОРМАЦИИ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА, И (ИЛИ) РОССИЙСКИМ ЮРИДИЧЕСКИМ ЛИЦОМ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА.

Идея изучить преступность среди мигрантов появилась после происшествия в Новых Ватутинках, когда четверо «уроженцев одного из государств Закавказья» напали на мужчину с ребенком. В СМИ поднялась буря — Маргарита Симоньян поругалась с Рамзаном Кадыровым, а СК возбудил дело о покушении на убийство. В итоге МВД обвинило СМИ-иноагентов в попытке «с одной стороны, криминализировать образ иностранца, которому он не соответствует, а с другой стороны, породить в душах коренного населения неприязнь к мигрантам».

Поэтому мы решили, во-первых, разобраться, какие СМИ на самом деле пишут о преступности мигрантов часто и какой образ приезжих в своих сообщениях они формируют. Кстати, об этом наша новая Мастерская! Прочитайте наше исследование и посмотрите Мастерскую — с помощью библиотеки word2vec вы научитесь узнавать, какой образ в разных текстах формируется у определенного явления или группы людей.

Во-вторых, мы решили проверить, а действительно ли соответсвуют ли мигранты этому образу: действительно ли мигранты опаснее россиян и какие преступления они чаще всего совершают. Для этого нам понадобились данные о гражданстве преступников и осужденных за несколько лет, их мы нашли у Генпрокуратуры и судебного департамента.

Чтобы корректно сравнивать уровень преступности среди мигрантов и россиян, нужно знать их общее количество. Если с россиянами все просто, то с мигрантами — не очень: эти данные публикуют сразу несколько ведомств, и они отличаются друг от друга. Например, ФСБ учитывает число людей, пересекших границу, МВД — вставших на миграционный учет, Росстат — зарегистрировавшихся по месту жительства. Чтобы разобраться в том, какие данные лучше показывают число находящихся в России мигрантов, мы поговорили с экспертами.

В результате оказалось, что мигранты примерно в два раза безопаснее россиян: из тысячи мигрантов преступления совершают два-три человека, а из тысячи россиян — шесть. Судя по реакции читателей, этот вывод сильно расходится с их представлениями. Кате писали, что мы наверняка что-то неправильно посчитали, и вообще, мигранты приезжают в гости и должны «не высовываться». Но данные подтверждают, что образ мигранта криминализирован незаслуженно, а виноваты в этом пропагандисты.

Чтобы не пропускать наши исследования, подписывайтесь на рассылку «Важных историй».

А если вам хочется выразить нам благодарность, вы можете оформить небольшое пожертвование, которое будет очень важно для нас!

ICIJ выложил первую часть #PandoraPapers в общую датабазу. Теперь упоминания людей и компаний из этой утечки можете изучать и вы

ДАННОЕ СООБЩЕНИЕ (МАТЕРИАЛ) СОЗДАНО И (ИЛИ) РАСПРОСТРАНЕНО ИНОСТРАННЫМ СРЕДСТВОМ МАССОВОЙ ИНФОРМАЦИИ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА, И (ИЛИ) РОССИЙСКИМ ЮРИДИЧЕСКИМ ЛИЦОМ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА

Международный консорциум журналистов-расследователей (ICIJ) вечером 6 декабря обновил The OffshoreLeaks Database – добавил туда часть базы #PandoraPapers от двух офшорных регистраторов.

Теперь любой желающий может изучить информацию о владельцах офшорных компаний, доверенных лицах и посредниках.

🚩 Важно: в базе вы НЕ найдете персональные данные владельцев офшоров, информацию о банковских счетах или личные документы.

Фактически это еще один способ проверить, есть ли у интересующего вас физического или юридического лица офшор и в какой юрисдикции.

Зачем нужна эту информация и как она помогает в расследованиях, вы можете прочесть в нашем базовом гайде от Дмитрия Великовского.

Привет! К 20-летию «Единой России» мы подготовили материал о главных несдеражнных обещаниях партии власти

ДАННОЕ СООБЩЕНИЕ (МАТЕРИАЛ) СОЗДАНО И (ИЛИ) РАСПРОСТРАНЕНО ИНОСТРАННЫМ СРЕДСТВОМ МАССОВОЙ ИНФОРМАЦИИ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА, И (ИЛИ) РОССИЙСКИМ ЮРИДИЧЕСКИМ ЛИЦОМ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА

Почему мы решили взять только невыполненные обещания?

Во-первых, об успехах «Единой России» и так немало сказано: партия в 2021 году выпустила брошюру «100 главных дел „Единой России“», в которой депутаты перечислили свои заслуги. Прогосударственные СМИ тоже часто освещают деятельность партии.

Во-вторых, мы заметили, что среди выполненных «Единой Россией» обещаний нет глобальных, ключевых изменений. Побороть бедность, коррупцию, достичь уровня жизни как в Европе, сделать доступным жилье и качественную медпомощь, обеспечить россиянам свободу выражения мнений — все это не исполнено. А выполнены не настолько глобальные обещания — например, зафиксировать цены на жизненно важные лекарства или компенсировать плату за капремонт бедным.

В-третьих, в 2021 году председатель «Единой России» Дмитрий Медведев заявил, что предвыборная программа 2016 года выполнена, «несмотря на внешнеполитические трудности, санкции и пандемию». Но это не так, и об этом важно говорить. Тем более в 2016 году на съезде партии Владимир Путин заявил, что критика действующей власти «нужна и обязательно должна быть».

В текст и видео мы отобрали темы, которые можно проверить на данных. Их было много, поэтому текст писали всем дата-отделом. И вот как мы построили работу.


📍Сбор данных

Обещания мы искали в программах и манифестах партии. Некоторые программы 2000-х годов с сайтов уже удалили. Мы смогли их посмотреть с помощью Wayback Machine, который хранит архивные копии сайтов. Из каждого документа мы выписывали обещания, которые можно проверить на данных.


📍Фактчек
Для проверки мы использовали данные российских ведомств и международную статистику. Источниками стали:

🔹 Росстат,
🔹 Министерство просвещения (данные по школам и детям-сиротам),
🔹 платформа ЕМИСС (агрегирует статистику разных ведомств в одном месте),
🔹 Судебный департамент (данные по судебным решениям и оправдательным приговорам). В более удобном виде их можно получить на сайте платформы для доступа к статистике уголовных дел «Достоевский».
🔹 Исследования российских институтов: РАНХиГС, ВШЭ.
🔹 Статистика профильных НКО — Transparency International*, правозащитного центра «Мемориал»*, фонда помощи хосписам «Вера».
Опросы Левада-центра*, ВЦИОМ, ФОМ.
🔹 За международной статистикой обращались к данным World Bank и Организации экономического содружества.


📍Визуализация
Простые линейные и столбчатые диаграммы хорошо отражают реальное положение дел в России и наше место среди других стран.

Когда в тексте используются графики, важно, чтобы они хорошо смотрелись на разных устройствах, были понятны и не путали читателя. Журналисты верстают тексты на компьютере, а большинство пользователей читают материалы со смартфонов. Поэтому всегда проверяйте, чтобы визуализации хорошо отображались на мобильных устройствах разного типа. Можно просто открыть их с телефона или выбрать мобильный режим просмотра в инструментах разработчика.


Так как над текстом работал сразу весь отдел, сначала мы распределяли годы, за которые искали обещания. Когда стали понятны основные темы, их мы тоже распределили между собой. С таким подходом у нас получилось примерно за неделю собрать и проверить все обещания, которые партия давала на протяжении двадцати лет.

В разборе мы рассказали только основные этапы работы над материалом, если вас интересуют какие-то детали или остались вопросы — пишите в наш чат, будем отвечать.

Ну и конечно, читайте текст нашего исследования и смотрите видео!


* внесены в список НКО-«иноагентов». Мы обязаны это указывать, иначе наших коллег могут оштрафовать.

​#важныйанонс Хакатон «Новой и «Теплицы»: «Прожектор 2022: Новое доказательство»

ДАННОЕ СООБЩЕНИЕ (МАТЕРИАЛ) СОЗДАНО И (ИЛИ) РАСПРОСТРАНЕНО ИНОСТРАННЫМ СРЕДСТВОМ МАССОВОЙ ИНФОРМАЦИИ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА, И (ИЛИ) РОССИЙСКИМ ЮРИДИЧЕСКИМ ЛИЦОМ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА

В феврале 2022 года «Новая газета» и «Теплица социальных технологий» вновь проведут хакатон для журналистов, исследователей, НКО и активистов «Прожектор 2022».

Его тема «Новое доказательство» — ​​количественные или качественные данные, проходящие строгую критическую проверку, важные для ключевых общественных дискуссий в России. Участники смогут создавать исследования, расследования, приложения и сервисы на основе данных. Круг тем определяются перечнем Целей устойчивого развития ООН до 2030 года.

Организаторы планируют провести хакатон оффлайн (наконец-то!!) в Санкт-Петербурге, но также участвовать можно будет онлайн. В числе менторов будут и журналисты дата-отдела «Важных историй» 😏

Общий денежный фонд — 220 тысяч рублей — пойдет на доработку и запуск (публикацию) лучших проектов.

Узнать подробности и зарегистрироваться в числе первых можно тут→

Привет! Это Юля Алыкова. Сегодня у нас Катей Фоминой вышел репортаж-исследование об одиночестве пожилых людей в России.

ДАННОЕ СООБЩЕНИЕ (МАТЕРИАЛ) СОЗДАНО И (ИЛИ) РАСПРОСТРАНЕНО ИНОСТРАННЫМ СРЕДСТВОМ МАССОВОЙ ИНФОРМАЦИИ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА, И (ИЛИ) РОССИЙСКИМ ЮРИДИЧЕСКИМ ЛИЦОМ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА

Каждый третий житель России старше 70 лет живет в состоянии хронического одиночества — то есть чувствует себя одиноким часто или почти всегда. Среди наиболее бедных пенсионеров каждый второй — хронически одинок.

Одиночество связано c
🔹 отсутствием партнера,
🔹 бедностью,
🔹 плохим здоровьем,
🔹 отсутствием адаптации к пенсии,
🔹 нехваткой внимания от детей,
🔹 стереотипами о жизни на пенсии
🔹 и другими факторами.

Постоянное одиночество — очень болезненное и тяжелое состояние, и для меня стало грустным откровением, что столько россиян его испытывают.

Но, как обещают социологи, у более молодых поколений есть все шансы прожить не одинокую и насыщенную старость. Помогут в этом онлайн-общение и секс. Но не только они. Подробное объяснение вы найдете в конце материала.

Еще в тексте много графиков и данных об одиночестве и социальной жизни пенсионеров — как часто они занимаются спортом, общаются с семьей, занимаются волонтерством, как отдыхают.

Поначалу казалось, что данные мало помогут рассказать о таком личном переживании, как одиночество. Но на помощь пришли исследования российских ученых из НИУ ВШЭ, РАНХиГС и Лаборатории технологий улучшения благополучия пожилых людей при Томском политехе. Оказалось, что данные об одиночестве есть.

Вот два основных источника, которыми мы пользовались:

​​🔹 «Российский мониторинг экономического положения и здоровья населения НИУ-ВШЭ (RLMS-HSE)»: данные из него содержатся в научных статьях о феномене одиночества, например, вот этой;
​​🔹 «Статистические наблюдения по социально-демографическим проблемам» Росстата: в «Итогах выборочного наблюдения поведенческих факторов, влияющих на состояние здоровья населения в 2018 году», есть информация об одиночестве россиян.

Кстати, в обоих источниках много данных и по другим даже не самым очевидным вопросам: «Оценка ценности хорошей семьи», «Употребление алкоголя в группах с разным уровнем образования», данные о том, как россияне распоряжаются временем в сутках и много чего еще.

Возможно, какие-то интересные наблюдения Росстата натолкнут вас на идеи своих исследований.

В Концепции политики активного долголетия в России ученых из НИУ ВШЭ сравнивалась активность российских пенсионеров с европейскими. Отсюда возникла идея и нам сделать такое сравнение.

Статистику по Европе искали здесь:

🔹 Евростат. Огромный банк статистики по странам Евросоюза. Чтобы разобраться в базе может потребоваться время. Я, например, сначала нашла релевантный для своей темы доклад Евростата — Ageing Europe 2020, и уже там искала, какие данные вообще есть в Евростате по социальной активности пожилых людей.

🔹 European Quality of Life Survey — опрос о качестве жизни европейцев. Здесь есть данные о том, сколько времени они уделяют спорту, детям и внукам, неоплачиваемой работе по дому, довольны ли своей жизнью и многое другое.

Сложность такого сравнения в том, что Евросоюз очень разный: если в Финляндии 77% людей старше 65 регулярно занимаются физкультурой, то, например, в Хорватии — всего 4%, как в России.

Тем не менее, средние значения по Евросоюзу дает возможность в целом понять разницу в образе жизни пенсионеров в России и Европе — которую сами российские пенсионеры считают примером того, как им хотелось бы жить.

Искать источники данных в научных статьях и почаще звонить родным — вот два важных вывода для меня из этой истории.

Если вам есть, чем поделиться или что спросить — пишите в чате, будем рады пообщаться!

​В чем ошибся Владимир Путин на пресс-конференции 23 декабря. Фактчек дата-отдела «Важных историй»

ДАННОЕ СООБЩЕНИЕ (МАТЕРИАЛ) СОЗДАНО И (ИЛИ) РАСПРОСТРАНЕНО ИНОСТРАННЫМ СРЕДСТВОМ МАССОВОЙ ИНФОРМАЦИИ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА, И (ИЛИ) РОССИЙСКИМ ЮРИДИЧЕСКИМ ЛИЦОМ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА

🚩Политические убийства Анны Политковской и Бориса Немцова

Путин: «Я все делал, чтобы раскрыть эти преступления. […] Есть мнения, что заказчики где-то остались за скобками, что они спрятаны или спрятались. Но органам следствия и дознания это пока неизвестно‎»‎.

На самом деле: прошло 15 лет со дня убийства Политковской. Журналисты «‎Новой газеты»‎ вели собственное расследование и нашли свидетеля, благодаря которому следствие раскрыло банду убийц и организаторов. Их осудили в 2014 году. Заказчика так и не нашли.

Главный редактор «Новой газеты» Дмитрий Муратов рассказал, что следствие не ведется. В 2021 году срок давности по делу истек, это значит, что, даже если заказчика установят, он может избежать наказания. Подробнее — в фильме «‎Как убили Анну».

Исполнителей убийства Бориса Немцова приговорили к срокам от 11 до 20 лет колонии, но организаторы и заказчики преступления не найдены.‎

🚩Мусорная реформа

Путин: «Мусорная реформа, несмотря на все сложности, двигается. Одним из первых шагов было обеспечение раздельной концентрации мусора, и где-то мы с опережением плана идем — 40 % примерно сейчас».

На самом деле: Счетная палата признала мусорную реформу проваленной. Перерабатывается менее 7 % отходов, остальное идет на свалки и полигоны. К переработке приравнено сжигание мусора, которое превращает отходы в токсичную золу и газ.

🚩Рождаемость

Путин: «Отцовство и материнство выше материального благополучия. Это должно внедряться в сознание наших людей. Надо доносить до граждан, что большего счастья в мире не существует».


На самом деле: По данным ВЦИОМ, 83 % жителей страны «в идеале» хотели бы иметь двух и более детей. Главная причина, почему детей не заводят, — нехватка денег. «Нужно показывать все положительные стороны большой и дружной семьи, показывать, какое это счастье — иметь детей», — сказал президент, все 20 лет у власти скрывающий свою семью.

🚩Развитие сел

Вопрос: «Деревня в нашей стране в XXI веке остается архаичной. Учеников, чья школа в аварийном состоянии, возят в соседнее село за 20 км. В деревнях нет ни туалета, ни воды. Собирается ли государство заниматься инфраструктурными проектами в селах, а не только точечно латать какие-то дыры»?

Путин: «Всё это делается в рамках соответствующей программы развития села».

На самом деле: Как выяснили «Важные истории», в России 451 школьное здание находится в аварийном состоянии. На конец 2020 года в каждом 11-м школьном здании не было канализации, в каждом 13-м — центрального отопления. По данным «Новой газеты», в 38 % сельских домохозяйств туалет есть только в виде дворовой пристройки, и лишь 3,5 % деревенских домов подключены к централизованной канализации.

🚩Иноагенты

Путин: «В США 0,034 % организаций признаны „иноагентами“. У нас 74 из 200 тысяч зарегистрированных НКО – тоже 0,034 %. А в чём разница? Что там, если вы не закрыли свою деятельность, вам грозит уголовная ответственность до пяти лет лишения свободы. У нас ничего подобного нет».

На самом деле: В реестре НКО-«иноагентов» сейчас действительно 74 организации. Однако с момента принятия закона в 2012 году НКО-«иноагентами» признали минимум 220 организаций, большинство с тех пор были ликвидированы или реструктурированы.

Статья 330.1 УК предусматривает уголовную ответственность для «иноагентов» до пяти лет колонии. Подробнее об этом — в «Инотеке» «ОВД-Инфо» (признан «иноагентом»).

___________________________________

А еще Владимир Путин сегодня традиционно давал много обещаний: повысить расходы на здравоохранение, индексировать пенсии, развивать транспортное сообщение между регионами и многое другое. Дата-отдел «Важных историй» уже проверял, сдержал ли президент обещания, которые давал россиянам 2001 года.

Привет! Это Полина Ужвак. Сегодня у нас вышел разбор экологических итогов года от Росприроднадзора.

ДАННОЕ СООБЩЕНИЕ (МАТЕРИАЛ) СОЗДАНО И (ИЛИ) РАСПРОСТРАНЕНО ИНОСТРАННЫМ СРЕДСТВОМ МАССОВОЙ ИНФОРМАЦИИ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА, И (ИЛИ) РОССИЙСКИМ ЮРИДИЧЕСКИМ ЛИЦОМ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА

Этот материал начали мои коллеги из отдела соцсетей. Поскольку мы в @istories_media часто писали про экологию, появилась мысль поговорить с экспертами Greenpeace и узнать, насколько итоги и прогнозы Росприроднадзора совпадают с реальностью.

Небольшой комментарий для соцсетей перерос в полноценную заметку на сайте. И здесь пригодился дата-ориентированный подход.

Во-первых, с помощью данных мы проверили тезисы наших экспертов.

Материал вышел с заголовком из цитаты Василия Яблокова, руководителя направления «Климат и энергетика» в российском Greenpeace: «Экология у нас не в приоритете».

И действительно — по данным Минфина на охрану окружающей среды уходит всего 1,14% расходов федерального бюджета (для сравнения: 9,76% уходит на нацбезопасность, 6,61% — на общегосударственные вопросы).

Говоря о нефтеразливах, эксперт сказал, что главная причина — старые трубопроводы, которые эксплуатируют компании. Мы нашли подтверждение этих слов в государственном докладе «О состоянии и об охране окружающей среды Российской Федерации». В нем приводится статистика Минэнерго: в 2020 году 91% аварий, связанных с разливами нефти, произошел из-за коррозии труб.

Во-вторых, мы подобрали данные, которые не только подтверждают, но и дополняют слова экспертов, чтобы читатель получил более полную картину.

Например, эколог Василий Яблоков говорил, что нефтяные компании часто уходят от ответственности за разливы, потому что такие преступления не всегда получается даже обнаружить. Мы изучили статистику Следственного комитета и выяснили, что в России сокращается число административных и уголовных дел в целом за все экологические преступления.

Дмитрий Нестеров, эксперт проекта «Ноль отходов», обратил наше внимание на исследование Greenpeace, где говорилось, что доступ к раздельному сбору мусора в 2019 году был только у каждого пятого россиянина.

А мы в свою очередь визуализировали опрос исследовательского холдинга «Ромир», из которого следовало, что 73% россиян в 2020-м и 88% в 2021-м поддерживали раздельный сбор мусора. Получился такой показательный контраст.

📍Вывод простой (и давно нами усвоенный): любая история станет полнее, понятнее, честнее и интереснее, если рассказать ее при помощи не только слов, но и данных.

Читайте наш разбор и задавайте вопросы по подготовке материала в чате Мастерской!

Привет! Это Алеся Мароховская с последним в этом году выпуском Мастерской!

ДАННОЕ СООБЩЕНИЕ (МАТЕРИАЛ) СОЗДАНО И (ИЛИ) РАСПРОСТРАНЕНО ИНОСТРАННЫМ СРЕДСТВОМ МАССОВОЙ ИНФОРМАЦИИ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА, И (ИЛИ) РОССИЙСКИМ ЮРИДИЧЕСКИМ ЛИЦОМ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА.

Рассказываю еще немного про скрейпинг с помощью уже известных вам библиотек — Selenium и BeautifulSoup, но с некоторыми интересными моментами! Это последний новый выпуск в году. Но в следующем мы вернемся к вам с новыми курсами: будет и визуализация, и основы статистики на пальцах, и графы, и GitHub, и даже расскажем, где искать открытые данные. И это даже не весь список того, что мы для вам приготовили. Так что самое время давать себе новые обещания все-все это выучить в следующем году, а еще и до Python добраться уже!

​Спасибо, что были с нами в этом году! Без вас мы бы не справились. Встретимся в новом 2022-м! ❤️

ДАННОЕ СООБЩЕНИЕ (МАТЕРИАЛ) СОЗДАНО И (ИЛИ) РАСПРОСТРАНЕНО ИНОСТРАННЫМ СРЕДСТВОМ МАССОВОЙ ИНФОРМАЦИИ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА, И (ИЛИ) РОССИЙСКИМ ЮРИДИЧЕСКИМ ЛИЦОМ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА

Автор иллюстрации: Наталья Ямщикова

Привет! Это Полина Ужвак с первым в 2022 году выпуском Мастерской!

ДАННОЕ СООБЩЕНИЕ (МАТЕРИАЛ) СОЗДАНО И (ИЛИ) РАСПРОСТРАНЕНО ИНОСТРАННЫМ СРЕДСТВОМ МАССОВОЙ ИНФОРМАЦИИ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА, И (ИЛИ) РОССИЙСКИМ ЮРИДИЧЕСКИМ ЛИЦОМ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА.

Начнем с простого, но очень полезного инструмента, который превращает адреса в географические координаты — плагин Geocode Awesome Table для Google Sheets. Он не требует навыков программирования и позволяет геокодировать до тысячи адресов в сутки. С помощью полученных координат можно создавать интерактивные карты. На уроке сделаем карту мусорных полигонов Татарстана.

Привет, это Катя Бонч-Осмоловская, теперь я тоже работаю в дата-отделе @istories_media. Сегодня вместе с @new_data мы опубликовали исследование о том, сколько поддельных сертификатов о вакцинации могли купить россияне.

ДАННОЕ СООБЩЕНИЕ (МАТЕРИАЛ) СОЗДАНО И (ИЛИ) РАСПРОСТРАНЕНО ИНОСТРАННЫМ СРЕДСТВОМ МАССОВОЙ ИНФОРМАЦИИ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА, И (ИЛИ) РОССИЙСКИМ ЮРИДИЧЕСКИМ ЛИЦОМ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА

Россию снова накрыло коронавирусом, а вместе с ним в интернете снова стали продавать справки о вакцинации. Попытки подсчитать, сколько же сертификатов в России поддельные, были еще в ноябре — тогда в Госдуму внесли законопроект о QR-кодах и произошел бум продажи сертификатов. Но ни одного источника данных, который позволял бы оценить объем подделок, не было.

Что делать, если данных нет? Надо попросить.

Мы решили разослать запросы во все региональные минздравы и управления МВД — то есть 170 штук — чтобы понять, как власти оценивают долю подделок.

Нужно было придумать, как отправить 170 запросов и не сойти с ума, не делая это вручную.

Оказалось, что электронная почта управлений МВД сделана по одному шаблону: mvd%код_региона%@mvd.gov.ru. Написав простую формулу в гугл-таблицах, мы получили электронные адреса всех региональных МВД.

Затем просто скопировали их и скрытой копией отправили по всем УМВД один запрос, указав в шапке: «В пресс-службу регионального управления МВД».

Контакты минздравов мы просто спарсили с официального сайта ведомства.

На следующее утро после рассылки запросов я проснулась около 6 часов от звонка товарища майора.

Оказалось, очень вежливый сотрудник одного из управлений МВД хотел уточнить мое отчество и не сообразил, что я в другом часовом поясе.

Всю следующую неделю я получала звонки из МВД с разных концов страны, так что теперь в моей телефонной книге есть контакты «МВД Новосибирск», «МВД Адыгея» и так далее.

Я не думала, что мы получим хоть какие-то ответы, но конверсия на удивление оказалась высокой: в итоге нам ответили 70 УМВД и 36 минздравов. Некоторые просили переоформить запрос и прислать через форму на сайте, но таких было немного. Можно сказать, что шалость удалась.

Конечно, эти данные тоже неполные: в реальности поддельных справок о вакцинации больше, чем уголовных дел. Но мы не знаем об объеме липовых сертификатов в России практически ничего, и важно было сделать хоть какую-то попытку это оценить.

Какой вывод?

Мы не всегда можем найти данные о проблеме. Опрос региональных властей — тоже метод получения данных, не пренебрегайте им.

А изучив курсы «Мастерской» о гугл-таблицах и скрейпинге, можно упростить себе жизнь, делая массовую рассылку запросов.

Не болейте, носите маски и берегите своих близких!

Привет! Это Полина Ужвак. Мы запускаем курс по системе контроля версий Git.

ДАННОЕ СООБЩЕНИЕ (МАТЕРИАЛ) СОЗДАНО И (ИЛИ) РАСПРОСТРАНЕНО ИНОСТРАННЫМ СРЕДСТВОМ МАССОВОЙ ИНФОРМАЦИИ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА, И (ИЛИ) РОССИЙСКИМ ЮРИДИЧЕСКИМ ЛИЦОМ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА

Git позволяет сохранять файлы и проекты, с которыми вы работаете, и все этапы их изменений. Если в работе что-то пошло не так, можно вернуться к прошлой версии и начать работу с этапа, когда ошибок еще не было.

В первом уроке установим и настроим систему, а потом создадим первое хранилище — репозиторий.

👩‍💻 Хакатон «Прожектор 2022» принимает заявки от участников!

ДАННОЕ СООБЩЕНИЕ (МАТЕРИАЛ) СОЗДАНО И (ИЛИ) РАСПРОСТРАНЕНО ИНОСТРАННЫМ СРЕДСТВОМ МАССОВОЙ ИНФОРМАЦИИ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА, И (ИЛИ) РОССИЙСКИМ ЮРИДИЧЕСКИМ ЛИЦОМ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА

«Новая газета» и «Теплица социальных технологий» открыли прием заявок на хакатон «Прожектор 2022. Новое доказательство».

Подать заявку можно до 8 февраля включительно. Причем заявляться можно как командой, так и индивидуально, чтобы затем присоединиться к одному из проектов-участников.

Хакатон пройдет онлайн, с 11 по 13 февраля. Его общий денежный фонд – 220 000 рублей. Два победителя получат финансовую поддержку на запуск своих проектов.

В числе менторов хакатона будут и дата-журналисты «Важных историй»😉

Привет! Это Полина Ужвак. На прошлой неделе мы начали курс по работе с системой контроля версий git: научились создавать репозиторий (хранилище файлов и их версий) на компьютере и коммитить (сохранять) изменения.

ДАННОЕ СООБЩЕНИЕ (МАТЕРИАЛ) СОЗДАНО И (ИЛИ) РАСПРОСТРАНЕНО ИНОСТРАННЫМ СРЕДСТВОМ МАССОВОЙ ИНФОРМАЦИИ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА, И (ИЛИ) РОССИЙСКИМ ЮРИДИЧЕСКИМ ЛИЦОМ, ВЫПОЛНЯЮЩИМ ФУНКЦИИ ИНОСТРАННОГО АГЕНТА

Хранить репозиторий только на компьютере опасно, если папка с ним удалится или потеряется, весь проект пропадет. Поэтому важно дублировать все в облако. GitHub — самая популярная платформа, на которой разработчики размещают свои репозитории. Она позволяет работать над проектом в команде, пробовать новые решения, откатываться к предыдущим версиям и пробовать заново, если что-то пошло не так.

Может появиться вопрос: «Зачем мне сейчас эти сложности, если я только начинаю программировать?». Но даже если кажется, что до первого «серьезного» кода еще далеко, приучать себя пользоваться git и GitHub стоит с самого начала.

Ситуации, когда код «почему-то» перестает работать, одни и те же действия приводят к разным результатам, а рабочие файлы куда-то теряются, случаются часто. Особенно когда мы только начинаем программировать, пробуем решать задачи по разным туториалам, копируем куски чужого кода и пытаемся внедрить их в свой, а потом удаляем, если ничего не получается. Частые коммиты (сохранения изменений), хоть и занимают дополнительное время, позволяют фиксировать каждый шаг, каждую добавленную, удаленную или измененную строчку кода. Весь путь проб и ошибок остается записанным, папки и файлы не теряются, рабочие версии — тоже. И даже если вы захотите вернуться к проекту спустя год, с другого компьютера, нужно будет просто войти в свой аккаунт на GitHub.

Но GitHub это не только облачное хранилище ваших проектов и истории их изменений. Это еще и огромная база репозиториев других разработчиков. Некоторые СМИ выкладывают на GitHub датасеты, которые использовали для дата-исследований, а иногда даже ipynb-ноутбуки с кодом, их можно копировать и использовать в своих работах.

Так, BuzzFeed News выкладывает на GitHub датасеты, код и подробное описание к некоторым своим текстам. Например, в этом репозитории журналисты описывают методологию работы над расследованием о злоупотреблениях в опеке над взрослыми людьми в США. А еще делятся датасетом решениями судов, которые собрали для статьи. На данных журналисты смогли доказать, что система опекунства превратилась в прибыльную отрасль, в которую вовлечено более миллиона человек.

Датасеты по самым разным темам в области политики, экономики и спорта публикует американский портал 538. Например, с помощью этого датасета журналисты показали, как неравенство доходов влияет на уровень преступности в разных штатах.

Ноутбуки с кодом публикует и Los Angeles Times. Один из последних материалов, по которомe доступна методология, данные, и код, — расследование о реальном количестве смертей из-за аномальной жары в Калифорнии.

А американское расследовательское медиа ProPublicа в своем профиле на GitHub опубликовало гайд по работе с данными и стайл-гайд по созданию визуализаций, в котором подробно описано, как использовать разные типы графиков, выбирать цвета, грамотно использовать подписи и многое другое.

Если вы знаете другие полезные репозитории для журналистов и новичков программирования — делитесь в чате. А уже в следующем уроке мастерской мы познакомимся с GitHub и научимся подключать к нему локальный репозиторий.