Инфокультура выступает партнером Международного конкурса по решению глобальных социальных задач с помощью AI & Data.
Завтра в 15:00 (мск) Иван Бегтин и Василий Буров проведут онлайн и расскажут:
✔️ Как правильно поставить задачу на World AI & Data Challenge
✔️ Какие открытые данные можно использовать для решения задач по COVID-19
✔️ Как ML и другие методы Data Science уже используются для разработки решений от COVID-19
✔️ Как разработчику выстроить диалог с государством, а государству понять дата-сайентиста
✔️ В чем секрет успешного внедрения цифровых решений

❗️Ссылки для подключения будут доступны в чате DataMasters за 15 минут до начала трансляции, не пропустите https://t.me/datamasters_asi

Если у вас уже есть задача, которую может решить дата-сообщество, подайте заявку здесь 👉 https://clck.ru/MkYFT
Узнать подробнее о проекте и уже поставленных задачах 👉 https://clck.ru/MkXrP

Мы ищем в команду Инфокультуры специалистов по работе с данными!

Прямо сейчас у нас открыты 4 вакансии:
✔️ DevOps/DataOps - специалист по развертыванию и поддержке инфраструктуры данных
✔️ Технический писатель / Специалист по документированию баз данных и API
✔️ Data аналитик / Специалист по работе с данными
✔️ Управляющий данными / дата-аналитик

Подробное описание требований к кандидатам и условий работы вы найдете на странице: https://career.habr.com/companies/infoculture/vacancies или https://hh.ru/employer/4068348

Ждем ваших резюме 📩

Многие российские СМИ написали, что вакцина против туберкулёза БЦЖ снижает смертность от COVID-19. Это пересказ результатов этого исследования. Мы ничего не понимаем в медицине, но компетентны в статистике, поэтому можем высказаться.

К ситуации можно применить ставшую мемом фразу «ученый изнасиловал журналиста» из этой картинки. Во-первых, на бакалаврских курсах статистики разбирают такое понятие, как экологическая ошибка. Ее можно совершить, если распространить выводы, полученные из агрегированных данных, на индивидов. В случае БЦЖ и коронавируса исследователи изучали связь на уровне стран, а журналисты сделали вывод, что связь обнаружена на уровне людей.

Во-вторых, вы можете перестать читать издания, написавшие, что БЦЖ «влияет» на смертность. Причинно-следственная связь и корреляция — разные вещи.

В-третьих, в самих данных и методах работы не все хорошо. Мы попробовали реплицировать ключевой график работы: обязательность БЦЖ в стране и смертность от COVID-19. Код, если интересно, тут. У нас не получилось:

Видите много точек внизу слева? Это в том числе развивающиеся страны, где не выявляют это заболевание, поэтому низкие показатели смертности. Авторы предпочли их не показывать в работе.

Далее мы провели резидуализацию смертности от COVID-19, посчитав ее регрессию на иммунизацию от разных болезней в стране, подушевой ВВП и продолжительность жизни. Такой прием позволяет проконтролировать на эти факторы, приближая нас к ситуации сравнения «при прочих равных». После резидуализации стало очевидно, что выявленная зависимость ложная.

Это пример того, как некачественные данные и слишком наивная модель, вместе производят ложную зависимость. СМИ же подхватили «горячий» результат. Увы, ученый изнасиловал не только журналиста, но и сами данные. Кейс можно теперь разбирать на студенческих семинарах в жанре «вредных советов».

Инфокультура в партнёрстве с Инвитро готовит к официальному запуску проект о коронавирусной инфекции COVID-19: https://covid19faq.ru/l/ru. До официального релиза проекта мы предлагаем потестировать его вам — нашим подписчикам и единомышленникам.

COVID19faq.ru — это база знаний с ответами на вопросы, которые прежде всего касаются здоровья. В базе содержится только проверенная информация, собранная из официальных источников, международных межгосударственных организаций, прежде всего ВОЗ, официальных сайтов органов власти, медицинских учреждений и научных организаций.

Основные разделы:
- Общая информация о коронавирусе
- Симптомы, тесты и лечение
- Как оказывается помощь
- Информация для беременных, матерей и детей
- Как минимизировать риск заражения
- Открытые данные и исследования

В специальном разделе «Открытые данные и исследования» публикуется официальная информация о том, где найти открытые данные о COVID-19, как помочь учёным в исследованиях и какие исследования проводятся, почему сложно собрать достоверную математическую модель о COVID-19 и многом другом.

Мы собираем обратную связь — принимаем любые предложения и замечания. А также если у вас есть свои вопросы о коронавирусе, на которые вы хотели бы получить ответ — присылайте его нам на covid19@infoculture.rucovid19@infoculture.ru или через контактную форму на сайте.

Если вы представляете медицинское учреждение, орган власти, осуществляющий регулирование или контроль в сфере здравоохранения, частную медицинскую организацию, то мы готовы к партнёрству в развитии и наполнении проекта.

Подробнее о проекте

Доступ к судебным данным в России: он вроде бы есть, но его как бы нет

В чем проблема работы с Картотекой арбитражных дел и почему юристы ненавидят ГАС «Правосудие»? На эти и другие вопросы в День открытых данных-2020 ответил Александр Бороухин. Публикуем видеозапись и краткое описание выступления

https://clearspending.ru/news/dostup-k-sudebnym-dannym-v-rossii-vrode-est-no-ego-kak-net/

Дайджест на 3.4.2020
---
Открытость в дипломатии: данные международного уровня
https://clearspending.ru/news/otkrytost-v-diplomatii-dannye-mezhdunarodnogo-urovnya/

Дайджест на 4.4.2020
---
Финансовые данные госучреждений: где искать и как не потеряться
https://clearspending.ru/news/finansovye-dannye-gosuchrezhdenij-gde-iskat-i-kak-ne-poteryatsya/

📘📘📘 Друзья, рад сообщить, что этот момент настал! Книга о представлении числовых данных «Графики, которые убеждают всех» готова и доступна для скачивания!

Пока это только электронная версия, но бумажная уже стоит в плане, и будет готова достаточно быстро. Чтобы она сразу вышла большим тиражом, издательство должно увидеть, что к теме есть интерес. Это возможно только в том случае, если электронная книга будет хорошо продаваться. Поэтому покупая электронную книгу сейчас, вы не только знакомитесь с тем, как сделать графики, которые убеждают всех, но еще и вносите вклад в дальнейшее развитие культуры представления данных в России. И конечно, приближаете появление бумажной версии. Если вы прочитаете книгу, оставьте, пожалуйста, свой отзыв на сайте.  

Скачать по цене чашки кофе здесь: https://www.litres.ru/aleksandr-bogachev/grafiki-kotorye-ubezhdaut-vseh/

Александр Варламов, разработчик и дата-энтузиаст, рассказывает про новую возможность Tableau – нативную анимацию, которая позволяет изображать различные процессы в динамике.

В презентации Александра - много красивых визуализаций на основе открытых данных ☺️

Видео выступления https://youtu.be/xNii6Ccnoiw

Ссылка на презентацию  https://clck.ru/MhER4

Хотим напомнить, что на сайте проекта «Открытая полиция» есть раздел «Помощь», где опубликованы инструкции, памятки и описания ситуаций, которые могут возникнуть при контактах с полицией и другими правоохранительными органами.

•  Как вести себя при задержании и оформлении административного правонарушения.
•  Как обжаловать привлечение к административной ответственности.
•  Шаблоны различных заявлений.
•  Контакты правозащитных и общественных организаций и другие полезные материалы.

Подробности: https://openpolice.ru/pages/pomosh/

Собрано вручную: источники данных о коронавирусе в России и мире 🗄

Составили для вас список источников информации и данных о распространении нового коронавируса COVID-19 в России и мире. Данные собраны как официальными исследовательскими сообществами и статистическими службами, так и неформальными группами активистов.

Подробнее: https://covid19faq.ru/l/ru/article/smgcguuguh-hand-collected-coronavirus-data-sources

Илья Кузьминов, директор центра стратегической аналитики и больших данных НИУ ВШЭ, рассказал о применении текст-майнинга для ответа на стратегические вопросы государственных и бизнес-заказчиков.

В выступлении – примеры реализованных консалтинговых проектов и прикладных исследований:
• подготовка материалов для стратегии научно-технологического развития РФ;
• поиск трендов развития новых продуктов в металлургии;
• подготовка материалов для технологической дорожной карты авиационного двигателестроения;
• выявление центров компетенции авиационной науки.
https://youtu.be/eO7A4PnEeJc

Иван Бегтин разработал утилиту undatum — инструмент обработки данных с помощью командной строки.

Утилита позволяет конвертировать, разбивать, рассчитывать частоту, статистику и проверять данные в CSV, JSON и BSON файлах.
Инструмент работает с минимальным использованием оперативной и физической памяти, а также может работать с нераспакованным файлом, например, внутри ZIP контейнера.

Используйте в своей работе!

Узнать подробности: https://github.com/datacoon/undatum

Истории, основанные на данных, все чаще публикуются различными изданиями. Они позволяют журналистам привлечь внимание к проблемам, вызвать резонанс и создать запрос на получение более полных данных.

Какие типы дата-историй вы знаете? Андрей Дорожный в своем выступлении на Дне открытых данных рассказал о семи из них: новость, выбросы, архетип, тренд, развенчание мифа, фактчек и прогноз, — и привел удачные примеры для каждого из типов.

Алеся Мароховская и Ирина Долинина из «Новой газеты» – о том, как строится работа над дата-расследованиями, как формулируется методология исследования и какие инструменты помогают в сборе и анализе данных.

https://youtu.be/kDIgYsNOwMM

Корреспондент BBC Анастасия Напалкова рассказала о том, как работать с данными Росреестра на примере расследования 2019 года «Уедут китайцы - все зарастет»: как фермеры из КНР осваивают российский Дальний Восток».

Чтобы оценить реальные масштабы китайского присутствия, корреспонденты Би-би-си проанализировали данные по всем сельхозземлям Дальнего Востока.

Изучая российский некоммерческий сектор, мы рассматриваем не только социально ориентированные некоммерческие организации (СОНКО), созданные для того, чтобы решать социальные проблемы и развивать гражданское общество, но также госкорпорации, госкомпании, политические партии, религиозные организации, специализированные НКО, выступающие в роли правительственных агентов, и другие типы НКО, которые ими являются в соответствии с законом.

В попытках разобраться во всем многообразии типов НКО России мы начинаем публиковать заметки о том, как устроен некоммерческий сектор и что делают НКО с помощью государственной поддержки. Инструменты для изучения сектора:

- Портал «Открытые НКО»;
- Платформа «Данные НКО»;
- Проект «Госзатраты».

Пользуйтесь нашими ресурсами и другими проектами, исследуйте НКО вместе с нами и делитесь публикациями!

Привет! Сегодня мы — «Важные истории» — начинаем свою работу. Запустились с двумя расследованиями и двумя материалами в «Мастерской».

Самое время рассказать о нас.

КТО МЫ

«Важные истории» — это объединение независимых журналистов, которые будут работать над расследованиями, дата-исследованиями и репортажами.

Мы беремся за тему, если можем утвердительно ответить себе на три вопроса:

🚩 действительно ли эта история важна для людей?
🚩 она соответствует действительности?
🚩 можем ли мы ее доказать с помощью документов или проверенных источников?

Понимаем, что «важность» штука субъективная. Но эти истории точно важны для нас и, мы надеемся, для наших читателей тоже.

Мы не верим в конкуренцию, — мы верим в кооперацию. Поэтому истории будем публиковать вместе с коллегами из независимых российских и лучших зарубежных изданий.


ЧТО ТАКОЕ «МАСТЕРСКАЯ»

Идея кооперации связана с идеей обмена знаниями. Поэтому мы создали раздел «Мастерская», где будем публиковать тексты и видео об инструментах, необходимых, например, для сбора, анализа и визуализации данных.

В планах (спойлер!) курсы лекций по программированию на Python и JavaScript для журналистов.

Мы хотим, чтобы как можно больше журналистов в России знали, как делать качественные расследования и могли их делать. И чтобы они понимали: для этого не обязательно работать в крупном медиа.

У «Мастерской» будет своя рассылка с инструкциями, примерами проектов и рекомендациями не только от авторов «Важных историй», но и других журналистов. Мы ведь за кооперацию и обмен!

ПРО ДЕНЬГИ (куда без этого вопроса)

Мы зарегистрированы как некоммерческая организация, которой управляет совет директоров. Помимо редакторов «Важных историй» в него входят несколько уважаемых во всем мире журналистов и медиа-менеджеров.

У «Важных историй» нет владельца. А значит и нет того, кто может диктовать условия.

Главная уставная цель нашей организации — не извлечение прибыли, а создание общественного блага.

Как некоммерческая организация мы живем на пожертвования. Любой человек в мире, желающий поддержать независимую журналистику в России, может стать нашим донором. В скором времени мы запустим краудфандинговую кампанию, и такая возможность появится и у вас.

ГДЕ И ЧТО МЫ БУДЕМ РАССКАЗЫВАТЬ:

🔹 Сайт — все наши важные истории
🔹 Мастерская — инструкции по инструментам для расследователей, дата-журналистов и всех интересующихся.
🔹 Instagram — картинки про то, как мы делаем расследовательское медиа в России
🔹 GitHub — здесь будут наши открытые коды и скрипы, а также базы с уже собранными данными, которые могут быть полезны другим.
🔹 Twitter — важные истории в виде тредов.
🔹 ВКонтакте и Facebook — практически как Telegram
🔹 YouTube — здесь будут фильмы-расследования и видео-инструкции для «Мастерской»

🦠 Присоединяйтесь к Pandemic Hackathon!

РосКомСвобода @roskomsvoboda при поддержке Инфокультуры проводит онлайн-хакатон. Цель — найти и поддержать инновационные проекты в области здравоохранения и гражданской взаимопомощи в условиях экстремально тяжелого кризиса.

Новые проекты должны отвечать чрезвычайным потребностям сегодняшнего дня и строиться на важнейших принципах цифрового гражданства: защите персональных данных, безопасности и открытости информации, соблюдении прав, свобод и интересов граждан, учете мнения всех заинтересованных сторон и взаимном доверии.

🏆 Призовой фонд хакатона — 1,5 млн рублей.

✔️ Заявки на участие принимаются до 22 мая 2020. Подробности и регистрация на сайте https://pandemichack.ru/