Ivan Begtin
8.08K subscribers
1.46K photos
3 videos
98 files
4.19K links
I write about Open Data, Data Engineering, Government, Privacy and Data Preservation and other gov and tech stuff
Telegram @ibegtin
Facebook - https://facebook.com/ibegtin
Secure contacts ivan@begtin.tech

Contact @NMBabina for ads proposals
Download Telegram
Тема совсем не про данные, но не менее актуальное. The Economist Intelligence Unit (EIU) опубликовали прогноз рецессии по странам G20 [1].

Прогноз неутешителен, падение ВВП везде, почти везде в отрицательные значения в прогнозе ВВП на год.

Особенно:
- Италия: -7%
- Германия: -6,8%
- Аргентина: -6.7%
- Бразилия: -5,5%
- Мексика: -5,4%

Несмотря на то что падение ВВП России ожидается в -2%, ничего хорошего ждать не стоит. Происходящее в экономике сейчас будет даже хуже чем сама эпидемия, из-за наложения многих факторов ситуация, во многом, не до конца поддаётся прогнозам.

Тем не менее, я повторюсь, сейчас не хватает не прогностических моделей распространения эпидемии, а систем оперативного мониторинга и прогнозирования экономики и мировой торговли. Хотя, казалось бы, самое что ни на есть практическое применение собираемым данным.

Ссылки:
[1] https://www.eiu.com/n/covid-19-to-send-almost-all-g20-countries-into-a-recession/

#economy #coronavirus
Как бы я не хотел не получается избежать темы коронавируса COVID-19.

Federation of American Scientists запустили проектов ответов на вопросы от учёных [1], где только проверенная информация

На Kaggle новый конкурс COVID-19 Dataset Award [2] и продолжаются ранее объявленные [3]

ВОЗ разрабатывает мобильное приложение [4] с открытым кодом по мониторингу пандемии.

О тайваньском опыте использования гражданских технологий (civic tech) в противодействии коронавирусу [5]

Ссылки:
[1] https://covid19.fas.org/l/en
[2] https://www.kaggle.com/data/139140
[3] https://www.kaggle.com/covid19
[4] https://github.com/WorldHealthOrganization/app
[5] https://www.foreignaffairs.com/articles/asia/2020-03-20/how-civic-technology-can-help-stop-pandemic

#opendata #data #coronavirus #covid19
Для тех кто вынужденно сидит дома, многочисленные напоминания, о том что делаю я и наша команда в Инфокультуре и в Счетной палате.

Инфокультура
- Видео с мероприятий Инфокультуры https://www.youtube.com/channel/UCve6269kQEJ1LW52HXKtTng/videos
- Рассылка Инфокультуры https://infoculture.us7.list-manage.com/subscribe?u=2e38b8af0d8a547b51427dc9b&id=dadb533f05
- Телеграм канал - https://t.me/infoculture
- Открытый код https://github.com/infoculture
- Открытые данные: https://data.world/infoculture, https://ngodata.ru и https://hubofdata.ru

Счетная палата
- Проект "Госрасходы" https://spending.gov.ru
- Открытый код, включая обучающие материалы - http://code.ach.gov.ru

Мои ресурсы
- Личный блог https://begtin.tech
- Телеграм канал - http://t.me/begtin
- Facebook - https://facebook.com/ibegtin

Список не полный, скорее иллюстративный для тех кто хочет чуть больше погрузиться в открытые данные и открытый код.

#opendata #opensource #opengov
Forwarded from Инфокультура
Сегодня Инфокультуре исполняется 8 лет! 🎉

Мы рады, что сообщество активистов открытых данных в нашей стране растет с каждым годом. Благодарим всех, кто участвует в наших проектах и помогает продвигать концепцию открытости.

В этом году мы отмечаем день рождения в эпоху неопределенности, черных лебедей, самоизоляции и онлайна. Мы искренне убеждены, что свободный обмен знаниями и данными помогает всем нам эффективнее решать общественные проблемы.

📚 Самый ценный вклад, который мы можем сейчас внести — это дать вам возможность узнавать новое, вдохновляться идеями и исследованиями других, чтобы совершенствовать собственные навыки. Хотим поделиться с вами накопленными знаниями и предлагаем вам посмотреть на происходящее с точки зрения данных. Собрали для вас тематическую подборку видео наших лекций:

- «COVID-19: Как смоделировать распространение коронавируса?» — Дмитрий Сергеев, Senior Data Scientist ŌURA, руководитель курса по машинному обучению OTUS: https://bit.ly/2Un6dcS
- «Раскрытие данных о заболеваниях россиян» — Дада Линделл, дата-журналист РБК: https://bit.ly/39tRQaJ
- «Влияние отключения интернета на экономику регионов» — Михаил Климарев, исполнительный директор Общества Защиты Интернета: https://bit.ly/2UmCiBo
- «Комфорт и безопасность в городе: что важно для жителей и что мы можем измерить при помощи данных?» — Юлия Апухтина, главный редактор Интернет-журнала «Другой город»: https://bit.ly/33TgwbI
- «Чему нас научили данные о получателях гуманитарной помощи» — Дарья Алексеева, директор фонда «Второе дыхание»: https://bit.ly/33Y2jKz

Внимание: к описанию видеозаписей прилагаются презентации.

Архив: https://www.youtube.com/infoculture.

🍩 Вы можете нас поздравить и выразить поддержку нашей деятельности с помощью доната: https://www.infoculture.ru/donation.
Наше исследование по открытости ГИСов мы начали сильно раньше коронавируса и многое в нём не учли. Но самое главное что мы не отразили и самое главное что актуально сейчас - это доступность статистики смертности по России. Не отразили поскольку эта система никогда не предполагала массового пользователя,

ЕГР ЗАГС не публикует статистику с середины 2018 года http://zags.nalog.ru/statistics/ да и тогда она публиковалась исключительно в виде 3-х картинок. Что очень удивительно для всех систем ФНС где качественная ведомственная статистика ведётся много лет.

Как анализировать статистику смертности, если эти сведения официально не публикуются?

Что делать с тем что статистика смертности по причинам смерти не публикуется?

#opendata #data
К сожалению (или к счастью для кого-то?) разработчики приложения социального мониторинга в Москве [1] более чем безграмотны. В канале @itsorm сразу много публикаций о том как безграмотно приложение подготовлено, использует HTTP вместо HTTPS и не только.

Лично я лишь удивляюсь почему в России тем что должна делать федеральная власть занимаются московские власти.

Ссылки:
[1] https://play.google.com/store/apps/details?id=com.askgps.personaltrackerround

#privacy #coronavirus
Forwarded from IT и СОРМ
Видимо, хост, на который отправляет данные приложение для слежки за жителями Москвы
Австралийское государственное приложение Coronavirus Australia [1] появилось в Google Play 29 марта [2] и у него уже 580 оценок и 3 звезды.
Российское государственное приложение Мэрии Москвы [3] появилось 25 марта [4] и к нему уже 631 отзыв и оценка в 1 звезду.

Пользователи активно минусуют попытки государства к внедрению всеобщего мониторинга. Но я хочу обратить внимание на другое. Московское приложение, помимо того что сделано "тяп ляп" [5] ещё и сливает статистику в Google Firebase [6] поскольку использует Google Firebase Analytics [7] в своей работе.

Если кто-то хочет задаться вопросом можно ли разрабатывать приложения для Android не сливая статистику и аналитику в Google, то ответ - да, можно. Почему это не было сделано? А вот это и есть важный вопрос, который, я уверен, журналисты найдут время и спросить ДИТ Москвы.

Ссылки:
[1] https://play.google.com/store/apps/details?id=au.gov.health.covid19
[2] https://www.abc.net.au/news/2020-03-29/federal-government-launches-coronavirus-australia-app/12100680
[3] https://play.google.com/store/apps/details?id=com.askgps.personaltrackerround&showAllReviews=true
[4] https://t.me/antidigital/2439
[5] https://t.me/begtin/1841
[6] https://reports.exodus-privacy.eu.org/en/reports/122620/
[7] https://firebase.google.com/

#privacy #coronavirus #moscow #mobile
А вот и ещё подробности уже на основе анализа приложения.
Forwarded from IT и СОРМ
Чтобы вы понимали: персональные данные россиян (фотографии!) из приложения ДИТа мэрии Москвы передаются на серверы в Эстонии (страна НАТО, на секундочку) и возвращаются обратно в виде их анализа.
Интересно, оштрафует ли мэрию Москвы Роскомнадзор?
Или возбудит уголовное дело Следственный Комитет?

То есть у условного ЦРУ есть вообще все рычаги для сбора массива данных о жителях Москвы. И все это богатство подарили западным спецслужбам ДИТ и Собянин.
Не в моих правилах частить с упоминанием какой-то темы, но тут какая то рукотворная катастрофа созданная руками: ДИТ Москвы -> ГБУ Информационный город -> компания "Гаспар" и итоговый продукт в виде мобильного приложения "Социальный мониторинг".

Я постараюсь уже завтра-послезавтра облечь это в текст в "большой форме".

#privacy
Forwarded from IT и СОРМ
Промежуточные итоги изучения приложения для слежки за жителями Москвы:

— Приложение получает доступ ко всей информации на телефоне: GPS, камера, местоположение, возможность звонить, просмотр любых данных, доступ к любым настройкам.

— Приложение передаёт собранную информацию на серверы мэрии в открытом виде без какого-либо шифрования. Это провал.

— Для распознавания лиц, приложение использует эстонский сервис identix.one — то есть, передаёт фотографии в эстонскую юрисдикцию и на серверы, расположенные в Германии. Обе страны входят в НАТО.

— Разработкой приложения занимается компания «Гаскар», подрядчик «Инфогорода».

— В QR-кодах зашифрованы MAC и IMEI (индивидуальные идентификаторы) устройства.

— На приложение было потрачено 180 млн рублей. Судя по его качеству, украдено было 99% бюджета.

Это полнейший провал и позорище. ДИТ Москвы должен быть разогнан палками за такое.
Жанр моего канала в телеграм не предполагает сарказма, даже когда очень хочется, поэтому просто процитирую реакцию из канала "Координация профанации". То что ДИТ Москвы оперативно откатили попытку внедрения социального мониторинга - это хорошо, но вот в том что это было тестовое приложение поверить очень сложно. Хорошая мина при плохой игре, не более того.
Рубрика "Циничная отмазка"
Циникс послушал "Эхо Москвы", на котором по телефону директор ДИТа Эдуард Лысенко как явно назначенный крайний оправдывался (это звучало именно так) за вчерашний косяк с приложением "Социальный мониторинг". По пунктам:
1. Приложение предназначено только для больных короной, которые выбрали способ лечения на дому, и это приложение в некоем смысле представляет собой вариант электронного браслета от ФСИН (это циничная интерпретация Циникса, но смысл передан верно).
2. Перед пользованием приложением больные будут подписывать информированное согласие (видимо, электронной подписью, сгенерированной теми же рукожопыми погромистами).
3. Вчера это было пробное тестирование, чтобы собрать обратную связь и улучшить приложение. Собрали... Приложения в открытом доступе уже нет. Всем спасибо.
4. Тем больным, у кого нет смартфонов, ДИТ будет их выдавать вместе с установленным приложением. Когда выздоровеют, больные обязаны будут вернуть смартфон ДИТу.
5. За границу ничего не передается. Сервера Айдентикса не используются, используются только алгоритмы (ага, конечно!). Все остается на серверах ДИТа (тех же, очевидно, где хранилось электронное голосование).
Про QR-коды для всех сейчас будет
На сайте covid19faq.ru Инфокультура запускает базу знаний по COVID-19. Это пока небольшая и постоянно пополняемая база знаний по коронавирусу COVID-19 созданная в форме вопросов и ответов.

В базе знаний собраны:
- общие сведения о коноравирусе
- симптомы, тесты и лечение
- как минимизировать риск заражения
и многое другое.

Все материалы взяты _исключительно_ из официальных источников, снабжены ссылки на первоисточник(-и) и проходят внутреннюю процедуру проверки. Подробнее в разделе "О проекте" [1].

А также, в виду специфики Инфокультуры про работу с данными, есть специальный раздел "Открытые данные и исследования" [2] в котором собираются вопросы и даются ответы о том где найти открытые данные о COVID-19, как помочь учёным в исследованиях и какие исследования проводятся и так далее.

Проект пока на самой ранней стадии, ещё нигде официально не анонсировался. Если у Вас есть идеи/предложения/замечания, то присылайте нам на covid19@infoculture.ru или через контактную форму на сайте.

Если Вы представляете медицинское учреждение или орган власти по регулированию или контролю здравоохранения, или частную медицинскую организацию со значимым присутствием в России, то мы готовы к партнёрству в развитии и наполнении проекта. Проект с самого начала создавался как партнёрский.

Ссылки:
[1] https://covid19faq.ru/l/ru/article/l0qfrfqq1i-about
[2] https://covid19faq.ru/l/ru/category/5tlrc091fo-data

#covid19 #coronavirus #opendata
Как обеспечить доверие граждан в период кризиса, такого как пандемия COVID-19?

Для начала обеспечить максимальную доступность информации и гарантировать защиту прав граждан на всё время кризиса и после него.

Это не так сложно как могло бы показаться:
1. Необходимо раскрывать максимально, возможно, детально сведения по смертности граждан на ежедневной основе. Максимально подробно - это статистика по причинам смерти и по возрастным группам. У государства есть возможность это делать на федеральном уровне на основе данных из ЕГР ЗАГС [1] и на уровне субъектов федерации решением губернатора.

2. Раскрытие информации о реальном распространении болезни в форматах открытых данных. Большинство журналистов вполне владеют Excel, многие вполне умеют открывать файлы CSV и работать с гораздо более сложными форматами данных. Официальное раскрытие данных в машиночитаемом виде, на ежедневной основе, необходимо для успешного информирования граждан. То что сейчас все чаще цитируют зарубежные агргегаторы сведений о коронавирусе, а не российские официальные источники, это одно из следствий недостаточной открытости данных в России

3. У всех вводимых мер "социального мониторинга" должны быть опубликованы обоснования и, самое главное, четко обозначенный и нормативно-зафиксированный срок вывода систем из эксплуатации. Если этот срок не указан _явным образом_ в указе губернатора или решении федерального органа власти, это означает что данные системы останутся и после кризиса и их эксплуатация может привести и, неизбежно, приведёт к злоупотреблению властью.

4. При введении систем социального мониторинга, в обязательном порядке предоставлять исчерпывающие сведения о том какие данные, как именно, кем именно собираются, как они используются и что будет с ними по окончании пандемии.

Ссылки:
[1] http://zags.nalog.ru

#opendata #privacy #transparency
Лишнее подтверждение то что Москва не Россия в неприятной сегодняшней находке.

Все субъекты федерации передают в ФСО России нормативно-правовые документы для их официального опубликования. Эти документы общедоступны на сайте официального опубликования правовых документов [1].

Там есть (должны быть) документы всех федеральных органов власти и субъектов федерации, за исключением Москвы. Нормативно-правовые документ Москвы там отсутствуют как явление.

Косяк ли это pravo.gov.ru или этой власти города не отдают им свои НПА - это очень интересный вопрос на который у меня ответа нет.

А вот в реестр Минюста НПА Москвы есть. Интересно хоть кто-то когда-либо делал кросс сопоставления официальных реестров НПА?

Ссылки:
[1] http://publication.pravo.gov.ru/

#opendata #laws #gov
Скриншот поиска по органам власти на Publication.pravo.gov.ru
Всё начинается безобидно, с реестра "социально-значимых интернет ресурсов" опубликованных Минкомсвязи [1].
А закончится фильтрацией Рунета по "белому списку".

В списке нет пары десятков тысяч сайтов органов власти на федеральном и региональном уровне, сайтов муниципальных образований и ещё много чего.

Ну да, какая такая социальность. Слов нет

Ссылки:
[1] https://digital.gov.ru/uploaded/files/perechen-k-prikazu-148.pdf

#opengov #runet
В Пакистане запустили панель с визуализацией данных [1] и возможностью их выгрузить с детализацией до страны и отдельных штатов.

Вся визуализация выполнена в Google Data Studio, можно смотреть ретроспективные данные и выгружать их в форматах CSV и XLSX.

Google, также, начали публиковать данные в из Google Trends по статистике поиска по коронавирусу по странам [2]

Эти данные и другие материалы собраны в проекте covid19faq.ru, в разделе "Открытые данные" [3].

Если знаете какие-либо полезные источники данных, присылайте и их, и вопросы которые возникают и на которые пока нет ответов.

Ссылки:
[1] http://covid.gov.pk/stats/pakistan
[2] https://googletrends.github.io/data/
[3] https://covid19faq.ru/l/ru/article/f3sw02fiup-data

#opendata #covid19 #coronavirus
Визуализация данных и выгрузка в статистике Пакистана http://covid.gov.pk/stats/pakistan