Ivan Begtin
8.03K subscribers
1.75K photos
3 videos
101 files
4.45K links
I write about Open Data, Data Engineering, Government, Privacy, Digital Preservation and other gov related and tech stuff.

Founder of Dateno https://dateno.io

Telegram @ibegtin
Facebook - https://facebook.com/ibegtin
Secure contacts ivan@begtin.tech
Download Telegram
Вышел глобальный отчёт о мировом богатстве за 2019 год от Credit Suisse Research [1] и хотя напрямую к теме моего канала он не относится, но будет интересен всем кто интересуется как распределяется мировое богатство по богатым и бедным. Цифр в отчете собрано немало, есть профили отдельных стран, включая Россию и много показателей по всему миру

Интересные факты:
- ~ 361триллионов USD - глобальное богатство в 2019 году
- ~47 миллионов долларовых миллионеров в 2019 году
- 70849 USD - среднее богатство в 2019 году на одного взрослого
- 459 триллионов USD - ожидаемое мировое богатство к 2024 году

В отчете есть немало примеров того есть ли зависимость между богатством и ценами на недвижимость, доля женщин в списке Forbes 400 которые не наследовали, а сами сформировали своё богатство и многое другое.

Прямая ссылка на PDF отчёта [2] и на приложенный к нему Databook с таблицами и пояснениями [3]

Ссылки:
[1] https://www.credit-suisse.com/about-us/en/reports-research/global-wealth-report.html
[2] https://www.credit-suisse.com/media/assets/corporate/docs/about-us/research/publications/global-wealth-report-2019-en.pdf
[3] https://www.credit-suisse.com/media/assets/corporate/docs/about-us/research/publications/global-wealth-databook-2019.pdf

#economy #wealth #globalwealth
Дайджест коротких и материалов:
- Австралийский G2G сервис Notify [1] - это система рассылок внутри государства. Госслужащие регистрируются в нём, загружают списки email'ов и телефонов и имеют возможность для отправки писем и SMS централизовано. С открытым кодом [2] и за деньги [3]. Всё ровно по австралийской модели погружения внутрь госаппарата ключевых ИТ сервисов, но предоставление их по фиксированной цене и без необходимости госорганам проводить торги.

- данные из утечек по Луанде (Luanda Leaks) в виде списка компаний на сервере OCCRP [4]. Структурированно по компаниям, странам и интегрировано с остальными данными OCCRP

- Women, Business and the Law 2020 [5] доклад с индексом от Всемирного банка по влиянию законов и регулирования на вовлечение женщин в экономику. Со множеством цифр и таблиц

- Минэкономразвития России предлагает создать российский аналог Github'а за 2.1 млрд. рублей [6]. Идея может быть и неплоха, но сумма огромна. С другой стороны если это заменит текущий мёртвый Фонд алгоритмов и программ, то быть может дело и стоит того. Остаётся лишь вопрос стоимости и того что форма ЧГП для таких проектов может подойти лучше. В принципе это похоже на австралийские G2G проекты. Не без российской специфики, конечно.

- РБК в статье от 17 января утверждают что Константин Носков (глава Министерства цифрового развития России) уходит в отставку [7] и гадают кто может прийти ему на смену. Кто бы это ни был, мы узнаем очень скоро.

- Open Referall, открытый проект по разработке стандартов обмена данными о людях, здоровье и соцуслугах [8] анонсировали инструментарий по обработке данных [9]

- Bird Toolbox [10] коллекция инструментов для журналистов расследователей и множество статей о том как расследования на данных проводятся.

- Awsome Shodan Queries [11] наиболее интересные и странные запросы которые можно делать через систему Shodan, сканирующую интернет на всевозможные доступные сервисы. Например, через неё находят подключенные к интернету камеры для детей или рентгеновские установки.

- полугодовой давности расследование о том как турецкий власти перевозят оружие в Ливию [12]. Нельзя сказать насколько оно непредвзято, но довольно детально. Любопытно что они в расследовании используют инструменты от Palantir что врядли по карману маленькой НКО даже в Вашингтоне.

- диаграмма того как устроено ИТ в правительстве Германии [13]. Очень наглядно, но на немецком языке

Ссылки:
[1] https://notify.gov.au/
[2] https://github.com/govau/notify
[3] https://notify.gov.au/pricing
[4] https://aleph.occrp.org/datasets/1554
[5] https://openknowledge.worldbank.org/handle/10986/32639
[6] https://www.kommersant.ru/doc/4225365
[7] https://www.rbc.ru/politics/17/01/2020/5e21b5599a79475340a567df
[8] https://openreferral.org/
[9] https://openreferral.org/introducing-open-referrals-data-transformation-toolkit/
[10] https://bird.tools/
[11] https://github.com/jakejarvis/awesome-shodan-queries
[12] https://c4ads.org/blogposts/2020/1/2/assets-in-flight-libyas-flying-armories
[13] https://pbs.twimg.com/media/ELhXoRvWoAAMGyF?format=jpg&name=4096x4096

#opendata #data #ddj #digest #opensource
Учитывая масштабы события со сменой правительства, уходом Юрия Чайки и, похоже, неокончателен этот список событий, очень много вопросов и ожиданий и вопросов:

1. Какова будет структура нового пр-ва? Есть ощущение что часть министерств может потерять/обрести полномочия, новые названия и тд. В общем что реформа будет структурная, а не только персональная.

2. Что с Минкомсвязью и полномочиями Акимова? Сделают всё таки выделенного вице-премьера по цифре без совмещения полномочий? Разделят ли Минкомсвязь или наоборот наполнят новыми функциями?

3. Какова судьба Аналитического центра при Пр-ве? Останется ли он и будет ли глубоко перезагружен?

4. Какова судьба цифровой экономики? Напомню что меняется генпрокурор, а у генпрокуратуры большая часть их цифровизации именно в нацпрограмме "Цифровая экономика", кроме того проекты вроде НСУДа могут быть подвергнуты ревизии

5. И вот какова судьба НСУДа - это тоже большой вопрос

6. Останется ли Силуанов и какова будет тогда политика Минфина в части открытости их данных если он не останется?

7. Что в целом будет в политике правительства по обеспечению прозрачности? Будут ли системные изменения и возврат открытости в публичную повестку?

8. Что будет с имеющимися госкомиссиями при Пр-ве? Новыми госкомиссиями?

9. Что будет с РФРИТом который только-только распределил несколько миллиардов и который управлялся текущим составом Минкомсвязи?

Ну а в качестве итога могу сказать сейчас что когда вот это, последнее Правительство было сформировано в мае 2018 года кулуарно в последующие месяцы было очень много разговоров что многие в нём действуют так "словно живут последний день", уж очень много решений были слишком уж "прямолинейными".

Не знаю что будет с новым правительством в итоге. Ждём

#government
Вышел доклад "Этика и ответственность публичных алгоритмов" (Ethique et responsabilité des algorithmes publics) [1] от Национальной школы управления во Франции École nationale d'administration (ENA) подготовленного по заказу центра публичных инноваций Etalab.

В докладе разбираются этические аспекты применения алгоритмов в государственном управлении, в первую очередь, во Франции и Евросоюзе.

В основном доклад посвящён юридическим вопросам работы алгоритмов, открытым данным и открытому коду (сode publics) и полезен всем кто изучает регулирование в этой области и знает французский язык.

В дополнение к нему руководство Etalab по применению алгоритмов [3], также на французском в виде сжатого руководства с открытым кодом [4]

Ссылки:
[1] https://www.etalab.gouv.fr/wp-content/uploads/2020/01/Rapport-ENA-Ethique-et-responsabilit%C3%A9-des-algorithmes-publics.pdf
[2] https://www.ena.fr
[3] https://guides.etalab.gouv.fr/algorithmes/guide/
[4] https://github.com/etalab/guides.etalab.gouv.fr

#opensource #opendata #algorithms
Как ни странно в мире довольно мало государственных приложений для iPhone или Android. Помимо российских госуслуг примеры или за пределами наблюдений за лидерами цифровых сервисов или их просто нет.

Например, в Великобритании есть продвинутый портал GOV.UK [1], но отсутствует приложение с госсервисами, причём отсутствует осознано и публично декларировалось именно так ещё в 2016 году [2]

А вот в Италии полным ходом идёт разработка Italia App [3], через которое гражданин получит возможность через мобильное приложение взаимодействовать с госорганами, оплачивать счета и так далее. Очень похоже на российские госуслуги, но ещё в разработке. Причин почему государства редко создают мобильные приложения множество. Помимо технических сложностей здесь есть ещё и сложность в привлечении способных разработчиков, постоянного обновления приложения, то что это должна быть согласованная политика на уровне правительства, иначе приложение перестанет работать при обновлении регламентов той или иной процедуры и многое другое.

Пока подобных все-государственных приложений в мире очень мало.

Ссылки:
[1] https://www.gov.uk
[2] https://govinsider.asia/smart-gov/why-britain-banned-mobile-apps/
[3] https://io.italia.it/

#govservices
Пока без моих комментариев
Forwarded from Нецифровая экономика (Oleg Salmanov)
У нацпрограммы "Цифровая экономика", похоже, сменится и руководитель (министр цифрового развития), и куратор - отец Алексеич (aka вице-премьер Акимов), видимо, покидает правительство. Кто же станет нашим отцом-настоятелем? Дон Рэмович собственной персоной?

http://www.rbc.ru/politics/21/01/2020/5e2031369a79473db4c58398?fromtg=1
Стал известен новый состав Правительства РФ [1] и стала известна его новая структура [2]. Какое-никакое, но это существенное изменение за последние 8 лет. Для многих долгожданное, для кого-то неизбежное, но безусловно с некоторыми важными изменениями.

Во первых сменился "куратор цифры". Судя по всему им будет первый вице-премьер Андрей Белоусов [3], а также сменился Министр цифрового развития и тд. и теперь это Максут Шадаев , ранее вице-премьер Ростелекома, директор РТ-Лабс (дочерней структуры Ростелекома) и министр по ИТ в Московской области.

Можно ли теперь предсказать что будет далее с регулированием ИТ, цифры и тд?

Про Максута можно сказать что нет сомнений что в ИТ отрасли он понимает и в его профессионализме сомнений никогда не было, ему было что показать в Московской области. Об остальной его биографии лучше прочитать на Tadviser [4]. О том как его назначение отразится на отрасли мы узнаем когда пройдут первые назначения руководителей подведов, замминистров и тд.

В целом приход Белоусова и Шадаев похоже, означают переписывание всей программы "Цифровая экономика" и перезапуск множества из уже запущенных в рамках неё проектов.

В целом от нового правительства есть ощущение его "прикладного характера". Не берусь судить будут ли решения более этичными и социальными по сравнению с предыдущими, но над ним хотя бы перестанут откровенно смеяться. Де-одиоизация (избавление от хотя бы части одиозных чиновников) это не так уж плохо.

Лично меня по прежнему приоритетно интересует судьба открытости в органах власти, будет ли она возвращена, будут ли открытые данные, доступность данных в принципе и многое другое.

P.S. Архив сайта Минкавказа я сделал

Ссылки:
[1] https://www.rbc.ru/politics/21/01/2020/5e20346e9a79474028fe8a83
[2] http://kremlin.ru/events/president/news/62622
[3] http://government.ru/gov/persons/123/
[4] http://government.ru/gov/persons/627/
[5] http://www.tadviser.ru/index.php/Персона:Шадаев_Максут_Игоревич

#government
Как меня дополняют коллеги: Алексей Оверчук стал вице-премьером , курирующим цифровую экономику. Так что видимо Андрей Белоусов будет курировать нацпроекты, а Алексей Оверчук конкретно цифру
Весьма познавательная статья в Washington Monthly от том что работники ритейла в США превращаются в полуроботизированную рабочую силу из-за алгоритмов управляющих то что, когда и как им делать [1]. В статье " Why Today’s Shopping Sucks" разбирается то как это происходит на практике. И это важнейший фактор того что называют цифровой трансформацией бизнеса в потребительском секторе - мониторинг длины очередей, фактов продажи на смену и работника, скорости среднего обслуживания клиента и тд. - это всё сейчас части автоматизации, цифровизации и алгоритмов измеряющих эффективность работы сотрудников если не лучше, то точно без человеческого фактора.

Поэтому и отвечая на вопрос заменят ли роботы рядовых сотрудников в ритейле в ближайшее время? Нет, не заменит. "Роботы" (роботизированные алгоритмы) заменят их начальство и обеспечат весьма жёсткий контроль за "рабочей силой". Это уже давно внедрено в сервисах такси, где водитель является суть продолжением алгоритмической системы и которая сама выступает диспетчером, координатором движения и заказов и тд.

Ссылки:
[1] https://washingtonmonthly.com/magazine/january-february-march-2020/why-todays-shopping-sucks/

#privacy #future #retail
Десятки тысяч международных студентов и работников из других стран в Канаде получили визы автоматически за счёт роботизированных алгоритмов. Vancover Sun пишут об этом в статье "Douglas Todd: Robots replacing Canadian visa officers, Ottawa report says" [1]. Во внутреннем отчете департамента иммиграции страны упоминается о применении алгоритмов автоматического принятия решения и раздражённости граждан их применением.

Ссылки:
[1] https://vancouversun.com/opinion/columnists/douglas-todd-robots-replacing-canadian-visa-officers-ottawa-report-says

#ai #privacy #algorithms #canada
РБК пишет что в ФАС определились с требованиями к предустановке российского ПО на устройства [1], по крайней мере на уровне согласованной позиции внутри ведомства.

Предполагается по датам введение регулирования пред-установки российского ПО:
с 1 июля 2020 года предустановка российского ПО станет обязательной для всех смартфонов;
с 2021 года — для планшетов;
с 2022 года — для компьютеров;
с 2023 года — для Smart ТВ и ТВ-приставок.

И наличие 3-х критериев:
- право на ПО принадлежит российскому лицу;
- ПО реализуется на территории России;
- разработчик в течение последних пяти лет не нарушал закон в области персональных данных.

Для каждого вида товара будут установлены разные перечни видов софта. Предварительно для смартфонов это: поиск, антивирус, навигатор (карты), мессенджер, социальные сети, госуслуги, персональная платежная система МИР.

По текущей концепции получается что за пред-установку ПО отвечает производитель, не дистрибьютор.

Остаётся при этом очень много вопросов:
1. В целом это регулирование не про защиту прав потребителей, а про локализацию перс данных и операторов коммуникаций в России.
2. Что будет делать Apple которые вообще не предполагали подобной предустановки ПО, будут ли они реально уходить из России?
3. Начнётся ли "охота на ведьм" и борьба с "серым рынком" смартфонов без предустановленного российского ПО? Мы ведь понимаем что не все телефоны реализуются через салоны связи и интернет магазины.
4. Будут ли эти программы удаляемыми?

Я не могу припомнить ни одной страны с аналогичным регулированием. И, если его внедрение не провалится в России, то как бы такое не начали делать и многие другие страны.

Ссылки:
[1] https://www.rbc.ru/technology_and_media/22/01/2020/5e2872179a79471f2dd6bf11?from=from_main

#privacy
Вышел отчёт The state of Open humanitarian data [1] о доступности данных о гуманитарных катастрофах. Отчёт создан центром по гуманитарным данным при ООН [2] который собрал более 17 тысяч наборов открытых данных о 253 территориях из 1251 источника на 23 января 2020 года [3].

Отчёт полезен как отчёт о деятельности самого центра и как пример кооперации большого числа организаций оказывающих гуманитарную помощь. Сам проект по сбору данных мог бы быть хорошим примером МЧС по координации помощи при катастрофах в Российской Федерации.

Ссылки:
[1] https://centre.humdata.org/wp-content/uploads/2020/01/StateofData2020.pdf
[2] http://www.humdata.org/
[3] https://data.humdata.org/

#opendata #un #humdata
Forwarded from Ах, этот Минфин (Olya Parkhimovich)
В середине ноября мы запустили новый проект Счетной палаты РФ «Госрасходы», в котором не только агрегируем данные о госфинансах из разных источников, но и анализируем их, а также формируем профили каждого национального проекта. Чаще всего пользователи спрашивали у нас API к данным. Теперь он открыт, бесплатен, документирован и готов к использованию в ваших проектах и исследованиях. Вся информация о API и документация доступны по ссылке: https://spending.gov.ru/pages/devs_api/
До дня открытых данных [1] осталось 45 дней и ещё не поздно зарегистрироваться и принять участие!

Каждый год день открытых данных мы проводим как негосударственное некоммерческое мероприятие проходящее по всему миру и конкретно в Москве организуем его мы в @infoculture

Если Вы хотите принять участие как докладчик, партнер, а может быть даже и спонсор(!) напишите на infoculture@infoculture.ru обязательно. Если Вы решите провести мероприятие у себя в регионе, тоже напишите нам и мы поможем привлечь больше участников.

В дне открытых данных принимают участие представители НКО, преподаватели, чиновники, представители бизнеса, активисты и все кто деятельно работает с данными во всех их формах и ипостасях.

Помните что открытость - это то что мы делаем своими руками!

Ссылки:
[1] http://opendataday.ru/msk

#opendata #opengov
История с блокировкой Startmail.com [1] - это какая-то особая форма глупости со стороны регуляторов. Причина проста - блокировки в России покрывают исключительно трафик относящийся к http/https запросам и не затрагивают электронную почту. Правда глупость тут не только в невозможности спецслужб выявить генераторов писем о минировании, но и в реакции правоохранительных органов на подобные анонимные письма. Реальная проблема и какая-то нереально неэффективная работа по её исправлению.

Ссылки:
[1] https://www.rbc.ru/rbcfreenews/5e2980589a79478385d6a6e2

#email #security
Поиск по наборам данных от Гугл, Dataset Search [1], вышел из беты и в их посте в блоге рассказывается как он развился [2]
В первой вышедшей из беты версии появились:
- более 25 миллионов наборов данных из которых более 2 миллионов из data.gov (США)
- фильтрация по типу набору данных, геолокации и режиму доступа (открытый/не открытый)
- поиск адаптировали под аудиторию ищущую наборы данных

Российские данные пока доступны через агрегатор data.wu.ac.at который собирает с порталов на базе движка CKAN по всему миру наборы данных и отдает в формате метаданных для Google. Например, данные Хаба открытых данных [3] доступны именно через него [4].

Что значит что будем это исправлять и интегрировать в необходимом формате. Тем временем, напомню что это не единственный поисковик по данным в мире.

Существуют также:
- DataSearch (Elsevier) [5] - поиск по научным данным от Elsevier
- Magda [6] - австралийский движок для индексации и поиска по данным, используется в data.gov.au

Ссылки:
[1] http://g.co/datasetsearch
[2] https://blog.google/products/search/discovering-millions-datasets-web
[3] http://hubofdata.ru
[4] https://datasetsearch.research.google.com/search?query=hubofdata.ru
[5] https://datasearch.elsevier.com
[6] https://magda.io/

#opendata #datasets #search
В рейтинге свежем восприятия коррупции от Transparency Int. Россия оказалась на 137 месте из 180 [1]. Низкий ли это уровень? Это уровень беднейших стран Африки и Юго-Восточной Азии

Если посмотреть на этот же рейтинг в региональном разрезе, то в регионе "Easter Europe & Central Asia" (не включают восточноевропейские страны ЕС), Россия по уровню коррупции находится на 10 месте из 12, чуть выше, на 9м месте, Азербайджан, Украина и Киргизстан, и чуть ниже, на 11 месте, Узбекистан и Таджикистан. Из стран постсоветского пространства наибольшие оценки только у Грузии.

Если смотреть страны G20, то скорее всего Россия на последнем месте, пытливые умы могут воспользоваться открытыми данными [2] рейтинга и сами подсчитать суб-индексы в территориальном разрезе.

Я напомню что рейтинг Трансперенси не единственный, есть множество других прямых или косвенных аспектов измерения коррупции, эффективности и доверия к государству. Например, Edelman Trust Barometer даёт обзор уровня доверия граждан не только органам власти, но и другим общественным институтам. В их обзоре 2019 года у России одни из худших показателей [3] и только что вышел их доклад за 2020 год [4] и Россия там на последних местах.

Ссылки:
[1] https://www.transparency.org/cpi2019
[2] https://files.transparency.org/content/download/2450/14822/file/2019_CPI_FULLDATA.zip
[3] https://www.edelman.com/sites/g/files/aatuss191/files/2019-03/2019_Edelman_Trust_Barometer_Global_Report.pdf
[4] https://cdn2.hubspot.net/hubfs/440941/Trust Barometer 2020/2020 Edelman Trust Barometer Global Report.pdf

#opendata #opengov
Франция, Канада, Италия, Россия и Сингапур - страны с наиболее растущим технопессимизмом. Источник: Edelman Trust Barometer 2020
RedHat опубликовали видеоисторию про Открытые данные в Чили [1] в рамках серии Open Source Stories. Вполне познавательно о том зачем открытые данные нужны

Ссылки:
[1] https://www.redhat.com/en/open-source-stories/starting-small-open-data

#opendata #opensource