Ivan Begtin
7.98K subscribers
1.79K photos
3 videos
101 files
4.5K links
I write about Open Data, Data Engineering, Government, Privacy, Digital Preservation and other gov related and tech stuff.

Founder of Dateno https://dateno.io

Telegram @ibegtin
Facebook - https://facebook.com/ibegtin
Secure contacts ivan@begtin.tech
Download Telegram
В рубрике "как это работает у них" о гособлаке в Австралии.

Проект cloud.gov.au [1] это облачное решение для развертывание госприложений. Его создало и поддерживает Австралийское агентство по цифровой трансформации для чего они использовали технологию CloudFoundry [2], де-факто индустриальный стандарт используемый по всему миру. Само облако развёрнуто на базе Amazon Web Services в их датацентре в Сиднее.

На сегодняшний день в облаке размещено 360 приложений из которых 70 в промышленной эксплуатации [3]. Весь код облака общедоступен [4] и, обязательно, сервис мониторинга статуса гособлака [5].

Аналогичный сервис гособлака есть в США [6] и он вполне себе небесплатен, но адаптирован под госпроекты. Аналогично в Великобритании гособлако на базе GOV.UK [7] и также небесплатно.

Гособлака - это G2G продукты, госорганы делают их для госорганов и беда в том что при том что в россии многие жалуются на G2B и G2C продукты, они просто не знают масштабов бедствия с G2G продуктами. Отсутствие нормальной поддержки, документации, неотлаженность кода и процессов - это далеко не все беды с которыми приходится сталкиваться.

Ссылки:
[1] https://cloud.gov.au/
[2] https://www.cloudfoundry.org/
[3] https://cloud.gov.au/insights/
[4] https://cloud.gov.au/code/
[5] https://status.cloud.gov.au/
[6] https://cloud.gov
[7] https://www.cloud.service.gov.uk/

#data #cloud
Минкомсвязь опубликовали проект приказа о перечне систем для эксперимента государственной облачной платформе, дословно "Об утверждении перечня информационных систем и информационных ресурсов, подлежащих переводу в государственную единую облачную платформу " [1].

Если кратко то сейчас в ней участвуют:
- ФТС России
- ФСС
- Минтруд России
- Минюст России
- Росархив
- Росимущество
- Ростехнадзор
- ГФС России

Из них ГФС России и Ростехнадзор, по сути, полностью на неё переходят, у остальных органов это касается только ряда их информационных систем.

Что тут скажешь, всегда важно не то кто и что есть, а то чего нет. Нет там крупнейших ФГИС под управлением ФНС, Минфина, Федерального казначейства. Нет ничего относящегося непосредственно к Минкомсвязи, ничего нет относящегося к непосредственно работе Правительства.

А сами переносимые системы - непонятно как экспериментируются. Они же не взаимодействуют между собой, параметры "эксперимента" не определены.

В принципе же есть много разных стратегий создания и использования государственных облаков. Основная стратегия - это сертификация частных решений и право заказчика/госоргана выбирать одного из них. Впрочем бывают основания и для создания единого облака - например для оптимизации сервисов.

Важные аспекты той же облачной платформы в том как в дальнейшем будет оптимизироваться вся эта инфраструктура.
Например: для каждого ФОИВа там по прежнему останутся экземпляры для Гаранта и Консультанта или всё сведётся к централизованной закупке и инсталляции?

Например: внутренние системы электронной почты заменят наконец-то на gov.ru или будет столько почтовых серверов сколько ФОИВов?

То же самое со всеми дублирующимися сервисами - есть ли стратегия их объединения?

Ссылки:
[1] https://regulation.gov.ru/projects#npa=96900


#cloud #govtech #government
Вышла новая версия Metabase [1] опенсорсной и облачной системы визуализации дашбордами (BI системы). В этой версии добавили поддержку моделей и возможности моделирования структуры отображаемых данных для нетехнических пользователей и, в принципе, видно что продукт эволюционирует в сторону повышения его доступености для аналитиков без технического бэкграунда и большей поддержке облачных продуктов.

Собственно основные продукты по визуализации данных с открытым кодом готовые к быстрому корпоративному применению - это Metabase и Superset. Изменения в них весьма интересны.

Ссылки:
[1] https://www.metabase.com/blog/Metabase-0.42/index.html

# datatools #cloud #bi #metabase #opensource
Каков объём инвестиций в компании создающие продукты по работе с данными? За 2021 год - это около $7 миллиардов долларов США. В обзоре Fundraising by data companies in 2021 [1] компании приведены по категориям:
- Data Platform & Infra
- Database & SQL
- ETL & Reverse ETL
- Data quality & observability
- Metadata & data governance
- BI & Dataviz
- AI & ML

Более всего средств привлекли:
- Databricks универсальная платформа по сбору и обработке и хранению данных, в общей сложности $2.6 миллиарда [2]
- Fivetran [3] онлайн сервис сбора данных и их доставки привлекли $565 миллионов
- Collibra [4] корпоративный каталог данных привлекли $250 миллионов
- Dataiku [5] продукт по совместной работе дата сайентистов привлекли $400 миллионов
- Neo4J [6] графовая NoSQL база данных, $325 миллионов

В обзоре только относительно крупные инвестиции, видно что значительная их часть идет на стартапы связанные с ИИ и с облачной инфраструктурой.

Ссылки:
[1] https://adat.blog/2022/02/fundraising-by-data-companies-in-2021/
[2] https://databricks.com/
[3] https://www.fivetran.com/
[4] https://www.collibra.com/us/en
[5] https://www.dataiku.com/
[6] https://neo4j.com/

#startups #data #investments #dataproducts #cloud
Кстати, вот вопрос, про Яндекс.Облако я уже писал что они цены повышают, недавно на CNews была статья про повышение цен Selectel и Datafort. А что с MailRu Cloud который теперь VK Cloud ?

Последний раз они что-то в своём блоге писали в сентябре 2021 г., последняя новость была в ноябре 2021 г. ну и странно что цены не повышают. Или повышают, но молчат?

Просто интересно "бобик сдох" или мы ещё от него чего то ждём? А то выбор между хостинг провайдерами в России невелик, тревожно за родину. Да и в целом с облачными сервисами обработки данных совсем негусто, хоть на китайские переходи, за юани.

#cloud #hosting #data #question