Инжиниринг Данных
23.4K subscribers
1.92K photos
57 videos
191 files
3.16K links
Делюсь новостями из мира аналитики и карьерными советами.

15 лет в Аналитике и Инжиниринге Данных, 10 лет в MAANG

🛠️ dataengineer.ru | 🏄‍♂️ Surfalytics.com

№5017813306

Реклама:
https://almond-rule-130.notion.site/1199f595f76a8030ba1be1e607c9a8ce
Download Telegram
Привет! Есть ли тут опытные Сис Админы? Есть задачка, которая оплачивается. Есть Tableau Server на AWS EC2, и есть Active Directory на Microsoft Azure. Нужно подружить одно с другим, используя SAML. Тут меньше про cloud и больше про Сетевое и Системное Администрирование. Если есть время и и возможность помогать на других проектах в будущем. Пишите в личку.
Если вы работаете с AWS, то часто название их сервисов не совсем понятно. Вот здесь классно объяснили, что на самом деле делает сервис и как он мог бы называться https://expeditedsecurity.com/aws-in-plain-english/
Почему компании соглашаются тратить 90% своего времени на обработку данных и только 10% на аналитику? Ответ в статье.
В последнее время Бил Инмон частенько пишет статьи в Linkedin. Именно он написал книгу по дизайну хранилищ данных, которая лосих пор актуальна. В своей книге он писал про дизайн хранилища данных с использованием 3й нормальной формы. Противоположная теория была у Кимбала, который предлагал использовать dimensional modelling. Что до сих пор популярно и спрашивают на всех собеседованиях, но по факту никто не использует, эти методологии, и часто быстренько на коленке что-то собирают.

Так вот, в своей статье Бил, говорит что ИТ уже не то, департаменты ИТ стал придатком бизнеса и занимается по факту Help Desk, а все остальные интересные процессы перешли в бизнес подразделения. И правда, грань между ИТ и бизнесом пропадает. Так же он рекомендует все начинающих избегать ИТ департаментов, и идти в консалтинг или стартап. Если вспомнить коллег из ИТ департаментов, то действительно, часто они занимаются суппортом и работа не интересна. Так у меня было на проектах в Сбербанке.
На курсере столько всего нового и интересного по аналитике! (бесплатно в режиме Audit) Вот например:
Data-driven Decision Making with PWC
Data Analysis and Presentation Skills: the PwC Approach Specialization
Strategic Business Analytics Specialization
Business Analytics Specialization
Business Analytics Executive Overview
Excel to MySQL: Analytic Techniques for Business Specialization
Building High-Performing Teams
Doing Business in China Capstone

Даже Яндекс предлагает свой курс Big Data for Data Engineers Specialization
Как там говориться? Ученье свет, а неученье тьма! Да будет свет💡
В прошлом посту скинул ссылку на курс от Yandex, оказывается он на английском. Теперь вы понимаете, что когда мы что-то презентуем иностранцам, для них наш английский часто не понятен, даже ужасен. И язык не возможно улучшить находясь в русско говорящей среде;
Canada Analytics trends.pdf
1.3 MB
#whitepaper конечно сыроват, что есть-то есть. Пусть будет такой вот MVP, как маркетинговый эксперимент, через Linkedin
18 Июля будет онлайн конференция AWS innovate https://aws.amazon.com/events/aws-innovate
Выступление - Пример Data Science проекта с использованием Athena (SQL интерфейс для озера данных на AWS и Quicksight, BI продукт на AWS) https://www.infoq.com/presentations/athena-quicksight-dashboard/
Одна из лучших аналитических компаний Северной Америки Quantum Black (дочернее предприятие McKinsey), создала open source решение на Python для инжиниринга данных, вот более подробная информация про Kedro.