Я еще не понял насколько удасться избежать Scala для инжиниринга данных. Если что, вот новая книга по Scala 3, пока доступны 6 глав.

Вакансия Архитектор/Аналитик данных.
Куда: Управления корпоративными данными СИБУР, данные функции эффективности производства.

Чем заниматься:
Анализировать источники данных и ставить задачу инженеру данных на загрузку новых источников;
Проектировать ETL потоки и правила загрузки данных внутри для сборки витрин данных;
Формировать и защищать логическую модель данных, описывать требования к проверке данных по всем слоям хранилища;
Проводить функциональное тестирование результатов разработки;
Взаимодействовать с BI инструментами;
Общаться с пользователями, формировать и фиксировать требования пользователей к аналитической отчетности и алгоритмам;
Как участники большой команды Data Office принимать участие в построении платформы данных.

От вас обязательно:
Хорошо знать Python, SQL;
Иметь опыт бизнес-анализа или анализа данных в разных отраслях, примеры проектов или продуктов;
Высшее техническое образование (программирование, математика, физика) профильных вузов

Желательно:
Уметь строить хранилище данных;
Иметь опыт работы с Vertica или любой другой колоночной СУБД.;
Работали с Tableau или другим BI инструментом.

От нас:
Конкурентная заработная плата, премии, ДМС, страховка, работа в опытной команде, крупной компании, возможность удаленки в том числе после короны.

Резюме сюда: mashkovtsevaae@sibur.ru
Вопросы сюда: @Dddv_2705

Подробнее:
Архитектура нашей цифровой платформы (с чем предстоит работать): https://m.habr.com/ru/company/sibur_official/blog/436632/
Немного о нас как IT-подразделении СИБУР: https://sibur.digital/

Недавно я скинул информацию про SQL стилю. Оказывается это доступно на русском языке.

Так же коллеги в Амазон расшарили гид по стилю для Python. Точнее это утилитка, которая автоматически форматирует код - Black.

В ближайшие 2 недели я планирую сдать экзамены по AWS:
- AWS Certified Cloud Practitioner
- AWS Big Data Specialization, теперь называется AWS Data Analytics.
- Snowflake Pro (так как я являюсь Super Data Hero для Snowflake - это что-то вроде топ award для community и его развития, они мне прислали купон на бесплатный экзамен).

Проблемы? Вот отличная книга для их решения!)

После недавнего случая утери COVID случаев - очень актуальная картинка.

Облачный ETL Matillion наконец собрался силами и выпустил обучающие видео по ETL. То что надо для новичков! Я его тоже буду использовать в модуле 6 datalearn. Если вы знаете английский и учите современные аналитические решения, обязательно посмотрите Building a Data Warehouse using Matillion

InterWorks один из лучших мировых консалтинг компаний по Tableau, можете послушать про их основателя, он был иммигрантом из Ирана и создал компанию мирового масштаба. Мне кажется они одни из первых, кто внедрял Табло и публиковал много интересных вещей и обучали других основам.

Interwork's mantra: "Best Work, Best People, Best Clients" - what it means and how it works out in the real world

Добавил новое видео про Tableau Server. В качестве демонстрации показал как можно установить сервер на виртуальную машину, как ее создать и как настроить сетевой доступ.

Дима Аношин выложил запись моего выступления для Tableau User Group в Амазоне. По сравнению с прошлым докладом я учел ошибки и прокачал доклад: использовал live voting для взаимодействия с аудиторией, рассказал кейс в виде истории от первого лица и укоротил доклад.

Если ещё не смотрели мои идеи про алгоритм разработки дашборда, то эта версия рассказа пока самая удачная. Miro доска тут. Русская версия доклада тут.

Если Tableau дашборды мы шарим через Tableau Public, то работы в Python мы шарим через https://nbviewer.jupyter.org/ (A simple way to share Jupyter Notebooks)

Хороший пример про прохождения собеседования https://medium.com/@allo/%D0%BE-%D1%81%D0%BE%D0%B1%D0%B5%D1%81%D0%B5%D0%B4%D0%BE%D0%B2%D0%B0%D0%BD%D0%B8%D0%B8-%D0%B2-%D0%B0%D0%BC%D0%B0%D0%B7%D0%BE%D0%BD-27e649323c4b

Мы уже изучили достаточно, чтобы перейти к более серьезным шагам. То есть 3х модулей, который вы могли пройти будет достаточно, чтобы найти работу BI разработчика. Мы говорили про много вещей - BI, SQL, базы данных, задачи аналитики и BI разработчика, посмотрели примеры решений. Так же я вам давал много вспомогательных материалов, чтобы у вас нарисовалась картинка - кто такой BI разработчик и какие у него обязанности. Инструмент BI это уже 2ой приоритет. В этом видео я поделюсь с вами очень ценной и полезной информацией, на базе своего 10ти летнего опыта в индустрии. Сам я проходил много собеседований по всему миру и так же собеседовал много людей для Амазона. В этом видео я расскажу:

📌 О требованиях к BI разработчикам
📌 О критериях (измерениях) развития карьеры в Amazon
📌 Необходимых навыках для успешного поиска работы и развития внутри компании (на основе своих ошибок)
📌 О необходимости знания статистики, программирования и BigData для BI разработчика
📌 ТОП 10 кейсов для собеседования
📌 О том, как и где начать искать работу и где не надо этого делать
📌 О том, как выйти на тропу поиска работы и что для этого нужно кроме четкого резюме и красивых историй

По сути это инструкция к действию. Если вы хорошо занимались и следовали всем советам и много учились, то самое время начать дейстовать. Если вы уже в индустрии, то вы точно узнаете что-то новое и полезное для развития собственной карьеры.

Все привет!

Мы добавили видео про Power BI. Большое спасибо @edgar_lakshin , кто не пожалел своего времени и записал вводное видео про Power BI для модуля 3-10 и показал как можно построить профессиональный дашборд.

Так же он подготовил практическое задание по Power BI и рад вам помочь ответить на ваши вопросы в Slack datalearn.

13 октября можете послушать про реальный кейс с Redshift в компании Similar Web.

Завтра в Канаде день благодарения! Вот лучшая открытка всех времен.

Из истории "Изначально история праздника восходит к европейской традиции празднования урожая, которая была перенесена в Северную Америку переселенцами из Европы. Подобные традиции имелись также у коренных народов Северной Америки."

Можете смело ставить индюшку в духовку и приглашать гостей)

Какой у вас любимый журнал? Я подписался на https://www.wired.com/ (за 20$ в год Print+Digital). Мне еще нравится HBR, но часто они сложноваты для моего восприятия.