Инжиниринг Данных
21.4K subscribers
1.6K photos
38 videos
177 files
2.91K links
Делюсь новостями из мира аналитики и карьерными советами;)

15 лет в Аналитике и Инжиниринге Данных, 9 лет в FAANG, solo entrepreneur🏄‍♂️

Реклама:
https://almond-rule-130.notion.site/1199f595f76a8030ba1be1e607c9a8ce
Download Telegram
Сегодня листая новости в Linkedin наткнулся на новую роль - Analytics Engineer. Это такой микс data engineer, data scientist и bi engineer.

Не знаете какой титул себе взять? Будьте современным, используйте Analytics Engineer. (человек швейцарский нож).

Я даже себе переименовал Linkedin!
Как здорово, что все отдельные сообщества работают вместе и помогают всем расширить кругозор и стать лучше!
Forwarded from Интернет-аналитика (Алексей Никушин)
Вчера Рома Бунин - руководитель команды визуализации Яндекс.Такси и автор канала @revealthedata провел емкий вебинар про визуализацию данных. Тема вебинара так и звучала - Алгоритм проектирования дашборда

Очень здорово, что появляются подобные материалы и отлично, что их начинают генерировать люди, которым есть, что сказать.
Сам Роман тоже берет интервью у аналитиков. Отдельно отмечу разговор с Николаем Валиотти - автором блога @leftjoin

Кроме этого, развиваются разные форматы. Например, Андрей Демидов из Data Yoga проводят MIRO-дискуссии. Из забавного и интересного: сделали сравнение дашбордов и панели кокпита самолета AirbusА320, обсудили как через дашборды работала чилийская ситуационная комната президента, Прямо сейчас они с Ромой Колеченковым из Яндекс.DataLens обсуждают обучение детей датавизу - https://datayoga.ru/datakids А все серии доступны в открытом доступе.

И вишенка на торте - канал @dashboardets, который упрямо грызет гранит науки о визуализации данных

@internetanalytics
Мне нравится название - "TensorFlow, Keras and deep learning, without a PhD", то есть для простых смертных))
На сайте datalearn.ru висит курс - Analytics for Women. Идея пока еще не взлетела, хотя уже раза 3 пытались запустить. Наверно еще не пришло время. А это статистика из YouTube - 19% женщин, а нужны минимум 45%. У каждого есть свои уникальные способности и если их соединить вместе получается супер результат. Значит все таки есть такая проблема. Самый частый аргумент от девушек - “зачем нам это, мы и так уже в теме”. Но это как в ошибке выжившего, мы смотрим на успешные истории, которые не говорят о реальной картине. И это только одна из групп. Кстати если смотреть разрез по возрасту, то 77% это 25-34. То есть после Универа, а нужно проникать в категорию 18-24, где сейчас только 3%. И конечно нужно еще найти работодателей, кому нужны “мотивированные” сотрудники. Люди, которые находят время на прохождение курса, помогают другим и делится знаниями - очень крутой актив любой компании. И они оседают на datalearn. Осталось всех пристроить, ну или поднять всем зарплату на 30%😉
Вам какого цвета хранилище данных?
Я уже писал, что если хотите преуспеть надо быть активным. Самое простое это завести блог. Если планы работать заграницей, то блог на английском.

Где блог? На medium.com или сделать сайт визитку - wix, Tilda, Wordpress и тп.

О чем писать? Да все равно о чем.

В отчете ошибка? Опишите решение.
Попробовали новую программу? Напишите инструкцию “Как начать” и для чего программа.
Проходите курс или читаете книгу? Напишите про это.

Я нашел свой старых блог с 2013 года. Там вообще все подряд про BI/DW/ETL. Мне было все равно, смотрят его или нет. Главное, это давало мне преимущество по сравнению с другими кандидатами. Сейчас даже смешно смотреть, как в одном посте шрифт разный из-за copy paste🙊🙈

https://techbusinessintelligence.blogspot.com/
About RYD - Current.pdf
3.3 MB
Про Rock Your Data консалтинг презентация.
Вот он список вакансий, кто работает с данными.
Визуализация данных это неотъемлемая часть любого BI решения. Эксперты пишут книги, университеты готовят специалистов и все для того, чтобы научить нас эффективно коммуницировать данные с конечным пользователем. Каждый раз когда вы будет создавать дашборд или строить отчет, вы должны задуматься о том, как лучше рассказать историю на основе данных и какой метод визуализации использовать.

В этом видео мы узнаем:
📌 Лучшие книги по визуализации данных
📌 История визуализации данных
📌 Обзор популярных графиков
📌 Примеры плохих и хороших дашбордов
📌 Примеры дашбордов из прошлого в SAP BO и Microstrategy
📌 Дашборд Канвас

https://youtu.be/zUpKIFFy-ok
Одна из проблем в Амазон с озером данных в AWS - соответствие требованиям GDPR/HIPPA, то есть просто удалению клиентов (customer_id и все его записи) по запросу. Это легко сделать из таблицы в БД, но не просто из файла в S3. И вот новинка, теперь можно удалять из озера данных. https://aws.amazon.com/about-aws/whats-new/2020/07/amazon-athena-adds-support-querying-apache-hudi-datasets-amazon-s3-based-data-lake/
Хороший пример как обсуждают примеры платных курсов, где обещают трудоустройство и резюме с красивыми словами. Я все больше слышу людей про недовольство платными курсами, получаются они просто не работают в таком виде, в каком они есть. Идея классная, но реализация не работает, так как это бизнес, где зарабатываются деньги, а главный KPI это кол-во студентов, кто купил курс. У вас есть интересные истории про платные курсы? Я купил курс только однажды - за 10 долларов на Udemy, по подготовке к сдаче экзамена, и это был крутой курс, я сдал экзамен:)

Рабочая модель это где нужно платить за результат. Вы прошли обучение, и если вас взяли на работу или дали повышение, то вы платите %. Ну или вас учат внутри компании их топ специалисты и вы уже работает парт тайм.
Может есть среди знакомых такие спецы?) Если вы из HR можете как шаблон использовать😊
Кто-нибудь использовал? docs -> https://lnkd.in/eaqxxdS
repo -> https://lnkd.in/ewSVm-a

Это микросервис для ML моделей.
Tableau запускает новую сертификацию для партнеров - 2 новых экзамена:
- Tableau Certified Associate Consultant
- Tableau Certified Associate Architect

Кстати Rock Your Data является партнером Tableau в Western Canada и единственным партнером в British Columbia. Скоро партнерство заканчивается и нужно будет оплачивать fee на след год. Так же необходимо получать новую сертификацию.

На данный момент людей не осталось, кто мог бы это направление развивать. Но для этого нужно будет пройти сертификацию. Я подумал о том, что можно взять Канадский рынок и через RYD продавать консультантов. Примерно как работают Индийский компании. Только более цивильно. Я знаю есть компании и из СНГ, кто работает по такой модели. Для Tableau уже все есть, много возможностей. Нужны сертифицированные консультанты или те, кто хочет получить сертификацию и выучить продукт. Ну и конечно английский язык нужен. Можно tableau завалить списком людей с экзаменом и стать самым сильным партнером Табло в Канаде😎 В принципе по такой схеме можно любой продукт продавать и внедрять. Но есть хорошие отношения только с Tableau, Microsoft Azure Data Platform, Matillion ETL и Snowflake.