Инжиниринг Данных
23.4K subscribers
1.91K photos
57 videos
190 files
3.16K links
Делюсь новостями из мира аналитики и карьерными советами.

15 лет в Аналитике и Инжиниринге Данных, 10 лет в MAANG

🛠️ dataengineer.ru | 🏄‍♂️ Surfalytics.com

№5017813306

Реклама:
https://almond-rule-130.notion.site/1199f595f76a8030ba1be1e607c9a8ce
Download Telegram
Теперь и mail.ru запустил бесплатную школу по ML, DataScience, Data engineering. Конечно если вы прошли экзамен по математике и программированию и все в этом духе. Правильно я понимаю позицию российских тех гигантов - если ты был ботаном хорошо учился и не забыл матан, то тогда у тебя есть шанс пройти долгий курс и потом устроиться на достаточно не высокую ЗП? То есть компании, хотят отобрать лучших (по их мнению) кандидатов и им впринципе плевать на большинство.

Кстати какие ЗП в mail, если не секрет? Раньше я слышал, что не очень высокие🥴
Недавно я писал про "Написать книгу про Snowflake", желающих не нашлось, да и с курсом время все туда уходит. Теперь вот еще предложили книгу про Azure Data Factory. Кстати все студенты проходят сюрвей, и там интересный вопрос "город в котором, хотели жить", и больше половины хотят иммигрировать. Что-бы иммигрировать и потом еще найти работу, нужно не только скилы и бизнес кейсы применения скилов (результат работы аналитики и польза от данных - именно про это я рассказываю в первом модуле DE - 101). Но еще нужны активы (блог, книга, конференции..) Если написать книга, то вы будете как автор на амзоне, а это killer штука к вашему резюме. Так что есть еще один вариантик;) (я кстати однажды писал 2 книги одновременно, но это было перед Канадой, я был заряжен на успех!)
Слышали вы про Sales Force Einstein Analytics? В прошлом году Sales Force купил Tableau, соответственно продукты стали интегрироваться. Изначально Einstein это был внутренний BI для платформу SalesForce, теперь замиксовали. Я сам не смотрел. Если кому интересно (вы в теме и работаете с SF), то вот запись вебинара: https://salesforce.vidyard.com/watch/mYZSEwVcfCPNWhVCQvgTi5 а тут можно учиться
Кстати из интересного, пока все бегут работать в Data Scientists, в Амазон data scientists переходят в SDE. Вчера мне менеджер ответила на очередной крик душу про повышение зарплаты - чувак становись SDE, там больше платят. 🤦‍♂️ Поэтому варианта 2:
1) Быть близко к бинесу, насколько это вообще возможно
2) Быть крутым программистом с Computer Science degree

А если не 1 и не 2, то уже приходиться изобретать. По моим наблюдениям в Северной Америке в среднем на вакансию откликается 50-100 человек, то есть тут уже даже проблема, не в том, чтобы пройти собеседование, а как его вообще на него попасть. Так же, чтобы не говорили про diversity, это работает не так хорошо.

Получается, все старо как мир, нужны личные знакомства.
Прикольная штука https://airflow101.python-jitsu.club/ курс по Airflow! Я бы записался, но знаю точно, что не пройду до конца, и потеряю 5к, поэтому не запишусь. На нашем ресурсе datalearn мы тоже затронем Airflow, но без углубления.

Airflow - это такой популярный open source инструмент для интеграции данных (в народе ETL).

Кстати в Amazon его используют, недавно нашел команду, кто от него отказывается, типа сложно поддерживать
Это прям нереально круто! Есть такой же кейс в Амазон, я даже встречал его в аэропорте Сиэтла. Я считаю это очень важная тема. Например в Северной Америке, люди живут полной жизнью, а в России с этим сложно.

Современные технологии позволяют работать удаленно и эффективно. COVID19 показал, что это уже и не так важно быть в офисе. Для data learn одной из идей, мы хотели бы помогать людям, действительно кому нужна помощь, мы может обучать профессия BI разработчик, дана инженер, аналитик. Для этого нужно несколько составляющих:
1)нуджно донести информацию для желающих (я пытался писать в группах вконтакте и даже написал в одну организацию, никакого отклика)
2)помогать усваивать материал силами сообщество, которое уже есть
3)работадателям меня их мировоззрение и брать на работу людей с disabilities.

Если кто-то знает как быть с 1 и 3, было бы здорово сделать пилотный проект.
Для Северной Америке главный интерес сейчас вокруг миграции DW (не важно откуда и куда, но главное все мигрировать и модернизировать), обычно это будет одна из 4х платформ Redshift, Azure Synapse, Big Query, Snowflake. (Или это просто мой feed и мой bias)
Проблемы с данными