Инжиниринг Данных
23.4K subscribers
1.92K photos
57 videos
191 files
3.16K links
Делюсь новостями из мира аналитики и карьерными советами.

15 лет в Аналитике и Инжиниринге Данных, 10 лет в MAANG

🛠️ dataengineer.ru | 🏄‍♂️ Surfalytics.com

№5017813306

Реклама:
https://almond-rule-130.notion.site/1199f595f76a8030ba1be1e607c9a8ce
Download Telegram
Бизнес-форум онлайн INFADAY2021

Когда: 25 мая (вторник) 2021 года с 10.00 до 18.00 (по Москве), онлайн.

Организатор: DIS Group (dis-group.ru)

О мероприятии: За последний год в области цифровизации и искусственного интеллекта было сделано больше, чем за последние 20 лет. Особенно много новинок появилось в сфере управления данными. На форуме мы обсудим тренды в управлении данными, реальные кейсы о том, как данные помогают бизнесу, технологические новинки 2021, и многое другое!

Темы дискуссий:
✔️ Культура управления данными. Время пришло.
✔️ Как Data Governance помогает бизнесу стать эффективнее
✔️ Управление данными в реальном секторе
✔️ Новые источники данных. Анализ и моделирование сценариев
✔️ Четыре типа СDO, кто главный?
✔️ Обзор технологических новинок 2021

Ссылка на мероприятие: https://bit.ly/3tWYd0H

Мероприятие бесплатное, но регистрация обязательна.

PS максмально поддержали фонд #vsevsevmeste💪
Это так же относиться и к другим data позициям.
Топ ресурсы по Data Engineering и Analytics:
- Телеграм канал Инжиниринг Данных 🕺
- Курсы Data Learn 💃
- KDnuggets https://www.kdnuggets.com/news/index.html
- Cloudera | Data Engineering https://blog.cloudera.com/product/data-engineering/
- Silectis https://www.silect.is/blog/
- The RudderStack Blog https://rudderstack.com/blog/
- Facebook Engineering https://engineering.fb.com/
- Snowflake | Inside the Data Cloud https://www.snowflake.com/blog/
- Precisely Blog https://www.precisely.com/blog
- Data Engineering in Towards Data Science https://towardsdatascience.com/tagged/data-engineering
- SmartData Collective https://www.smartdatacollective.com/
- WeCloudData https://weclouddata.com/blog/
- Uber Engineering Blog https://eng.uber.com/
- Team Data Science Blog https://www.teamdatascience.com/blog
- Secoda Data Discovery Blog https://www.secoda.co/blog
- AWS Big Data Blog https://aws.amazon.com/blogs/big-data/
- Data Mechanics Blog https://www.datamechanics.co/blog
- ActiveWizards | Data Science and Engineering Lab https://activewizards.com/blog/
- Data Wow Blog https://datawow.io/blogs
- Pinterest Engineering https://medium.com/@Pinterest_Engineering
- Yelp Engineering and Product Blog https://engineeringblog.yelp.com/
- Netflix TechBlog https://netflixtechblog.com/
- LinkedIn Engineering Blog https://engineering.linkedin.com/blog
- Databricks Blog https://databricks.com/blog
- Knoldus » ML, AI and Data Engineering https://blog.knoldus.com/category/tech-blogs/machine-learning/
- XenonStack » Big Data Engineering https://www.xenonstack.com/blog/category/big-data-engineering/
- Dataquest » Data Engineering https://www.dataquest.io/blog/tag/data-engineering/
- Scribd Technology Blog https://tech.scribd.com/blog/
- Learn Data Engineering https://learndataengineering.com/blog
- data.world Blog https://data.world/blog/
- Ripple Engineering » Data https://engineering.ripple.com/tag/data/
- Jesse Anderson Blog https://www.jesse-anderson.com/category/blog/
Интересно следить как складывается ситуация у MicroStrategy. Они влили много денег в биткоин и их акции взлетели с 200$ до 1200$, но потом биткоин просел немного и акции пошли вниз. Очень интересно, что будет в итоге. Я как то не решился в крипту вкладываться. У вас как с этим дела?
Forwarded from Dmitry Nekrasov
Дмитрий, привет!
Меня зовут Дмитрий, я из агентства Datmark.
На днях написал статью про то, как более оптимально использовать RFM-сегментацию и лучше интерпретировать ее результаты. Буду рад, если этот контент будет релевантен и интересен твоей аудитории – https://delovoymir.biz/kak-zastavit-rfm-segmentaciyu-rabotat-v-e-commerce-4-sposoba.html

Спасибо!
Через 5 минут начало! https://youtu.be/zPUNZZtMvNI
24-28 Мая Data+AI Summit (Databricks, Spark, Bigdata, ML и многое другое) - онлайн и бесплатно. https://databricks.com/dataaisummit
Хотел расшарить статью про Lakehouse, которую опубликовали в блоге Databricks 19 мая. Соавтор сам Bill Inmon. Для меня это лишь подтверждение, что lake house (микс аналитического хранилища данных и озера данных на базе облачных вычислений) - это сейчас самая востребованная технолгия. Конечно для компаний, кто может себе это позволить.
https://databricks.com/blog/2021/05/19/evolution-to-the-data-lakehouse.html

Свое видение я выложу в datalearn модули 6, 7, 8. Как обычно будет обзор решений, инструментов и тп. Но самое главное, все базируется на модулях 1-5. Считайте, что это ваш стартовый капитал (модули 1-5) в мир современных аналитических решений.
Смотрю выступление 2016 года. https://youtu.be/ez-4m2_jRqQ

На картинке слайд, про количество нод Hadoop. Думаю было достаточно сложно обслуживать все это. Сейчас в облаке несколько кликов и вперед))
Пост не по теме, но тоже интересный🤗

В Канаде велосипед довольно популярен, особенно в Британской Колумбии, где нет зимы. Раньше мы жиле на острове в пригороде Виктории и мне было 17км до офиса. Была велодорожка, и если летом я доезжал за час комфортно, то в дождь и ветер было тяжело, да ещё сумки с кимоно и другим барахлом. Решение было электро велосипед. Они были ещё не очень популярны, и я заказал на AliExpress Bafang Kit. У меня было 4 разных кита, разные батареи и моторы. Главный +, что можно поставить на любой велосипед, мотор у меня втыкался в отверстие для педалей, вот пример. Скорость была до 45км/ч и я приезжал на 15-20 мин быстрей (много светофоров). Я даже думал делать бизнес, устанавливать на велики моторы, но канадцы какие-то капризные и жадные клиенты. Когда стал работать удаленно, все продал за также деньги, что и купил. (Мотор+велосипед). Самый крутой велик о котором я мечтал это Trek из Америки( там нет ограничения на 32км/ч). За эти деньги можно купить Honda civic в хорошем состоянии.

Сейчас мы на большой земле и теперь я могу пользоваться sky train (метро), но чтобы не ходить пешком до метро и от метро, я выбирал себе электро самокат, и нашел действительно хороший, один из лучших по качеству и с большим запасом батареи segway nineboot max. Сегодня на нем отвёз детей в школу (7 и 9) лет и мы трое более менее комфортно доехали. А у вас как с техникой?
Fivetran - облачный ETL (или лучше сказать ELT), который работает с Snowflake, Redshift, Big Query и другими, а так же очень хорошо работает вместе с dbt tool, будет проводить конференцию по европейскому времени - The Modern Data Stack
Forwarded from Roman Zykov
Ребята, привет!
У нас на звонке спрашивали про автограф на книгу


Автор книги "Роман с Data Science. Как монетизировать большие данные" Роман Зыков проведет автограф-сессию.

Она пройдет в Москве в книжном магазине Республика на Маяковской 27 мая (четверг) c 19:00 до 21:00. Автор также даст бесплатные консультации по теме анализа данных в бизнесе. В самом магазине будут в наличии экземпляры книги, которые можно приобрести. Количество ограничено. Не забудьте маски.

Адрес: Москва, м. Маяковская, ул. 1-я Тверская-Ямская, 10. Книжный магазин "Республика".
Дата и время: 27 мая с 19:00 до 21:00
Куда будет развиваться инжиниринг данных следующие 5 лет?
When we look at companies with mature data practices, we only see the final, stable metrics and dashboards. However, simple metrics like "What is the unique user count for this week"? the definition of unique can have multiple answers, and make no mistake, they all more or less correct. Are metrics real? Are we creating an analytical mess with multiple definitions of metrics? The author narrates how it's not only normal, but it's also necessary.

https://benn.substack.com/p/analytics-is-a-mess
Forwarded from Xbox fans - новости Xbox и Microsoft Gaming
В этом году Xbox исполняется 20 лет! https://www.xbox.com/en-CA/20-years-of-xbox
Кто добрался до автограф сессии - молодец!;)