Свежий подкаст про DataOps https://www.dataengineeringpodcast.com/dataops-round-table-episode-313/
Data Engineering Podcast
The Grand Vision And Present Reality of DataOps - Episode 183
The Data industry is changing rapidly, and one of the most active areas of growth is automation of data workflows. Taking cues from the DevOps movement of the past decade data professionals are orienting around the concept of DataOps. More than just a collection…
Signal купил у Facebook баннеры для таргетинга и показывал на них параметры, получилось классно https://signal.org/blog/the-instagram-ads-you-will-never-see/
Signal
The Instagram ads Facebook won't show you
Companies like Facebook aren’t building technology for you, they’re building technology for your data. They collect everything they can from FB, Instagram, and WhatsApp in order to sell visibility into people and their lives. This isn’t exactly a secret,…
Для лабораторной работу модуля 5.2 я просил создать в AWS виртуальную сеть, subnets, security groups и EC2. Мне нужен доброволец, кто сможет задокументировать lab guide для AWS. У меня есть описание на английском, нужно будет повторить шаги и сделать printscreen и написать на русском, чтобы я мог в git закинуть, ну и нарисовать свежую диаграмму в draw.io. Я подскажу если, что. Приложил картинку.
Так же будут другие лабы по облаку связанные с Redshift, EMR, Networking, Azure и тд. Нужна ваша помощь в оформлении guide для лабораторных.
Зато точно разберетесь в вопросе.
Так же будут другие лабы по облаку связанные с Redshift, EMR, Networking, Azure и тд. Нужна ваша помощь в оформлении guide для лабораторных.
Зато точно разберетесь в вопросе.
Прошли курсы #datalearn с модуля 1 по 4 или любой из них? А может быть заканчиваете курс по SQL или DS&ML? Не забудьте себе выбрать сертификат от Data Learn на Linkedin! 🤫
Урок 5.3 готов - Концепции и Модели Облачных вычислений (в принципе это 80%, что надо знать по теории облачных вычислений)
Согласно National Institute of Standards and Technology (NIST) можно выделить несколько типов облачных сервис моделей и тип самого облако. В этом видео мы рассмотрим:
📌 Облачные Сервис Модели IaaS, Paas, Saas
📌 Cloud Stack
📌 Cloud Deployments Models - Public, Private, Hybrid и Community
📌 Рост популярности облачных вычисления
📌 Рост доли рынка основных вендоров
На лабораторной работе я покажу:
📌 AWS QuickStart
📌 AWS Load Balancer
📌 Рассмотрим основные команды для Bash/Shell (командной строки, которые необходимы для работы специалиста с данными)
📌 Инфраструктура as Код на пример AWS CloudFormation и Azure ARM templates
📌 Посмотрим на billing (стоимость владения по факту) и на AWS Budgets, AWS Calculator
📌 Так же посмотрим на Azure Calculator
В видео я упомянул AWS CLI, но забыл вам показать покажу в следующей лабе.
Так же мы готовим для вас качественные лабораторные работы с подробной информацией на русском. (см. пост выше, где я попросил помочь с созданием русского язычного контента, и процесс пошел!) Таким образом курс пойдет быстрей. Мне не хватает времени на детализированные лабы и я рад, что нашлись добровольцы, кто хочет разобраться в теме и готов задокументировать все в Markdown и Git.
Согласно National Institute of Standards and Technology (NIST) можно выделить несколько типов облачных сервис моделей и тип самого облако. В этом видео мы рассмотрим:
📌 Облачные Сервис Модели IaaS, Paas, Saas
📌 Cloud Stack
📌 Cloud Deployments Models - Public, Private, Hybrid и Community
📌 Рост популярности облачных вычисления
📌 Рост доли рынка основных вендоров
На лабораторной работе я покажу:
📌 AWS QuickStart
📌 AWS Load Balancer
📌 Рассмотрим основные команды для Bash/Shell (командной строки, которые необходимы для работы специалиста с данными)
📌 Инфраструктура as Код на пример AWS CloudFormation и Azure ARM templates
📌 Посмотрим на billing (стоимость владения по факту) и на AWS Budgets, AWS Calculator
📌 Так же посмотрим на Azure Calculator
В видео я упомянул AWS CLI, но забыл вам показать покажу в следующей лабе.
Так же мы готовим для вас качественные лабораторные работы с подробной информацией на русском. (см. пост выше, где я попросил помочь с созданием русского язычного контента, и процесс пошел!) Таким образом курс пойдет быстрей. Мне не хватает времени на детализированные лабы и я рад, что нашлись добровольцы, кто хочет разобраться в теме и готов задокументировать все в Markdown и Git.
YouTube
DATALEARN | DE - 101 | МОДУЛЬ 5-3 КОНЦЕПЦИИ И МОДЕЛИ ОБЛАЧНЫХ ВЫЧИСЛЕНИЙ
Согласно National Institute of Standards and Technology (NIST) можно выделить несколько типов облачных сервис моделей и тип самого облако. В этом видео мы рассмотрим:
📌 Облачные Сервис Модели IaaS, Paas, Saas
📌 Cloud Stack
📌 Cloud Deployments Models…
📌 Облачные Сервис Модели IaaS, Paas, Saas
📌 Cloud Stack
📌 Cloud Deployments Models…
Еще один классный фибдек, лишний раз доказывает, что мы на правильном пути и охват у нас глобальный.
Дмитрий здравствуйте. Читал раздел про ребят которым Вы помогли сменить профессию. Я хотел написать свою историю, может Вам будет интересно.
Мы с семьей живем в Чикаго. Последние 7 лет я занимаюсь логистикой и как только началась пандемия почти не потерял всё. Уже был в адвокатов на счёт банкротства и думал что придётся возвращаться в Украину на какое-то время. И как всегда не бывает худа без добра,) Я познакомился с человеком который занимается датой. И за столько лет я увидел, то чем хотел заниматься не ради денег и потому что надо. Она мне показала что есть такие платформы как Udemy, edex .
Дело в том что для меня понятие учеба это как выучится на доктора, где нужно учиться 6 лет и 70 к. А это всё здесь, но материала на столько много, что можно читать и учить всю жизнь жизнь , но результатом это будет не больше чем хобби. Даже не говорю за цены на coding bootcamp здесь, которые сейчас от 14-20 к, но пойти в универ учится действительно уже не вариант.
Потом случайно нашёл Skillfactory. Спасибо SF за то что познакомился Анатолия, а Анатолию что привёл меня сюда и за его ответы по Sql. Это нужно скрин сделать. Когда первый раз спрашиваешь почему так, второй почему - этого нет в учебных материалах,) У вас есть просто все что я искал. На сколько важен cloud, в всех офферах это требуется.
Я получил сертификат azure fundament az-900, но опять же где взять практику по этому. Интересно ещё то что именно data engineering никто не преподаёт. У всех топ bootcamps есть data analytics, science, software engineering но никто из них не преподаёт data engineering. Со всего что я нашёл есть курс на udacity de, springboard bootcamp и вы,)
Просто спасибо за то что Вы ребята делаете . Это очень круто, я понимаю теперь когда есть семя, работа, а здесь это ведь культ работы,) найти время на такие крутые проекты многого стоит. Надеюсь что получится сменить здесь профессию, с вашим опытом и моим трудолюбием и думаю я не один такой.
Спасибо
Дмитрий здравствуйте. Читал раздел про ребят которым Вы помогли сменить профессию. Я хотел написать свою историю, может Вам будет интересно.
Мы с семьей живем в Чикаго. Последние 7 лет я занимаюсь логистикой и как только началась пандемия почти не потерял всё. Уже был в адвокатов на счёт банкротства и думал что придётся возвращаться в Украину на какое-то время. И как всегда не бывает худа без добра,) Я познакомился с человеком который занимается датой. И за столько лет я увидел, то чем хотел заниматься не ради денег и потому что надо. Она мне показала что есть такие платформы как Udemy, edex .
Дело в том что для меня понятие учеба это как выучится на доктора, где нужно учиться 6 лет и 70 к. А это всё здесь, но материала на столько много, что можно читать и учить всю жизнь жизнь , но результатом это будет не больше чем хобби. Даже не говорю за цены на coding bootcamp здесь, которые сейчас от 14-20 к, но пойти в универ учится действительно уже не вариант.
Потом случайно нашёл Skillfactory. Спасибо SF за то что познакомился Анатолия, а Анатолию что привёл меня сюда и за его ответы по Sql. Это нужно скрин сделать. Когда первый раз спрашиваешь почему так, второй почему - этого нет в учебных материалах,) У вас есть просто все что я искал. На сколько важен cloud, в всех офферах это требуется.
Я получил сертификат azure fundament az-900, но опять же где взять практику по этому. Интересно ещё то что именно data engineering никто не преподаёт. У всех топ bootcamps есть data analytics, science, software engineering но никто из них не преподаёт data engineering. Со всего что я нашёл есть курс на udacity de, springboard bootcamp и вы,)
Просто спасибо за то что Вы ребята делаете . Это очень круто, я понимаю теперь когда есть семя, работа, а здесь это ведь культ работы,) найти время на такие крутые проекты многого стоит. Надеюсь что получится сменить здесь профессию, с вашим опытом и моим трудолюбием и думаю я не один такой.
Спасибо
Может кто знает, скинь информацию по законодательству хранения персональных данных в РФ, Казахстане, Украине и Белоруссии. Желательно в 2х словах сказать, чтобы я добавил это в след урок про безопасность и compliance. Часто это является преградой к использованию западных облаков и какие есть варианты если очень хочется использовать.
Вот и книжку уже пишут про #datamesh. Как уже обсуждалось это про большие enterprises у которых много команд, много решений, вендоров и пользователей.
Концепт из Амазона - One-way/Two-way decision. Когда я работал в Бостоне в Alexa, все продукт менеджеры сыпали разными амазоновскими терминами. Я так часто слышал про эти “двери”, но не успевал понять, что же они имеют ввиду. В общем дошло не сразу.🤪
Идея простая, и возможно есть аналогия на русском. Очень часто мы тратим много времени на принятие решения. Но если, решение можно отменить легко и с минимальными последствиями (two way door), то и думать не надо, решаем сразу и вперед. Если, что-то изменилось в будущем, делаем по другому - это эффективней, чем ждать, собирать митинги и гадать.
А вот если решение очень серьезное и его невозможно будет откатить, то тут уж потратьте время на его обсуждение и принятие.
🚪One-way door decisions are decisions that you can't easily reverse. These decisions need to be done carefully.
🚪Two-way door decisions can be reversed. You can walk through the door, see if you like it, and if not go back. These decisions can be made fast or even automated.
Идея простая, и возможно есть аналогия на русском. Очень часто мы тратим много времени на принятие решения. Но если, решение можно отменить легко и с минимальными последствиями (two way door), то и думать не надо, решаем сразу и вперед. Если, что-то изменилось в будущем, делаем по другому - это эффективней, чем ждать, собирать митинги и гадать.
А вот если решение очень серьезное и его невозможно будет откатить, то тут уж потратьте время на его обсуждение и принятие.
🚪One-way door decisions are decisions that you can't easily reverse. These decisions need to be done carefully.
🚪Two-way door decisions can be reversed. You can walk through the door, see if you like it, and if not go back. These decisions can be made fast or even automated.
Strategic and Heuristic IT Management
One-way and Two-way Door Decisions
Decisions are something that we have to do many times a day and having a heuristic for decision making can make us much more efficient and effective.
Очень важные новости💯
У Azure новая иконка))
У Azure новая иконка))
Microsoft Azure Blog
A fluent new look for the Azure icon | Microsoft Azure Blog
As your ally in the cloud, our Azure mission is to deliver thoughtfully designed products and services that equip you to solve challenges and invent what’s next. Our ability to meet your business and innovation needs is in part due to our growth mindset—which…
В апреле Excel анонсировал Office Scripts. Теперь можно ещё больше автоматизировать в Экселе.https://techcommunity.microsoft.com/t5/excel-blog/ready-player-zero/ba-p/2246208
TECHCOMMUNITY.MICROSOFT.COM
Ready Player Zero
Repeated tasks can slow down your efficiency but with Office Scripts in Excel for the web, you can automate your day-today tasks. In just a few simple steps, you can easily create a script and then share with your coworkers to automate your organization’s…
И Power BI тоже добавил новую фичу, для нее хоть можно найти применение. https://marqueeinsights.com/power-bi-goals-introduction-part-1/
Marquee Insights
Power BI Goals Introduction – Part 1 - Marquee Insights
Power BI Goals help you visualize and monitor your business’ statistics, analytics, and metrics (SAM) over time. I'll show you how to...
Новая книга про Амазон https://www.amazon.com/Amazon-Unbound-Invention-Global-Empire/dp/1982132612
13 мая Steve Wexler расскажет про свою новую (несомневаюсь - крутейшую) книгу - The Big Picture. Регистрация https://us02web.zoom.us/webinar/register/WN_M0CIUP6dSAaL7XDfmpI9UA
Есть ещё одна лаба, которую я хочу сделать. 6й модуль будет про аналитические хранилища данных. И Терадата это одна из первых MPP платформ. В лабе я хочу, скачать готовую VM с Терадата, запустить её в VMware, загрузить туда данные через Pentaho (с локальной машины), то есть опять нужно настроить сеть, чтобы локальный и VM были вместе. (У меня есть инструкция). А дальше можно позапускать запросы, чтобы посмотреть на разные фичи MPP базы, которые будут так же актуальны и для AWS Redshift. В общем, если, кто хочет заморочиться, чтобы сделать и описать все в markdown, пишите в комментариях.