Инжиниринг Данных
20.9K subscribers
1.57K photos
33 videos
176 files
2.86K links
Делюсь новостями из мира аналитики и вредными карьерными советами;)

8 лет в FAANG, инвестиции в недвижимость, компании и акции, solo entrepreneur🏄‍♂️
Download Telegram
#python
Питон один из самых популярных языков для задач инжиниринга данных. В нем есть основые типы данных int, float, string. Когда мы работаем с данными для аналитики, часто мы работаем с суммами денег. И вот интересный пример, как python будет работать с деньгами.

Попробуйте следующую команду:

x=.1+.1+.1-.3
print(x)

Мы ожидаем получить 0, но получим 5.551115123125783e-17 (почти 0)
#python

Иногда нам нужно выгрузить данные из Интренета, обычно они бывают в формате HTML или XML. Сегодня встретил библиотеку Python (кстати для Data Engineering (интеграция и трансформация данных) я рассматриваю как основной язык, а R это для меня язык дла статистики больше, но с помощью R и Python часто можно решить одинаковые задачи.)

Библиотека Beautiful Soup - парсит данные HTML и XML. Например, мы можешь задать SearchUrl и скрипт должен будет выкачать данные из результата поиска, распарсить результат и сохранить в CSV. Так же возможно подключаться к API и тогда мы можем получить JSON.

Я приложил пример, который выгружает данные с сайта поиска работы Dice.com (скрипт может устарел, но идея ясна) https://www.crummy.com/software/BeautifulSoup/

Скрипт выгружает данные по этому запросу https://www.dice.com/jobs/q-tableau-limit-30-startPage-1-limit-30-jobs?searchid=9787308578379 и перебирает страницы поиска [1:30]
Forwarded from Александра Кондрашина
Старший аналитик продуктового направления #санктпетербург #вакансия #sql #python #офис #работа #аналитика #vacancy #analyst

Полная занятость, работа в офисе Санкт-Петербург
Готовы помочь с релокацией кандидатам из других городов

Компания Selectel - надежный провайдер ИТ-инфраструктуры в России. Департамент стратегии ищет в свою команду Старшего аналитика. Вам предстоит разрабатывать и поддерживать систему аналитических решений в компании, помогать коллегам добывать полезные инсайты и улучшать процессы.

Статья о нас на vc.ru.

Основные задачи на этой позиции:
- Проработка аналитической концепции для направления развития продуктов в Selectel
- Разработка системы показателей для разного уровня пользователей
- Постоянное общение с продуктовыми/финансовыми командами, сбор и формализация требований
- Участие в разработке алгоритмов обработки данных и расчета показателей

Что мы ожидаем от кандидатов:
- Знание ключевых продуктовых метрик, в идеале предыдущий опыт работы продуктовым аналитиком в IT / телекоме
- Опыт работы с BI-системами в качестве пользователя/разработчика (Qlik Sense, Qlik View, Tableau, Power BI) от 2 лет
- Знание Microsoft Excel на уровне продвинутого пользователя
- Умение обрабатывать, анализировать и систематизировать большие массивы данных

Будет классно, если у тебя будет:
- Опыт анализа данных в Python / R
- Понимание бизнеса компании и рынка IT услуг (хостинг, облачные сервисы)
- Понимание финансовой отчетности / корпоративных финансов

Почему Selectel:
- Официальное оформление
- Белая зарплата от 120 000 - 150 000т на руки
- Профессиональное и карьерное развитие
- Ежемесячная надбавка за некурение
- Бесплатные обеды и кофе-брейки
- Гибкое начало рабочего дня
- ДМС + стоматология + офисный врач
- от 50% до 100% оплаты обучения английскому (в офисе)
- Бесплатные разговорные клубы с носителями
- 50% оплаты абонемента в фитнес-клуб
- 10 минут пешком от метро Московские ворота
- Своя авто- и велопарковка

Подробное описание вакансии по ссылке.

Присылайте резюме на @akondrashina или на hr@selectel.ru
Forwarded from Александра Кондрашина
Вакансия: Старший дата-аналитик
#санктпетербург #вакансия #sql #python #офис #работа #аналитика #vacancy #analyst

Полная занятость, работа в офисе Санкт-Петербург
Готовы помочь с релокацией кандидатам из других городов

Компания Selectel - надежный провайдер ИТ-инфраструктуры в России. Департамент стратегии расширяется и ищет в свою команду Старшего дата-аналитика. Наш будущий коллега будет рассказывать о результатах своих исследований и предлагать следующие шаги. Вам предстоит коммуницировать практически со всеми отделами компании – от маркетинга до финансистов, а также анализировать данные – от продуктовых метрик и составных частей выручки до анализа данных по стойкам и серверам.

Основные задачи:
- Поддержка BI-инфраструктуры и обеспечение доступности информации в компании
- Разработка структуры данных, поддержка и администрирование Qlik Server
- Поддержка и усовершенствование ETL-процессов и инструментов интеграции (на SQL, Python)
- Создание новых и переработка текущих алгоритмов обработки данных
- Подготовка моделей данных для анализа
- Создание инструментов для принятия эффективных решений (приложения, дешборды, рассылки)

Что мы ожидаем от кандидатов:
- Опыт работы c BI-системами от 2 лет (Qlik Sense, Qlik View, Tableau, Power BI)
- Сильные навыки в области интеграции данных
- Опыт настройки и поддержки ETL процессов, построения DWH
- Умение обрабатывать и анализировать большие массивы данных

Почему Selectel:
- Официальное оформление, белая зарплата
- Профессиональное и карьерное развитие
- Ежемесячная надбавка за некурение
- Бесплатные обеды и кофе-брейки
- Гибкое начало рабочего дня
- ДМС + стоматология + офисный врач
- от 50% до 100% оплаты обучения английскому (в офисе)
- Бесплатные разговорные клубы с носителями
- 50% оплаты абонемента в фитнес-клуб
- 10 минут пешком от метро Московские ворота
- Своя авто- и велопарковка

Подробное описание вакансии тут.

Присылайте резюме на @akondrashina или на hr@selectel.ru