Москва

Data Engineer

BigData

Требуемый опыт

1-3 года

Занятость

5/2 полный рабочий день

Ключевые навыки

Python
Etl
Airflow
Oracle
Hadoop
Spark

Какие задачи необходимо решать

  • Проектирование и разработка отказоустойчивых ETL/ELT процессов в экосистеме Hadoop и Oracle
  • Оптимизация и сопровождение пайплайнов данных (Spark, PySpark, Airflow)
  • Интеграция новых источников данных и построение витрин для бизнес-заказчиков  
  • Обеспечение качества и актуальности данных в продуктивных системах
  • Участие в архитектурных решениях по хранению и обработке больших данных
  • Ad-hoc аналитика и поддержка команд аналитиков и data scientist

Для решения этих задач требуется

  • Высшее техническое образование
  • Опыт работы с большими данными от 2 лет
  • Хорошее знание Python (pandas, PySpark) и SQL
  • Опыт работы с Hadoop/Spark и системами оркестрации (Airflow и др.)
  • Понимание принципов построения витрин данных и дата-моделирования
  • Опыт оптимизации запросов и пайплайнов обработки данных
  • Навыки работы с git и Linux bash
  • Ответственность за результат и умение работать в команде

Мы предлагаем

Оформление по ТК РФ
Справедливая и прозрачная система вознаграждения
ДМС со стоматологией
Компенсация мобильной связи
Маркетплейс льгот и сервисов Mega4You
Понятный карьерный маршрут
2500 учебных программ в мобильном приложении МегаФон Драйв
Программа поддержки и помощи сотрудникам
Активное корпоративное сообщество и насыщенный календарь событий
Москва8 800 550‑05‑00
Москва