Middle Data Engineer [МТС аналитика (команда Идентификации), МТС Веб Сервисы]

МТС Аналитика – это единая аналитическая платформа для анализа поведения пользователей в web и app приложениях экосистемы МТС.Наша цель – стать №1 в России в области веб-аналитики. Мы считаем, что данные - это ключ к успеху любого бизнеса, и мы хотим предоставить компаниям инструменты, которые помогут им расти и развиваться. Мы ищем Data Engineer, который поможет нам создать и развивать платформу в команду «Идентификации». Команда разрабатывает решения для защиты персональных данных пользователей и улучшения качества аналитики в анонимное зоне клиентов. У нас вы сможете принять участие в разработке event-based архитектуры платформы, поработать с streaming технологиями, технологиями Big Data, in-memory базами данных и аналитическими хранилищами, уделяя особое внимание оптимизации производительности решений.

Обязанности

— Загружать данные с реляционных источников в Data Lake, размещать их в соответствии с подходами команды:

Оптимизировать пайлайны формирования витрин данных

— Создавать новые пайплайны загрузки данных между различными хранилищами

— Развивать процессы мониторинга и проверки качества данных

— Решать задачи с интеграцией потоковых real-time процессов

— Дорабатывать программный код, участвовать в review задач других Data Engineer

— Участвовать в построении масштабируемой, высоконагруженной и отказоустойчивой системы

— Участвовать в разработке новых алгоритмов системы идентификации.

Требования

— Коммерческий опыт работы Data Engineer (разработчик ETL) от 1 года

— Python (работа с большими объемами данных)

— SQL (аналитические функции, оптимизация)

— Spark (работа с большими объемами данных)

— Airflow (или другие оркестраторы процессов)

— Опыт с любой реляционной СУБД (Orаcle, MySQL, Postgres).

Условия

— собственную платформу MTS Ocean для получения ИТ-ресурсов, а это значит, что деплой, мониторинг, observability - не будут для вас проблемой, вы сможете сосредоточиться на фичах

— профессиональные гильдии инженеров по направлениям, чтобы поддерживать друг друга и обмениваться опытом

— внутреннюю площадку TechTalks для обмена опыт ом, дискуссий, развития навыков самопрезентации. Участие во внешних IT конференциях. Мы выступаем на HighLoad++, DataFest, Mobius, Test Driven Conf, Joker, DevOps, Матемаркетинг и даже проводим собственную конференцию по архитектуре Hello, conference! полезные курсы и вебинары в корпоративном университете и электронные библиотеки.

А ЕЩЕ:

— медицинскую страховку с 1 месяца со 100% покрытием расходов, включая стоматологию, страхование жизни и здоровья в поездках за рубеж. А еще можно застраховать родственников с корпоративной скидкой

— единую подписку МТС Premium — KION light в онлайн-кинотеатре KION, сервис МТС Music, 30 дней бесплатного пользования подпиской OZON Premium

— скидки и предложения от партнеров на фитнес, занятия английским и прочее.