Дата-инженер в Карты

Проектирование и оптимизация ETL-процессовНужно будет проектировать и оптимизировать процессы извлечения, трансформации и загрузки данных (ETL) в DWH. Вы будете разрабатывать эффективные пайплайны для работы с данными из различных источников (API, базы данных, файлы и т. д.), сокращать время обработки и повышать качество данных. Работа с большими объёмами данныхВам предстоит обрабатывать сотни терабайт данных ежедневно: очищать их от шума, трансформировать, интегрировать и обеспечивать их высокое качество и целостность. Мониторинг и отчётностьВы примете участие в создании и поддержке систем мониторинга состояния DWH и генерации отчётов. Это поможет отслеживать ключевые метрики, оперативно выявлять и устранять проблемы в работе хранилища данных. Взаимодействие с другими командамиВы будете активно взаимодействовать с разработчиками, аналитиками и другими специалистами, узнавать требования к данным и реализовывать их в рамках DWH. Расширенная медицинская страховка начинает работать с первого месяца в Яндексе. В неё входят стоматология, ежегодные чекапы, неотложная помощь за рубежом, лечение критических заболеваний, в том числе онкологии, и страхование от несчастных случаев. Мы оплачиваем 80% стоимости ДМС для детей и супругов, вы — остальные20%. В Яндексе есть всё, чтобы постоянно развиваться и учиться новому: внутренняя образовательная платформа, менторство и программы для начинающих и опытных руководителей. Также мы оплачиваем участие в профильных конференциях — как в качестве спикера, так и в качестве участника. Кроме того, в Яндексе есть внутренние проекты, где наши сотрудники делятся экспертизой, обсуждают сложные темы и разбирают кейсы своих проектов. Во всех крупных офисах Яндекса есть спортзалы со всем необходимым: тренажёрами, спортивным инвентарём, душевыми, шкафчиками для одежды и вещей. Можете заниматься самостоятельно, а можете с корпоративным тренером. В Яндексе есть спортивный клуб и много спортивных команд. У них есть свои лидеры, чаты, программы тренировок. А ещё они регулярно участвуют в забегах, триатлонах, «Гонке героев», футбольных и других соревнованиях. Вы сможете присоединиться к существующим командам или собрать свою. У нас нет фиксированного времени начала и конца рабочего дня — работайте так, как удобно вам и вашей команде. Льготная ставка на покупку жилья и улучшение жилищных условий — в зависимости от стажа, позиции и результатов ревью. Действует для сотрудников, работающих в российских офисах Яндекса.

— Работали дата-инженером или в смежных ролях Работали с технологиями для обработки больших данных, включая MapReduce Хорошо знаете SQL или YQL, работали с реляционными базами данных Владеете Python и С++ Знаете и применяли ETL-инструменты Работали с YTsaurus и YQL Работали с ClickHouse Умеете разрабатывать DAG для Airflow психотерапия в офисе или онлайн-сервисах; лазерная коррекция зрения через год работы