Data Engineer

Команда строит инфраструктуру данных по принципам Data Mesh, где каждый домен представляет собой объединение бизнес-экспертов, аналитиков и инженеров. Сервис занимается развитием логистического бизнеса и запуском инновационных проектов в сфере доставки.

• Проектировать и поддерживать ETL-пайплайны для обработки данных от источников до дашбордов;
• Обеспечивать стабильность и производительность витрин и дашбордов;
• Разрабатывать механизмы контроля качества данных и оптимизировать процессы обработки;
• Поддерживать работу ключевых компонентов платформы, включая ClickHouse, Greenplum, YTsaurus и ETL-сервисы;
• Оказывать техническую поддержку аналитикам по вопросам работы с данными и инструментами платформы.

• Опыт работы от 3 лет;
• Отличное знание Python;
• Опыт работы с MPP-СУБД (Greenplum, Vertica, ClickHouse);
• Опыт работы с большими объёмами данных в Hadoop (HDFS, Spark, Hive), YTsaurus или аналогичных экосистемах;
• Понимание принципов проектирования хранилищ данных, ETL-фреймворков и систем мониторинга состояния хранилища;
• Умение оптимизировать запросы и оценивать вычислительную нагрузку;
• Будет плюсом опыт создания сложных высоконагруженных ETL- и ELT-пайплайнов, разработки процессов обработки сложных событий в реальном времени, работы с инструментами стека Python для Data Science, разработки проверок качества данных, понимание ценности данных для бизнеса, наличие коммитов в публичные репозитории или написание статей с примерами работ.

• Расширенная медицинская страховка с первого месяца работы, включающая стоматологию, чекапы, ментальное здоровье и онлайн-консультации;
• Оплата 30 дней больничного в году в полном объёме;
• Оплата ведения беременности и родов для сотрудниц и жён сотрудников со стажем от двух лет;
• Возможность оформления страховки для родственников по системе 80/20;
• Наличие кабинетов терапевтов и психотерапевтов в крупных офисах.