Data Engineer

Команда создает, поддерживает и развивает аналитическую платформу данных на основе клиентской активности в продукте СберБизнес. Сервис обеспечивает полный цикл поставки данных, включая сбор, агрегирование, преобразование, визуализацию и доставку конечному потребителю, а также занимается разработкой автоматизации рутинных процессов и созданием AI-агентов и LLM-приложений.

• Разрабатывать, оптимизировать и выводить в промышленную эксплуатацию витрины данных;
• Разрабатывать, поддерживать и оптимизировать ETL/ELT-процессы на базе Hadoop и Spark;
• Проектировать и реализовывать пайплайны загрузки, трансформации и хранения данных;
• Обеспечивать надёжность, отказоустойчивость и масштабируемость инфраструктуры поставки и обработки данных.

• Глубокие знания и опыт работы с SQL (написание сложных запросов, оптимизация, работа с разными СУБД);
• Понимание экосистемы Hadoop (HDFS, YARN, MapReduce, Hive и др.);
• Опыт работы с Apache Spark (разработка и оптимизация ETL-процессов, обработка больших объёмов данных);
• Владение языками программирования Scala и/или Java для разработки пайплайнов и обработки данных;
• Опыт использования Apache Airflow для построения и мониторинга сложных data-пайплайнов;
• Практический опыт работы с ClickHouse (настройка, оптимизация, написание запросов для аналитики);
• Навыки работы с генеративными AI-моделями;
• Инструментальное владение AI для анализа, генерации и автоматизации;
• Будет плюсом опыт создания AI-агентов и использования их в работе, опыт использования GigaChat, Kandinsky и аналогов в продуктах.

• Корпоративный спортзал и зоны отдыха;
• Более 400 образовательных программ СберУниверситета для профессионального и карьерного развития;
• Расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа;
• Бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров;
• Вознаграждение за рекомендацию друзей в команду Сбера.