Data engineer Заработная плата по договоренности
Обязанности: • разрабатывать и поддерживать витрины данных в экосистеме Hadoop • проектировать и улучшать архитектуру системы • проводить анализ данных для построения прототипов (Python/Saprk) • разрабатывать и оптимизировать пайплайны обработки данных/ETL на собственном фреймворке на базе Spark, а также помогать другим командам • внедрять контроль качества данных (собственный DQ-фреймворк)
Требования: • высшее образование • опыт работы data engineer от 3 лет • глубокое понимание принципов модели распределённых вычислений, а также уверенные навыки поиска, обработки данных и построения витрин с помощью Spark и SQL • опыт промышленной разработки на стеке Scala/Java/Python, знание инструментов по обработке больших данных (Spark, Trino, Polars) продвинутые знания SQL и практический опыт работы с Hadoop/Greenplum а также работа с объектными хранилищами S3 и файловой системой HDFS • знание любого оркестратора рабочих процессов (AirFlow, Oozie, Dagster, Argo Workflows) и понимание подходов к организации разработки (CI/CD, DevOps).
Мы предлагаем: • офис рядом с метро Кутузовская • гибридный формат работы • ежегодный пересмотр зарплаты и годовая премия • корпоративный спортзал и зоны отдыха • подписка Прайм с возможностью совместного использования на трёх близких • более 400 образовательных программ СберУниверситета для профессионального и карьерного развития • гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ • расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа • вознаграждение за рекомендацию друзей в команду Сбера
Контакты: [email protected]