Data Engineer (DWH)
В поиске опытного специалиста на позицию Data Engineer (DWH) для работы на различных проектах по запросам заказчиков в крупном промышленном холдинге, который объединяет более 100 предприятий-производителей продукции различного назначения и научно-исследовательских институтов.
Обязанности:
• Разработка и оптимизация хранилища данных (DWH)
• Создание и поддержка ETL-процессов (Apache Airflow)
• Работа с реляционными и колоночными базами данных (PostgreSQL, ClickHouse, Greenplum)
• Разработка и автоматизация дашбордов в BI-системах (Metabase)
• Проектирование и поддержка витрин данных для BI-аналитики
• Взаимодействие с аналитиками, разработчиками и бизнес-командами
• Автоматизация процессов обработки данных
• Мониторинг и обеспечение надежности хранилища
• Анализ данных и подготовка отчетов для принятия бизнес-решений
• Работа с большими объемами данных, применение статистических и ML-методов (по необходимости)
Требования:
• Опыт от 2 лет в области анализа данных
• Уверенные знания SQL (JOIN, CTE, оконные функции, агрегаты, подзапросы)
• Понимание ETL-процессов и базовых принципов работы с данными
• Опыт работы с реляционными СУБД (PostgreSQL, MySQL, MS SQL)
• Опыт работы с аналитическими базами данных (ClickHouse, Greenplum)
• Понимание ETL/ELT процессов и опыт работы с инструментами (Apache Airflow)
• Опыт работы с Python (pandas, numpy и др.)
• Опыт работы с BI-инструментами (знание Metabase будет плюсом)
• Опыт работы с системами очередей (Kafka, RabbitMQ)
• Способность объяснять сложные вещи простым языком, взаимодействовать с бизнесом
Условия:
• График работы: 5/2 (с 09:00 до 18:00 или с 08:00 до 17:00) из комфортабельного офиса, также возможен гибрид.