Data Engineer (DWH)

В поиске опытного специалиста на позицию Data Engineer (DWH) для работы на различных проектах по запросам заказчиков в крупном промышленном холдинге, который объединяет более 100 предприятий-производителей продукции различного назначения и научно-исследовательских институтов.

Обязанности:

  • Разработка и оптимизация хранилища данных (DWH)

  • Создание и поддержка ETL-процессов (Apache Airflow)

  • Работа с реляционными и колоночными базами данных (PostgreSQL, ClickHouse, Greenplum)

  • Разработка и автоматизация дашбордов в BI-системах (Metabase)

  • Проектирование и поддержка витрин данных для BI-аналитики

  • Взаимодействие с аналитиками, разработчиками и бизнес-командами

  • Автоматизация процессов обработки данных

  • Мониторинг и обеспечение надежности хранилища

  • Анализ данных и подготовка отчетов для принятия бизнес-решений

  • Работа с большими объемами данных, применение статистических и ML-методов (по необходимости)

Требования:

  • Опыт от 2 лет в области анализа данных

  • Уверенные знания SQL (JOIN, CTE, оконные функции, агрегаты, подзапросы)

  • Понимание ETL-процессов и базовых принципов работы с данными

  • Опыт работы с реляционными СУБД (PostgreSQL, MySQL, MS SQL)

  • Опыт работы с аналитическими базами данных (ClickHouse, Greenplum)

  • Понимание ETL/ELT процессов и опыт работы с инструментами (Apache Airflow)

  • Опыт работы с Python (pandas, numpy и др.)

  • Опыт работы с BI-инструментами (знание Metabase будет плюсом)

  • Опыт работы с системами очередей (Kafka, RabbitMQ)

  • Способность объяснять сложные вещи простым языком, взаимодействовать с бизнесом