Актуальные заказы по ETL

Lead Data Engineer

Удаленно
Full-time

The project, a platform for creating and publishing content on social media using artificial intelligence tools, is looking for a Lead Data Engineer.


Responsibilities:

- Design, develop, and maintain robust and scalable data pipelines for collecting, processing, and storing data from diverse social media sources and user interactions.

- Design of data warehouse.

- Implement rigorous data quality checks and validation processes to uphold the integrity.

accuracy, and reliability of social media data used by our AI models.

- Automate Extract, Transform, Load (ETL) processes to streamline data ingestion and transformation, reducing manual intervention and enhancing efficiency.

- Continuously monitor and optimize data pipelines to improve speed, reliability, and scalability, ensuring seamless operation of our AI Assistant.

- Collaborate closely with Data Scientists, ML Engineers, and cross-functional teams to understand data requirements and provide the necessary data infrastructure for model development and training.

- Enforce data governance practices, guaranteeing data privacy, security, and compliance with relevant regulations, including GDPR, in the context of social media data.

- Establish performance benchmarks and implement monitoring solutions to identify and address bottlenecks or anomalies in the data pipeline.

- Collaborate with data analysts and business teams to design interactive dashboards that enable data-driven decision-making.

- Develop and support data marts and dashboards that provide real-time insights into social media data.

- Stay updated with emerging data technologies, tools, and frameworks, evaluating their potential to improve data engineering processes.


Qualifications:

- Bachelor's or Master's degree in Computer Science, Data Engineering, or a related field.

- Proven experience in data engineering, focusing on ETL processes, data pipeline development, and data quality assurance.

- Strong proficiency in programming languages such as Python, SQL and knowledge of data engineering libraries and frameworks.

- Experience with cloud-based data storage and processing solutions, such as AWS, Azure, or Google Cloud.

- Familiarity with DataOps principles and Agile methodologies.

- Excellent problem-solving skills and the ability to work collaboratively in a cross-functional team.

- Strong communication skills to convey technical concepts to non-technical stakeholders.

- Knowledge of data governance and data privacy regulations is a plus.

Middle QA

Удаленно
Full-time
Проектная занятость

В крупнейшую российскую группу IT-компаний требуется специалист на проект по тестированию базы данных.


Требования

• Опыт работы на аналогичной позиции от 2 лет.

• Глубокие знания в области тестирования, включая функциональное, интеграционное, регрессионное, Smoke и E2E тестирование.

• Продвинутые знания SQL, понимание реляционных баз данных.

• Опыт работы с cистемами управления базами данных, такими как: Oracle, PostgeSQL.

• Понимание ETL-процессов.

• Навыки разработки тестовой модели.

• Знание и опыт применения различных методик тест-дизайна.

• Умение проектировать тест-кейсы и подготавливать тестовые данные.

• Знание и использование методик подготовки оценки объема тестирования.

• Понимание жизненного цикла разработки ПО; методологий разработки ПО (Agile, Каскад, Итерационная, Инкрементная).

• Знание гибких фреймворков: Scrum, KanBan.

• Опыт тестирования в командах с гибкой моделью разработкой.

• Понимание жизненного цикла дефекта.

• Опыт работы с bug-tracking системами (Jira).

• Умение локализовывать дефекты и правильно определять критичность.

• Опыт тестирования веб-приложений.

• Опыт работы с микросервисной архитектурой и понимание принципов ее работы.

• Опыт работы с JSON, Kafka.

Data Engineer with Informatica

Удаленно
Full-time

Project: IT service provider for the life science and healthcare industry.


Requirements:

  • Proficiency in administering Informatica PowerCenter or Informatica Cloud, including installation, configuration, and maintenance of the Informatica environment.
  • Knowledge of securing the Informatica environment, including user access management, authentication methods, and data encryption.
  • Proficiency in monitoring Informatica resources, managing server logs, and performing routine maintenance tasks to ensure smooth operations.
  • Experience with scripting languages (e.g. Python or Bash) and automation tools to automate administrative tasks and improve efficiency.
  • Experience in optimizing Informatica workflows, sessions, and mappings for better performance and efficiency.
  • Ability to diagnose and resolve issues related to Informatica workflows, data integration, connectivity, and performance.
  • Ability to handle change requests, coordinate deployments.
  • Knowledge of data quality management, including profiling, cleansing, standardization, and validation techniques.


Nice to have:

  • Familiarity with database concepts and SQL queries.
  • Experience with ETL processes and tools, including the ability to design and implement efficient data workflows.
  • Understanding of Informatica Cloud IDMC integration process with other applications and systems using APIs.
  • Knowledge of data warehousing concepts, such as data modeling, dimensional modeling, and star schemas.
  • Familiarity with big data technologies, such as Hadoop, Spark, and NoSQL databases.
  • Understanding DevOps methodologies and tools can help in managing and deploying Informatica Cloud IDMC pipelines and processes more efficiently.



Бизнес/CRM аналитик

Удаленно
Full-time

Для работы на крупном банковском проекте, который связан с инвестициями (онлайн CRM) требуется Бизнес/CRM аналитик.

Необходимый уровень специалиста Senior.


Необходимый опыт:

  • Опыт с рассылками и коммуникациями CRM (Не просто CRM аналитик, а продуктовый + CRM)
  • Опыт работы в продуктовой/маркетинговой/CRM-аналитике от 2 лет.
  • Знание и практический опыт решения основных задач продуктовой и маркетинговой аналитики, в т.ч. знание каналов онлайн-продаж и коммуникаций и их ключевых различий.
  • Понимание ETL-процессов в интернет-маркетинге и продуктовой аналитике.
  • Опыт работы с инструментами персонализации и внутренними инструментами коммуникаций CRM.
  • Опыт работы с одной или несколькими системами аналитики и глубокое понимание из работы: Appsflyer, myTracker, Amplitude, Firebase, Mixpanel, Google Analytics, Яндекс.Метрика, AppMetrica или аналогами.
  • Опыт построения автоматизированной отчетности: от сбора, хранения, подготовки данных до построения отчетов/дашбордов и проведения анализа данных.
  • Уверенное владение SQL и опыт работы с базами данных (Oracle, Hadoop, Vertica).
  • Опыт работы с системами визуализации (Power BI, Superset, Tableau, Datalens, Google Data Studio, QlikView/QlikSense)
  • Знание инструментов для автоматизации сбора, статистической обработки сырых данных (R/Python).I4


Продуктовый аналитик (Senior)

Удаленно
Full-time

В отдел аналитики крупного банка ищем специалиста, который отлично разбирается в задачах маркетинговой и продуктовой аналитики в мобайле.


Тип аналитика: data engineer/маркетинговый/продуктовый/веб-аналитик

Задачи:

● В первую очередь перед человеком на этой позиции стоит задача объединения данных внутреннего хранилища и системы продуктовой аналитики для формирования сквозной отчетности по ключевым продуктам банка, а также построение маркетинговой отчетности по коммуникациям в мобильном приложении.

● Поддержка текущих и настройка новых интеграций для формирования инфраструктуры маркетинговой и продуктовой аналитики, формирование витрин данных и автоматизированной отчетности для получения сквозных воронок и отчетов по мобильным кампаниям.

● Выработка регламентов/гайдлайнов по разметке маркетинговых коммуникаций в мобайле.

● Разработка подходов к построению отчетов для сквозной отчетности по продуктам банка. Что нужно делать:

● Сформировать витрины внутренних данных для матчинга с данными in-app аналитики и разработать end-to-end отчетность для продуктов банка.

● Провести аудит текущих подходов к разметке ссылок на установку/открытие приложения и разработать регламент/гайдлайн на разметку коммуникаций в мобайле.

● Сформировать подход и организовать ведение актуальной документации по разметке кампаний.

● Выработать подход к формированию набора метрик и методик их расчета для анализа источников трафика в мобильном приложении и сформировать наборы метрик для конкретных продуктов банка. Выработать единый подход к построению отчетов по основным метрикам: наборы метрик, скрипты, макеты отчетов.

● Проработка и внедрение в постоянное использование методов и инструментов сквозной и маркетинговой аналитики (матчинг данных, различные модели атрибуции и пр.)

● Регулярный аудит качества и полноты разметки коммуникаций (наличие и соответствие регламенту), а также матчинга онлайн и офлайн данных.

● Построение отчетов по продуктам банка.


Необходимый опыт:

● Опыт работы в маркетинговой и/или продуктовой аналитике от 3-х лет.

● Знание и практический опыт решения основных задач продуктовой и маркетинговой аналитики. Понимание специфики рекламных инструментов в digital-маркетинге.

● Глубокое понимание принципов и ограничений в сборе и обмене данными в системах мобильной, веб-аналитики, а также рекламных систем.

● Опыт построения сквозной аналитики, ETL-процессов в интернет-маркетинге и продуктовой аналитике.

● Опыт применения best practices по интеграции данных в интернет-маркетинге и умение аргументировать принимаемые решения. Технические навыки

● Опыт работы с одной или несколькими системами: ○ системы аналитики: Appsflyer, myTracker, Firebase, Amplitude, Mixpanel, Google Analytics, Яндекс.Метрика, AppMetrica или аналогами, ○ облачные хранилища: Google Cloud Storage, Yandex.Cloud или аналоги, ○ рекламные системы: Google Marketing Platform, рекламные продукты Яндекса.

● Опыт работы с API систем аналитики и рекламных систем.

● Опыт построения автоматизированной отчетности: от сбора, хранения, подготовки данных до построения отчетов/дашбордов и проведения анализа данных.

● Уверенное владение SQL и опыт работы с базами данных (Oracle, Vertica, Hadoop).

● Знание инструментов для автоматизации сбора, статистической обработки сырых данных (R/Python).

Продуктовый аналитик (Middle)

Удаленно
Full-time

В отдел продуктовой аналитики цифровых каналов мы ищем человека, который позволит обеспечить продуктовые команды крупных банковских проектов, отчетностью и исследованиями по активности клиентов в мобильном и интернет-банке.


Что требуется делать?

● Погрузиться в процессы и текущие потребности продуктовых команд, наборы необходимых метрик и методик их расчета для оценки путей клиентов.

● Активно участвовать в разметке действий пользователей для системы продуктовой аналитики, в т.ч. взаимодействовать с продуктовыми командами в рамках этого процесса (от формирования набора метрик, до написания ТЗ и тестирования разметки).

● Принимать участие в исследованиях эффективности коммуникаций и точек входа, путей пользователей при совершении операций, помогать командам в генерации гипотез и проведении экспериментов.

● Организовать и автоматизировать сбор данных для отчетности, объединить данные систем-источников и строить регулярную отчетность/дашборды по клиентской активности.

● Обеспечить регулярный аудит качества и полноты разметки источников трафика, данных о поведении клиентов, а также матчинга онлайн и офлайн данных.


Необходимый опыт:

● Опыт работы в мобильной/продуктовой/маркетинговой аналитике от 1 года.

● Знание и практический опыт решения основных задач продуктовой и маркетинговой аналитики, в т.ч. знание каналов онлайн-продаж и их ключевых различий.

● Понимание ETL-процессов в интернет-маркетинге и продуктовой аналитике.


Технические навыки:

● Опыт работы с одной или несколькими системами аналитики и глубокое понимание из работы: Appsflyer, Amplitude, Firebase, Mixpanel, Google Analytics, Яндекс.Метрика, AppMetrica или аналогами.

● Опыт построения автоматизированной отчетности: от сбора, хранения, подготовки данных до построения отчетов/дашбордов и проведения анализа данных.

● Уверенное владение SQL и опыт работы с базами данных (Google BigQuery, Oracle, Hadoop).

● Опыт работы с системами визуализации (Power BI, Tableau, Datalens, Superset, Google Data Studio, QlikView/QlikSense)

● Знание инструментов для автоматизации сбора, статистической обработки сырых данных (R/Python).

Разработчик Back-end, Oracle (PL/SQL)

Удаленно
Full-time

Для работы на крупном банковском проекте требуется специалист на позицию Разработчик Back-end, Oracle (PL/SQL), допустимые уровни: Middle, Middle+.

Необходимый опыт:

  • Опыт работы на позиции разработчика или архитектора хранилища данных не менее 2 лет;
  • Владение программами разработки PL/SQL кода (Oracle, ODI), а также CASE-средствами;
  • Наличие опыта работы в банковской или финансовой сфере;
  • Опыт работы с ETL Oracle ODI, Informatica
  • Участие в успешном проекте по развёртыванию хранилища данных является существенным преимущество;
  • Английский язык - чтение технической документации.

Чем предстоит заниматься:

  • Проработка технических решений и алгоритмов КХД;
  • Контроль выполненных разработок на предмет соответствия архитектуре КХД, а также лучшим практикам реализации процедур хранилищ данных;
  • Анализ поступающих задач по развитию и сопровождению хранилища данных
  • Разработка витрин хранилища данных;
  • Разработка процедур загрузки в хранилище данных;
  • Оптимизация существующих решений;
  • Разработка отчётов в BI;
  • Ведение сопроводительной документации.
  • Выполнение задач 3-ей линии поддержки
  • Аудит и контроль предложений подрядчика по технической реализации корпоративного хранилища данных (КХД).