Актуальные заказы по ETL

Lead Data Engineer

Удаленно
Full-time

The project, a platform for creating and publishing content on social media using artificial intelligence tools, is looking for a Lead Data Engineer.


Responsibilities:

- Design, develop, and maintain robust and scalable data pipelines for collecting, processing, and storing data from diverse social media sources and user interactions.

- Design of data warehouse.

- Implement rigorous data quality checks and validation processes to uphold the integrity.

accuracy, and reliability of social media data used by our AI models.

- Automate Extract, Transform, Load (ETL) processes to streamline data ingestion and transformation, reducing manual intervention and enhancing efficiency.

- Continuously monitor and optimize data pipelines to improve speed, reliability, and scalability, ensuring seamless operation of our AI Assistant.

- Collaborate closely with Data Scientists, ML Engineers, and cross-functional teams to understand data requirements and provide the necessary data infrastructure for model development and training.

- Enforce data governance practices, guaranteeing data privacy, security, and compliance with relevant regulations, including GDPR, in the context of social media data.

- Establish performance benchmarks and implement monitoring solutions to identify and address bottlenecks or anomalies in the data pipeline.

- Collaborate with data analysts and business teams to design interactive dashboards that enable data-driven decision-making.

- Develop and support data marts and dashboards that provide real-time insights into social media data.

- Stay updated with emerging data technologies, tools, and frameworks, evaluating their potential to improve data engineering processes.


Qualifications:

- Bachelor's or Master's degree in Computer Science, Data Engineering, or a related field.

- Proven experience in data engineering, focusing on ETL processes, data pipeline development, and data quality assurance.

- Strong proficiency in programming languages such as Python, SQL and knowledge of data engineering libraries and frameworks.

- Experience with cloud-based data storage and processing solutions, such as AWS, Azure, or Google Cloud.

- Familiarity with DataOps principles and Agile methodologies.

- Excellent problem-solving skills and the ability to work collaboratively in a cross-functional team.

- Strong communication skills to convey technical concepts to non-technical stakeholders.

- Knowledge of data governance and data privacy regulations is a plus.

Middle QA

Удаленно
Full-time
Проектная занятость

В крупнейшую российскую группу IT-компаний требуется специалист на проект по тестированию базы данных.


Требования

• Опыт работы на аналогичной позиции от 2 лет.

• Глубокие знания в области тестирования, включая функциональное, интеграционное, регрессионное, Smoke и E2E тестирование.

• Продвинутые знания SQL, понимание реляционных баз данных.

• Опыт работы с cистемами управления базами данных, такими как: Oracle, PostgeSQL.

• Понимание ETL-процессов.

• Навыки разработки тестовой модели.

• Знание и опыт применения различных методик тест-дизайна.

• Умение проектировать тест-кейсы и подготавливать тестовые данные.

• Знание и использование методик подготовки оценки объема тестирования.

• Понимание жизненного цикла разработки ПО; методологий разработки ПО (Agile, Каскад, Итерационная, Инкрементная).

• Знание гибких фреймворков: Scrum, KanBan.

• Опыт тестирования в командах с гибкой моделью разработкой.

• Понимание жизненного цикла дефекта.

• Опыт работы с bug-tracking системами (Jira).

• Умение локализовывать дефекты и правильно определять критичность.

• Опыт тестирования веб-приложений.

• Опыт работы с микросервисной архитектурой и понимание принципов ее работы.

• Опыт работы с JSON, Kafka.

Data Engineer with Informatica

Удаленно
Full-time

Project: IT service provider for the life science and healthcare industry.


Requirements:

  • Proficiency in administering Informatica PowerCenter or Informatica Cloud, including installation, configuration, and maintenance of the Informatica environment.
  • Knowledge of securing the Informatica environment, including user access management, authentication methods, and data encryption.
  • Proficiency in monitoring Informatica resources, managing server logs, and performing routine maintenance tasks to ensure smooth operations.
  • Experience with scripting languages (e.g. Python or Bash) and automation tools to automate administrative tasks and improve efficiency.
  • Experience in optimizing Informatica workflows, sessions, and mappings for better performance and efficiency.
  • Ability to diagnose and resolve issues related to Informatica workflows, data integration, connectivity, and performance.
  • Ability to handle change requests, coordinate deployments.
  • Knowledge of data quality management, including profiling, cleansing, standardization, and validation techniques.


Nice to have:

  • Familiarity with database concepts and SQL queries.
  • Experience with ETL processes and tools, including the ability to design and implement efficient data workflows.
  • Understanding of Informatica Cloud IDMC integration process with other applications and systems using APIs.
  • Knowledge of data warehousing concepts, such as data modeling, dimensional modeling, and star schemas.
  • Familiarity with big data technologies, such as Hadoop, Spark, and NoSQL databases.
  • Understanding DevOps methodologies and tools can help in managing and deploying Informatica Cloud IDMC pipelines and processes more efficiently.



Бизнес/CRM аналитик

Удаленно
Full-time

Для работы на крупном банковском проекте, который связан с инвестициями (онлайн CRM) требуется Бизнес/CRM аналитик.

Необходимый уровень специалиста Senior.


Необходимый опыт:

  • Опыт с рассылками и коммуникациями CRM (Не просто CRM аналитик, а продуктовый + CRM)
  • Опыт работы в продуктовой/маркетинговой/CRM-аналитике от 2 лет.
  • Знание и практический опыт решения основных задач продуктовой и маркетинговой аналитики, в т.ч. знание каналов онлайн-продаж и коммуникаций и их ключевых различий.
  • Понимание ETL-процессов в интернет-маркетинге и продуктовой аналитике.
  • Опыт работы с инструментами персонализации и внутренними инструментами коммуникаций CRM.
  • Опыт работы с одной или несколькими системами аналитики и глубокое понимание из работы: Appsflyer, myTracker, Amplitude, Firebase, Mixpanel, Google Analytics, Яндекс.Метрика, AppMetrica или аналогами.
  • Опыт построения автоматизированной отчетности: от сбора, хранения, подготовки данных до построения отчетов/дашбордов и проведения анализа данных.
  • Уверенное владение SQL и опыт работы с базами данных (Oracle, Hadoop, Vertica).
  • Опыт работы с системами визуализации (Power BI, Superset, Tableau, Datalens, Google Data Studio, QlikView/QlikSense)
  • Знание инструментов для автоматизации сбора, статистической обработки сырых данных (R/Python).I4


Продуктовый аналитик (Senior)

Удаленно
Full-time

В отдел аналитики крупного банка ищем специалиста, который отлично разбирается в задачах маркетинговой и продуктовой аналитики в мобайле.


Тип аналитика: data engineer/маркетинговый/продуктовый/веб-аналитик

Задачи:

● В первую очередь перед человеком на этой позиции стоит задача объединения данных внутреннего хранилища и системы продуктовой аналитики для формирования сквозной отчетности по ключевым продуктам банка, а также построение маркетинговой отчетности по коммуникациям в мобильном приложении.

● Поддержка текущих и настройка новых интеграций для формирования инфраструктуры маркетинговой и продуктовой аналитики, формирование витрин данных и автоматизированной отчетности для получения сквозных воронок и отчетов по мобильным кампаниям.

● Выработка регламентов/гайдлайнов по разметке маркетинговых коммуникаций в мобайле.

● Разработка подходов к построению отчетов для сквозной отчетности по продуктам банка. Что нужно делать:

● Сформировать витрины внутренних данных для матчинга с данными in-app аналитики и разработать end-to-end отчетность для продуктов банка.

● Провести аудит текущих подходов к разметке ссылок на установку/открытие приложения и разработать регламент/гайдлайн на разметку коммуникаций в мобайле.

● Сформировать подход и организовать ведение актуальной документации по разметке кампаний.

● Выработать подход к формированию набора метрик и методик их расчета для анализа источников трафика в мобильном приложении и сформировать наборы метрик для конкретных продуктов банка. Выработать единый подход к построению отчетов по основным метрикам: наборы метрик, скрипты, макеты отчетов.

● Проработка и внедрение в постоянное использование методов и инструментов сквозной и маркетинговой аналитики (матчинг данных, различные модели атрибуции и пр.)

● Регулярный аудит качества и полноты разметки коммуникаций (наличие и соответствие регламенту), а также матчинга онлайн и офлайн данных.

● Построение отчетов по продуктам банка.


Необходимый опыт:

● Опыт работы в маркетинговой и/или продуктовой аналитике от 3-х лет.

● Знание и практический опыт решения основных задач продуктовой и маркетинговой аналитики. Понимание специфики рекламных инструментов в digital-маркетинге.

● Глубокое понимание принципов и ограничений в сборе и обмене данными в системах мобильной, веб-аналитики, а также рекламных систем.

● Опыт построения сквозной аналитики, ETL-процессов в интернет-маркетинге и продуктовой аналитике.

● Опыт применения best practices по интеграции данных в интернет-маркетинге и умение аргументировать принимаемые решения. Технические навыки

● Опыт работы с одной или несколькими системами: ○ системы аналитики: Appsflyer, myTracker, Firebase, Amplitude, Mixpanel, Google Analytics, Яндекс.Метрика, AppMetrica или аналогами, ○ облачные хранилища: Google Cloud Storage, Yandex.Cloud или аналоги, ○ рекламные системы: Google Marketing Platform, рекламные продукты Яндекса.

● Опыт работы с API систем аналитики и рекламных систем.

● Опыт построения автоматизированной отчетности: от сбора, хранения, подготовки данных до построения отчетов/дашбордов и проведения анализа данных.

● Уверенное владение SQL и опыт работы с базами данных (Oracle, Vertica, Hadoop).

● Знание инструментов для автоматизации сбора, статистической обработки сырых данных (R/Python).

Продуктовый аналитик (Middle)

Удаленно
Full-time

В отдел продуктовой аналитики цифровых каналов мы ищем человека, который позволит обеспечить продуктовые команды крупных банковских проектов, отчетностью и исследованиями по активности клиентов в мобильном и интернет-банке.


Что требуется делать?

● Погрузиться в процессы и текущие потребности продуктовых команд, наборы необходимых метрик и методик их расчета для оценки путей клиентов.

● Активно участвовать в разметке действий пользователей для системы продуктовой аналитики, в т.ч. взаимодействовать с продуктовыми командами в рамках этого процесса (от формирования набора метрик, до написания ТЗ и тестирования разметки).

● Принимать участие в исследованиях эффективности коммуникаций и точек входа, путей пользователей при совершении операций, помогать командам в генерации гипотез и проведении экспериментов.

● Организовать и автоматизировать сбор данных для отчетности, объединить данные систем-источников и строить регулярную отчетность/дашборды по клиентской активности.

● Обеспечить регулярный аудит качества и полноты разметки источников трафика, данных о поведении клиентов, а также матчинга онлайн и офлайн данных.


Необходимый опыт:

● Опыт работы в мобильной/продуктовой/маркетинговой аналитике от 1 года.

● Знание и практический опыт решения основных задач продуктовой и маркетинговой аналитики, в т.ч. знание каналов онлайн-продаж и их ключевых различий.

● Понимание ETL-процессов в интернет-маркетинге и продуктовой аналитике.


Технические навыки:

● Опыт работы с одной или несколькими системами аналитики и глубокое понимание из работы: Appsflyer, Amplitude, Firebase, Mixpanel, Google Analytics, Яндекс.Метрика, AppMetrica или аналогами.

● Опыт построения автоматизированной отчетности: от сбора, хранения, подготовки данных до построения отчетов/дашбордов и проведения анализа данных.

● Уверенное владение SQL и опыт работы с базами данных (Google BigQuery, Oracle, Hadoop).

● Опыт работы с системами визуализации (Power BI, Tableau, Datalens, Superset, Google Data Studio, QlikView/QlikSense)

● Знание инструментов для автоматизации сбора, статистической обработки сырых данных (R/Python).

Разработчик Back-end, Oracle (PL/SQL)

Удаленно
Full-time

Для работы на крупном банковском проекте требуется специалист на позицию Разработчик Back-end, Oracle (PL/SQL), допустимые уровни: Middle, Middle+.

Необходимый опыт:

  • Опыт работы на позиции разработчика или архитектора хранилища данных не менее 2 лет;
  • Владение программами разработки PL/SQL кода (Oracle, ODI), а также CASE-средствами;
  • Наличие опыта работы в банковской или финансовой сфере;
  • Опыт работы с ETL Oracle ODI, Informatica
  • Участие в успешном проекте по развёртыванию хранилища данных является существенным преимущество;
  • Английский язык - чтение технической документации.

Чем предстоит заниматься:

  • Проработка технических решений и алгоритмов КХД;
  • Контроль выполненных разработок на предмет соответствия архитектуре КХД, а также лучшим практикам реализации процедур хранилищ данных;
  • Анализ поступающих задач по развитию и сопровождению хранилища данных
  • Разработка витрин хранилища данных;
  • Разработка процедур загрузки в хранилище данных;
  • Оптимизация существующих решений;
  • Разработка отчётов в BI;
  • Ведение сопроводительной документации.
  • Выполнение задач 3-ей линии поддержки
  • Аудит и контроль предложений подрядчика по технической реализации корпоративного хранилища данных (КХД).

Technical Product Manager at DWH/BI

Офис
Удаленно
Full-time

We are a leading back-office solution provider for Fintech companies that specializes in brokerage-related solutions. We have been operational for over ten years and are continually innovating on a wide range of products and services that serve the financial industry. 


Currently, we are looking for a Technical Product Manager with a strong IT background. You will be working as part of a highly talented team of IT and business specialists. The team’s top priority is to deliver new features and improve existing services.


You like:

  • A Challenge;
  • A stable environment to nurture your passion for technology;
  • A chance to grow as a specialist;
  • To work in an agile, fast-paced environment;
  • To deliver quality work on time and focus on business value;
  • Meaningful work that has a profound impact on the company and the industry.


About you:

  • Excellent communication skills. You communicate effectively across a disparate set of stakeholders with a range of technical skills and data literacy;
  • 2+ years experience as a product manager in an Agile environment, ideally in the Data Products and Business Intelligence space;
  • Exceptional project management skills. You get things done and more importantly, you get others to get their things done too;
  • Analytical and decision-making skills. You're able to diagnose and identify as well as formulate effective action plans to resolve issues;
  • Systems thinking: the ability to see how small details interrelate and impact the bigger picture;
  • Experience with data visualization software;
  • Strong knowledge of data warehousing and ETL fundamentals;
  • Experience writing SQL queries to explore and QA data.


As an advantage:

  • Hadoop and Spark experience;
  • Vertica experience;
  • Familiarity with Apache Airflow;
  • Basic understanding of statistics and statistical testing;
  • Familiarity with JIRA and Confluence;
  • Familiar with the finance domain.


Responsibilities:

  • Working directly with internal customers (at all levels) and engineers to identify data platform and visualization requirements and discover new areas of innovation;
  • Translating the needs of non-technical systems users into technical requirements;
  • Understanding and quantifying trade-offs to prioritize data and business intelligence engineering projects
  • Being an evangelist for data, data visualizations and self-service analytics
  • Writing and managing user stories in an agile environment; developing short and long-term strategic roadmaps;
  • Being a champion of data quality.


We offer:

  • Work in an international company;
  • Comprehensive health insurance, social guarantees;
  • Paid sports activities;
  • Fruits, cookies and great coffee;
  • Sponsored educational package;
  • Modern office environment in the center of Riga;
  • Friendly team and career growth opportunities;
  • Fully subsidized parking near the office after the probation period;
  • Remote work during the COVID-19 pandemic.


Разработчик MS SQL

Офис
Удаленно
Full-time

Обязанности

•Вы собираетесь создавать различные наборы данных компании для заинтересованных сторон для анализа бизнес-данных.

• Вы будете отвечать за поддержание наборов данных систем отчетности на требуемом уровне качества.

•Вы собираетесь передавать данные между несколькими информационными системами в companyDWH.

•Вы собираетесь создавать и поддерживать интеграцию с различными блокчейнами для сбора данных о криптовалюте и токенах.

•Вы изучите и будете выполнять задачи, связанные с производительностью баз данных.

• Вы узнаете много нового о финтехе и криптография с точки зрения аналитики.


Требования

• Разработка базы данных с использованием MS SQL Server 2016

• Дальнейшее развитие существующей решение для создания отчетов с SQL ServerReporting Services (SSRS)

• Мониторинг и разработка процессов ETL

• Планирование и управление проектами внедрения

• Анализ и подготовка требований, а также разработка решений по внедрению в сотрудничестве с ответственными международными специализированными бизнес-подразделениями

• Концепция и разработка интерфейсов передачи данных во внешние системы

• Поддержка международных специализированных бизнес-подразделений, включая обучение внутренних бизнес-команд

Требования/знания/опыт

• Очень хорошие знания и навыки программирования на SQL

• Законченная степень в области бизнес-информатики (бакалавр) или эквивалентная квалификация

• Опыт разработки с помощью Visual Studio 2017 / C#.NET / VB.NET /ASP.NET желательно

• Базовые знания в области "Международных инвестиций" или заинтересованность в их приобретении

• Умение работать в команде, ориентированный на будущее и независимый способ работы

• Хорошее знание письменного и устного английского языка

• Основы знаний Power BI 


<сильные>Бонусы

Гибкий график работы: 5/2 круглый год. 30 рабочих дней отпуска в год;

Офлайн-встречи с остальной командой в самых красивых местах планеты два раза в год;

Возможности для профессионального развития и карьерного роста;

Корпоративный Mac;

Корпоративный английский;

Помощь в переезде;

Возможность удаленной работы.