Полина Стельмах

Data Engineer

- Проектирование, разработка и оптимизация ETL/ELT-пайплайнов - Создание и сопровождение витрин данных и хранилищ, обеспечение высокой доступности и производительности - Разработка и поддержка решений для потоковой обработки данных в реальном времени с использованием Kafka и Spark - Интеграция данных из различных источников (API, файловые системы) в централизованное хранилище - Автоматизация процессов, связанных с данными, включая мониторинг и рассылку уведомлений по электронной почте - Мониторинг систем и метрик в Grafana и Temboard - Развертывание и настройка решений для каталогизации данных (OpenMetadata) - Управление правами доступа к данным и сервисам - Разработка и поддержка дашбордов и отчетов в QlikSense и Apache Superset, обеспечение их доступности, точности и удобства для бизнес-пользователей - Взаимодействие с аналитиками данных, бизнес-аналитиками и межфункциональными командами для перевода бизнес-требований в технические решения - Реализация процессов CDC для обновления данных в реальном времени - Проведение миграции данных организации из старых систем и хранилищ в новые

• Успешный проект по монетизации данных
• Миграция пайплайнов с Pentaho на Airflow, ускорение работы DWH PostgreSQL более чем на 40%

Senior Data Engineer

- Развертывание и введение каталога данных DataHub - Поддержка DWH - Сбор и подготовка данных

Data Engineer

- Парсинг данных XML, Excel, CSV в таблицы - Участие в построении хранилища данных - Разработка пайплайнов для различных операций с данными - Создание хабов и сателлитов; - Создание витрин - Выполнение различных запросов относительно согласованности и безопасности данных