Senior / Lead Software Engineer (Data)

Что предстоит делать

<p>Ищем <b>Senior / Lead Software Engineer (Data)</b>, который поможет строить и масштабировать <b>production-grade data systems</b>: пайплайны, сервисы и storage-решения для сбора, обработки, хранения и доставки данных. Это роль для инженера с сильным <b>software engineering mindset</b>, который умеет работать не только на уровне реализации, но и на уровне <b>архитектуры, data modeling, reliability, performance и technical leadership</b>. Ожидаем, что человек сможет брать <b>end-to-end ownership</b> за критические data workflows и влиять на стандарты команды.<br><br><b>Обязанности:</b></p><ul><li>Проектировать, разрабатывать и поддерживать <b>batch/streaming data pipelines</b> и data services.</li><li>Принимать технические решения по <b>ingestion, orchestration, storage, трансформациям и delivery</b>.</li><li>Строить ETL/ELT-решения с использованием <b>Python, Airflow, Cron</b>.</li><li>Интегрировать данные из <b>API, логов, NoSQL, IoT/embedded-источников и внутренних сервисов</b>.</li><li>Проектировать <b>схемы хранения, модели данных и структуры баз данных</b>.</li><li>Оптимизировать решения с точки зрения <b>performance, scalability, cost и maintainability</b>.</li><li>Обеспечивать <b>data quality, observability, reliability</b> и стабильность production-процессов.</li><li>Планировать и реализовывать <b>миграции данных</b> между платформами и форматами.</li><li>Документировать схемы, трансформации, <b>data lineage</b> и ключевые технические решения.</li><li>Участвовать в <b>code review, design discussions, incident resolution</b>.</li><li>Менторить других инженеров и развивать <b>engineering standards</b> в data-направлении.<br><b><br>Требования:</b></li></ul><ul><li>Значительный опыт как <b>Senior / Lead Software Engineer, Data Engineer или Backend Engineer</b> в data-intensive среде.</li><li>Сильный <b>Python</b> и опыт построения production-ready решений.</li><li>Опыт работы с <b>Apache Airflow</b>.</li><li>Опыт работы с <b>MongoDB</b> или другими NoSQL-решениями.</li><li>Сильное понимание <b>проектирования баз данных и data models</b>: schema design, indexing, normalization/denormalization.</li><li>Опыт работы с <b>большими объёмами данных</b>, high-throughput или streaming workloads.</li><li>Опыт с <b>Azure Blob Storage</b> или аналогичными object storage.</li><li>Уверенное знание <b>SQL</b> и оптимизации запросов.</li><li>Глубокое понимание <b>ETL/ELT, incremental processing, datalake/warehouse principles</b>.</li><li>Понимание <b>testing, observability, fault tolerance, idempotency, recovery</b> для data systems.</li><li>Опыт с <b>Git, CI/CD, production deployment</b>.</li><li>Опыт <b>технического лидерства, mentoring, design review</b> и работы со стейкхолдерами.<br> </li></ul><p><b>Будет плюсом:</b></p><ul><li><b>Snowflake, Elasticsearch</b></li><li><b>Kafka</b> или другие streaming-платформы</li><li><b>Grafana / Prometheus</b></li><li><b>Ansible</b> или другие IaC / automation tools</li><li><b>Power BI</b></li></ul><p>Опыт с <b>cloud DWH, governance, lineage, internal data tools</b> <br><br><b><i>Предоставляем бронирование*</i></b> <br><b><i>Офис с полноценным укрытием*</i></b></p> <div> <a href="https://jobs.dou.ua/companies/nda-recruitment/vacancies/375935/#reply-btn-id">Откликнуться на вакансию</a> </div>