Data Quality Engineer

Data Quality Engineer

Data Quality Engineer

Data Quality Engineer

Сербия, Белград

Чем предстоит заниматься:

  • Разработка и автоматизация DQ-проверок с использованием инструментов: Great Expectations, soda-core.

  • Построение системы автоматического мониторинга и аллертинга для контроля качества данных.

  • Внедрение методологий Data Governance.

  • Оптимизация процессов управления данными и поддержка процедур для повышения Data Quality.

  • Выявление и устранение проблем с качеством данных, проведение коневого анализа причин , контроль инцидентов.

  • Сотрудничество с дата-инженерами, аналитиками для определения требований к данным, помощь в проектировании процессов сбора, хранения

  • Автоматизация процессов очистки и валидации данных.

  • Участие в разработке и оптимизации ETL/ELT-процессов.

  • Ведение технической документации и поддержка стандартизации процессов.

От тебя:

  • Опыт управления качеством данных и внедрения Data Governance.

  • Глубокие знания SQL и теории БД: опыт работы с (PostgreSQL, ClickHouse)

  • Знание ETL-инструментов и принципов построения DWH и Data Lake.

  • Опыт работы с Big Data-технологиями: Kafka, Spark, S3.

  • Знакомство с инструментами обеспечения качества данных.

  • Навыки работы с инструментами каталогизации и управления метаданными: Open Metadata.

  • Понимание концепций CI/CD и DevOps: опыт работы с Git, Docker, Kubernetes.

  • Знание методов моделирования данных: Data Flow Diagram, ER-моделирование.

  • Опыт разработки технической документации и стандартизации процессов.

Будет плюсом:

  • Опыт с методологиями моделирования данных: Data Vault, Anchor Modeling.

  • Знакомство с инструментами BI и визуализации данных: Tableau, Superset.

  • Опыт работы с MDM-системами и инструментами управления метаданными.

  • Стек: Kafka, S3, Iceberg, Spark, ClickHouse, PostgreSQL, ELK, Grafana, Tableau

Мы предлагаем:

  • Помощь с релокацией в Сербию (визовое сопровождение для сотрудника и членов его семьи);

  • Интересные задачи, перспективные проекты, продвинутые технологии;

  • Завтраки и обеды в офисе за счет компании;

  • Работу в русскоязычной команде;

  • Современный подход к управлению процессами, временем, задачами;

  • Отсутствие ненужной бюрократии, возможность реализовывать свои идеи.