Data Engineer / Інженер даних

Страхова компанія ARX - лідер страхового ринку України і представник канадської міжнародної страхової групи Fairfax Financial Holdings. № 1 на ринку КАСКО 17 років поспіль, шукає в свою команду

Data Engineer / Інженер даних

Про роль

Страхова компанія будує корпоративне аналітичне сховище даних з нуля — єдину платформу даних для звітності, аналітики та операційних сервісів. Шукаємо інженера даних, який будуватиме цю платформу з першого дня: конвеєри даних, моделі сховища, контур якості.

Ви будете першим інженером даних у компанії. Це означає свободу впливати на рішення і водночас роботу в парі з архітектором, а не поодинці: стандарти, рев'ю моделей і архітектурні рішення — спільні.

Що ви будете робити

·      розробляти екстрактори даних з облікових систем компанії (MS SQL Server, PostgreSQL, Oracle): Python, ідемпотентні інкременти

·      будувати моделі сховища в dbt — Data Vault 2.0 через пакети автогенерації — і вітрини для BI

·      налаштовувати розклад і залежності конвеєрів: що за чим запускається, як безпечно перезапустити

·      розвивати контур якості даних: тести dbt, звірки з джерелами, панель якості

·      готувати дані для операційних сервісів компанії: окремі вітрини, публікація без переривання читань

·      документувати рішення і наповнювати каталог даних

Що ми очікуємо

·      впевнений SQL: аналітичні запити, віконні функції, читання планів виконання

·      Python для конвеєрів даних (з'єднання з джерелами через стандартні драйвери — PostgreSQL, MS SQL Server, Oracle)

·      PostgreSQL/MS SQL як робоча СУБД — основна платформа проєкту

·      dbt — трансформації як SQL-код із тестами; або сильний SQL і готовність швидко освоїти

·      розуміння моделювання даних: реляційне, вимірне (зірка)

·      інкрементальні патерни: watermark, порівняння знімків, CDC

·      Git і робота зі змінами через рев'ю

Буде плюсом

·      досвід читання структур 1С на MS SQL

·      оркестратори конвеєрів: Airflow, Dagster або Prefect

·      адміністрування PostgreSQL (тюнінг, реплікація)

·      колонкові формати (Parquet)

·      Debezium / Kafka — потоковий варіант захоплення змін

·      прості сервіси даних на Python (REST API)

·      каталог даних (OpenMetadata) — де що лежить, звідки походить, хто власник

·      контроль якості поверх dbt (Elementary) — автоматичні тести і звіт про якість

·      або аналогічний клас задач — незалежна від dbt перевірка якості даних (наприклад, Great Expectations)

·      досвід у фінансовому секторі

·      англійська на рівні читання технічної документації

Ми не очікуємо

·      готового досвіду Data Vault — навчимо коштом компанії: у нас є робочий демонстраційний стенд з двома варіантами моделювання на тих самих даних, автогенерація структур і рев'ю архітектора

·      Spark чи стрімінгового highload

·      сертифікацій

Чому ця робота цікава

·      сховище з нуля: greenfield-проєкт, ваші рішення визначать платформу даних компанії на роки

·      сучасний стек: PostgreSQL ·MS SQL ·dbt · Python

·      менторство досвідченого архітектора: рев'ю, стандарти, допомога в опануванні Data Vault 2.0

·      реальний вплив на технологічні рішення, а не супровід чужого легасі траєкторія росту до дата-архітектора компанії

Ми пропонуємо

·      цікаві та динамічні завдання, спрямовані на розвиток компанії

·      конкурентний рівень оплати праці та систему преміювання

·      офіційне і прозоре працевлаштування

·      програми медичного страхування, страхування життя та пільгові умови за іншими видами страхування

·      корпоративне навчання та можливості професійного розвитку

Зацікавила вакансія? Надсилайте резюме із зазначенням зарплатних очікувань. Долучайтеся до команди, що задає стандарти страхового ринку!