Менеджер Департамента развития корпоративных данных (Data engineer)
Аграрная кредитная корпорация · Астана ·
- Work mode
- Onsite
- Category
- Data engineering
Аграрная кредитная корпорация · Астана ·
Сбер · Москва
Аурус Моторс · Москва
БЮРО 1440 · Москва
Data engineer in Agrarian Credit Corporation's corporate data development department (on-site in Astana) who builds ETL/ELT pipelines and data marts, integrating sources like 1С into a PostgreSQL-based DWH using Python, SQL, Apache Airflow, and dbt; Docker/CI-CD and big data tools (ClickHouse, Kafka) are a plus.
Языки программирования:
Базы данных и SQL:
Инструменты и оркестрация:
Инструменты тестирования: опыт работы с Postman для тестирования REST API и проверки форматов данных перед интеграцией.
Контроль версий: уверенное владение Git и опыт работы в GitLab (ветвление, Merge Requests, code review).
Опыт работы с Apache Airflow (написание DAG, кастомных операторов, управление зависимостями).
Опыт работы с dbt для трансформации и тестирования данных внутри DWH.
Архитектура данных:
Интеграции:
Будет плюсом (Желательно):
CI/CD & DevOps: опыт работы с Docker, CI/CD пайплайнами.
Big Data: базовые знания или опыт работы с колоночными БД (например, ClickHouse) или инструментами потоковой обработки (Kafka) и тд.
Требования:Режим работы: полный рабочий день, 5/2
Форма найма: трудовой договор
Социальный пакет: медицинская страховка