Data Engineer, Middle+

Описание вакансии

компания "talgau brokerage"

мы ищем data engineer в продуктовую команду solva group.

твой день с 9:00 до 18:00 будет включать:

• разработка и развитие корпоративного хранилища данных (dwh).
• проектирование и построение etl/elt-процессов для загрузки данных из различных источников.
• настройка и поддержка потоковой передачи данных через kafka.
• проектирование схем и оптимизация запросов в clickhouse.
• построение дашбордов, алертинга и мониторинга в grafana.
• формирование и отправка отчётности в кредитные бюро в установленных форматах и регламентах.
• аудит текущих решений и выявление точек роста.
• профайлинг, оптимизация и рефакторинг существующих решений.

ты — наш идеальный кандидат, если:

• есть коммерческий опыт на позиции dwh/data engineer от 2 лет.
• понимаешь принципы построения dwh (kimball/inmon, star schema, etl/elt).
• уверенно владеешь sql и умеешь оптимизировать сложные запросы.
• есть опыт работы с kafka (топики, партиционирование, продюсеры/консьюмеры).
• есть опыт работы с clickhouse (проектирование схем, партиционирование, materialized views).
• уверенно работаешь со стеком: kafka, clickhouse, postgresql/mysql, grafana, prometheus, docker, airflow (или другие etl-инструменты), python или java/scala.

плюсом будет: опыт формирования и передачи данных в кредитные бюро (гкб/пкб).

стек проекта:

• kafka, clickhouse;
• postgresql, mysql;
• infrastructure - docker, grafana, prometheus, consul, vault, kibana, elk;
• airflow;
• testing - junit, mockito;
• build - gradle, maven.

мы предлагаем:

• работу в крупном финансовом холдинге, зарекомендовавшим себя как надежный работодатель;
• профессиональный менеджмент и команда, готовая делиться опытом, идеями и вдохновлять;
• график работы: 5/2, 9:00-18:00 / 10:00-19:00;
• гибрид после испытательного срока;
• отпуск 28 дней;
• насыщенную корпоративную жизнь;
• комфортный офис в центре города.

Метки