Verilənlər üzrə Baş Mühəndis (Senior Data engineer)
15 Nov 2024İş barədə məlumat
Təsvir:
- Mürəkkəb data pipeline-ların qurulması və data modeling layihələrinə rəhbərlik etmək.
- Müxtəlif növ data struktura malik bazalarla təkmilləşmiş səviyyədə işləmə qabiliyyəti.
- Real rejimdə data proses və modellərinin işlənib hazırlanması.
- Komanda üzvlərinə mentorluq etmək; texniki təlimat vermək.
- Ölçəklənən məlumat arxitekturaları üçün memarlarla əməkdaşlıq etmək.
- Yenilənən texnologiya tətbiqlərinə uyum qabiliyyəti.
- Təkmilləşdirilmiş məlumatların emalı və modelləşdirilməsi üçün yeni texnologiyaların tətbiqi.
Tələblər:
- Təkmilləşmiş səviyyədə SQL/PLSQL, Python , Spark
- Məlumatların modelləşdirilməsi (Snowflake, Star, Data Vault)
- Data Lakehouse (Databricks, Apache Iceberg, Delta Lakes)
- Big Data texnologiyaları (Apache Spark, Debezium, Apache Pulsar/Kafka)
- Məlumatların idarə edilməsi alətləri (Apache Atlas, Open Lineage)