Data Mühəndisi

Əsas vəzifə öhdəlikləri

• Mövcud Microsoft SQL Server mühitinin, o cümlədən verilənlər bazalarının, sxemlərin, saxlanılan prosedurların, asılılıqların, performans problemlərinin və sistem inteqrasiyalarının təhlili və qiymətləndirilməsi.
• Məlumatların bütövlüyünü, biznes proseslərinin fasiləsizliyini, optimal performansı və əməliyyat fəaliyyətinə minimal təsiri təmin etməklə Microsoft SQL Server-dən PostgreSQL-ə miqrasiyanın layihələndirilməsi və idarə edilməsi.
• Apache Iceberg və ya Delta Lake kimi müasir cədvəl formatlarından və məlumat saxlama texnologiyalarından istifadə etməklə Amazon S3 üzərində miqyaslana bilən Lakehouse arxitekturasının layihələndirilməsi və tətbiqi.
• SQL və NoSQL verilənlər bazalarından, xarici API-lərdən və digər korporativ məlumat mənbələrindən məlumatların etibarlı şəkildə toplanması və inteqrasiyası üçün məlumat axınlarının hazırlanması və dəstəklənməsi.
• Təşkilat üzrə məlumatların saxlanması, emalı, inteqrasiyası və istifadəsi üçün arxitektura standartlarının müəyyən edilməsi və tətbiqi.

• Microsoft SQL Server üzrə güclü praktiki biliklər, o cümlədən verilənlər bazalarının arxitekturası, sxemlərin layihələndirilməsi, saxlanılan prosedurlar, sorğuların optimallaşdırılması, performansın tənzimlənməsi, asılılıqların təhlili və sistem inteqrasiyaları sahəsində təcrübə.
• Microsoft SQL Server-dən PostgreSQL-ə miqrasiyanın planlaşdırılması və həyata keçirilməsi üzrə təsdiqlənmiş təcrübə, o cümlədən sxemlərin çevrilməsi, uyğunluğun qiymətləndirilməsi, məlumatların yoxlanılması, keçid planının hazırlanması və geri dönüş strategiyalarının müəyyən edilməsi.
• Amazon S3 üzərində miqyaslana bilən Lakehouse arxitekturalarının layihələndirilməsi və tətbiqi üzrə praktiki təcrübə.
• Apache Iceberg və ya Delta Lake kimi müasir Lakehouse cədvəl formatları və məlumat saxlama texnologiyaları üzrə biliklər.
• Məlumatların emalı, proseslərin avtomatlaşdırılması və məlumat axınlarının hazırlanması üçün Python üzrə praktiki biliklər.
• Paylanmış məlumat emalı və böyük həcmli məlumatların transformasiyası üçün zəruri biliklər.
• Məlumat axınlarının orkestrasiya edilməsi, planlaşdırılması və monitorinqi üçün Apache Airflow ilə iş təcrübəsi.
• SQL və NoSQL verilənlər bazalarından, xarici API-lərdən və digər korporativ məlumat mənbələrindən məlumatların toplanması və inteqrasiyası üçün məlumat axınlarının hazırlanması və dəstəklənməsi üzrə təcrübə.
• Məlumat arxitekturası, məlumatların modelləşdirilməsi, inteqrasiyası və emalı prinsiplərini dərindən anlamaq.
• Məlumatların bütövlüyünü, miqyaslana bilməsini, performansını, etibarlılığını və texniki xidmətin rahatlığını təmin edən arxitektura standartlarını müəyyən etmək və tətbiq etmək bacarığı.
• Verilənlər bazalarının miqrasiyası və məlumat platformalarının modernləşdirilməsi zamanı performans problemlərinin müəyyən edilməsi, aradan qaldırılması və biznes proseslərinin fasiləsizliyinin təmin edilməsi üzrə təcrübə.
• Əsaslandırılmış arxitektura qərarları qəbul etmək və texniki icra prosesinə müstəqil rəhbərlik etmək bacarığı.