ETL hatlarını baştan test etmeyi öğrenin
ETL test türleri, STTM'den senaryo türetme, count reconciliation, dönüşüm kuralı doğrulama ve veri kalitesi kontrollerini SQL ile öğreten temel seviye ETL test eğitimi.
ETL testinin temel kavram ve teknikleri
Bu eğitim, ETL testinin temel kavram ve tekniklerini sıfırdan öğretir. ETL test türleri (metadata, count, data completeness, transformation, data quality), source-to-target mapping (STTM) belgesinin okunması ve test senaryosuna dönüştürülmesi işlenir. Kaynak-hedef satır sayısı reconciliation, elenen/reddedilen kayıt doğrulama, dönüşüm kurallarının (lookup, concat, hesaplama) test edilmesi, null/duplicate/referans bütünlüğü kontrolleri ve temel SQL doğrulama sorguları uygulamalı ele alınır. Test senaryosu/test case yazımı, giriş-çıkış kriterleri ve hata raporlama gösterilir.
2 Gün. Her gün dört modül; STTM okuma ve SQL doğrulama sorgusu yazma lableri.
Temel Seviye — ETL test türleri, source-to-target doğrulama, reconciliation ve veri kalitesi testinin temellerini kapsar.
Örnek bir STTM belgesinden test senaryoları türetip SQL ile doğrulayarak uygulanır.
Hangi testin neyi güvence altına aldığını öğrenerek kapsamlı test planı kurarsınız.
Eşleme belgesini okunabilir test senaryolarına dönüştürmeyi öğrenirsiniz.
Veri ambarına giren verinin doğruluğunu temel kontrollerle güvenceye alırsınız.
Eğitimden verim almak için faydalı olacak bilgi ve ortam gereksinimleri
SELECT, WHERE ve GROUP BY düzeyinde SQL bilgisi gerekir.
Kaynak, staging, hedef akışına temel aşinalık faydalıdır.
Örnek bir ilişkisel veritabanına sorgu erişimi beklenir.
Test senaryosu ve hata (defect) kavramına aşinalık faydalıdır.
Programın gün gün akışı aşağıdadır. Bir güne tıklayarak o günün modüllerini ve içeriklerini görebilirsiniz.
Program sonunda katılımcılar:
ETL test türlerini ayırt eder ve kapsam planı kurarsınız.
Eşleme belgesinden test senaryoları türetirsiniz.
Pozitif/negatif test case'leri ve beklenen sonuçları tanımlarsınız.
Kaynak-hedef sayım mutabakatını SQL ile yaparsınız.
Lookup, concat ve hesaplama kurallarını doğrularsınız.
Null, duplicate ve bütünlük kontrollerini uygularsınız.
Hata kaydı ve pass/fail raporları üretirsiniz.
Test ortamı ve veri gizliliğini doğru kurgularsınız.
Bu eğitim Digital Vizyon Akademi Başarı Sertifikası ile tamamlanır.
Eğitim başında “Ön Test”, bitiminde “Son Test” uygulanarak gelişim ölçümlenir. Değerlendirme formunu dolduran katılımcılar sertifikalarını alır. Sertifikanızın geçerliliğini Sertifika Sorgulama sayfasından doğrulayabilirsiniz.
Snowflake'te COPY INTO location ile veri unload: file format, sıkıştırma, dosya bölme, PARTITION BY ve external stage'e yazmayı uygulamalı öğrenin.
Detayları Gör →Snowflake external stage: storage integration ile S3/Azure/GCS bağlama, COPY yükleme, directory/external table ve Snowpipe ile güvenli entegrasyonu öğrenin.
Detayları Gör →dbt, Airflow ve Great Expectations/Soda ile test edilebilir, gözlemlenebilir ve CI/CD'li ileri veri hatları kurmayı uygulamalı öğrenin.
Detayları Gör →Inmon, Kimball ve Data Vault çerçeveleri, katmanlı mimari, boyutsal/DV modelleme ve bulut ambar uygulamasını uygulamalı öğrenin.
Detayları Gör →Veri ambarı temelleri: OLTP/OLAP, star/snowflake şema, olgu/boyut, grain, SCD tipleri, ETL süreci ve OLAP işlemlerini uygulamalı öğrenin.
Detayları Gör →