Modern veri mimarilerinde kaliteyi güvenceye alın
Medallion lakehouse, dbt ELT, Kafka/Spark streaming ve data contract yaklaşımlarında veri doğrulama, gözlemlenebilirlik ve CI test otomasyonunu öğreten ileri eğitim.
Modern veri platformları için test stratejisi
Bu eğitim ETL/ELT testini modern veri mimarilerine uyarlar. Lakehouse (Delta/Iceberg), ELT dönüşümleri (dbt), streaming (Kafka/Spark Structured Streaming) ve data mesh/data contract yaklaşımlarında test stratejisi işlenir. dbt test ve assertion, schema registry uyum testi, medallion (bronze/silver/gold) katman doğrulama, exactly-once ve idempotency testi, geç gelen veri ve watermark senaryoları ele alınır. Data observability, freshness ve volume anomali tespiti, sözleşme (contract) ihlali yakalama ve CI entegrasyonu uygulamalı gösterilir.
3 Gün. Her gün dört modül; dbt, Delta ve streaming üzerinde test yazma labler içerir.
İleri Seviye — Lakehouse, ELT, streaming ve data mesh mimarilerinde veri testi ve kalite güvencesini kapsar.
Medallion mimarili bir lakehouse üzerinde dbt ve streaming testleri yazarak öğrenilir.
Delta/Iceberg katmanlarında şema ve veri kalitesini doğrularsınız.
Sözleşme ihlallerini erkenden yakalayan testler kurarsınız.
Exactly-once ve geç veri senaryolarını güvenle test edersiniz.
Eğitimden verim almak için faydalı olacak bilgi ve ortam gereksinimleri
ELT akışlarına ve dönüşüm katmanlarına aşinalık beklenir.
Analitik SQL ve dbt model mantığı faydalıdır.
Spark/Databricks veya Snowflake benzeri bir ortam faydalıdır.
dbt ve bir lakehouse/warehouse erişimi olan ortam gerekir.
Programın gün gün akışı aşağıdadır. Bir güne tıklayarak o günün modüllerini ve içeriklerini görebilirsiniz.
Program sonunda katılımcılar:
Bronze/silver/gold katmanlarını katmanlar arası doğrularsınız.
Delta/Iceberg şema evrimi ve MERGE sonuçlarını test edersiniz.
dbt generic/singular testleriyle ELT'yi güvenceye alırsınız.
Sözleşme ihlallerini erkenden yakalayıp pipeline'ı durdurursunuz.
Exactly-once, watermark ve geç veri senaryolarını test edersiniz.
Stream-batch tutarlılığını ve eksik mesajları doğrularsınız.
Freshness, volume ve dağılım anomalilerini izlersiniz.
dbt slim CI ve kalite kapılarını kurarsınız.
Bu eğitim Digital Vizyon Akademi Başarı Sertifikası ile tamamlanır.
Eğitim başında “Ön Test”, bitiminde “Son Test” uygulanarak gelişim ölçümlenir. Değerlendirme formunu dolduran katılımcılar sertifikalarını alır. Sertifikanızın geçerliliğini Sertifika Sorgulama sayfasından doğrulayabilirsiniz.
Snowflake üç katmanlı mimari eğitimi: mikro-bölümler, sanal ambarlar, clustering, result/warehouse cache ve Query Profile ile performans ilişkisi.
Detayları Gör →
Snowflake'te Apache Iceberg tabloları, external tablolar ve materialized/secure view'larla veri gölü performansını optimize etme eğitimi.
Detayları Gör →
Snowflake Query Acceleration Service, result/metadata/warehouse cache ve search optimization ile sorgu gecikmesini düşürme ve performans eğitimi.
Detayları Gör →
Snowflake ambar boyutlandırma, multi-cluster autoscaling, scaling policy, eşzamanlılık kuyruğu ve kredi maliyeti dengesini öğreten performans eğitimi.
Detayları Gör →
Snowflake hesap organizasyonu, RBAC rol hiyerarşisi, resource monitor, maliyet izleme ve ACCOUNT_USAGE ile kaynak yönetimi eğitimi.
Detayları Gör →