Fabric'te karmaşık hatları ustaca yönetin
Dinamik ifade, metadata-driven toplu ingest, ForEach ve If/Switch/Until kontrol akışı, retry/idempotency, high-watermark ve CI/CD ile Fabric'te karmaşık data pipeline tasarımı eğitimi.
Fabric'te gelişmiş ve karmaşık veri hatları
Bu eğitim, Microsoft Fabric Data Factory'de karmaşık data pipeline'lar tasarlamayı öğretir. Dinamik içerik ve ifadeler (@pipeline, @activity), parametre/değişken ileri kullanımı, Lookup ile metadata-driven ingest ve ForEach ile toplu kopyalama işlenir. İç içe (invoke) pipeline, If/Switch ile dallanma, Until döngüsü, hata yolu ve retry stratejileri, idempotent yük ve kısmi başarısızlık yönetimi ele alınır. Notebook ve Dataflow etkinliği orkestrasyonu, parametreli çalıştırma, izleme/uyarı, performans (paralel ForEach) ve git/deployment pipeline ile CI/CD uygulamalı gösterilir.
3 Gün. Her gün dört modül; metadata-driven ve hata dayanıklı pipeline lableri.
İleri Seviye — Fabric'te karmaşık data pipeline'lar; dinamik parametre, metadata-driven ingest, kontrol akışı ve hata dayanıklılığını kapsar.
Bir workspace'te metadata tablosundan sürülen, hata dayanıklı ve parametrik pipeline'lar kurarak uygulanır.
Tek bir parametrik hatla onlarca tabloyu metadata'dan sürerek yönetirsiniz.
Retry, hata yolu ve idempotency ile üretimde güvenilir hatlar kurarsınız.
Git ve deployment pipeline ile hatları ortamlar arası taşırsınız.
Eğitimden verim almak için faydalı olacak bilgi ve ortam gereksinimleri
Copy activity ve basit pipeline deneyimi gerekir.
Dinamik içerik/ifade kullanımına aşinalık faydalıdır.
Bir Fabric capacity/trial erişimi gerekir.
ETL/ELT kavramlarına aşinalık beklenir.
Programın gün gün akışı aşağıdadır. Bir güne tıklayarak o günün modüllerini ve içeriklerini görebilirsiniz.
Program sonunda katılımcılar:
@pipeline/@activity ifadeleriyle dinamik hatlar kurarsınız.
Kontrol tablosundan sürülen toplu ingest tasarlarsınız.
Paralel/sıralı ForEach ile toplu kopyalama yaparsınız.
If/Switch ve Until ile karmaşık kontrol akışı kurarsınız.
Retry, hata yolu ve idempotency ile güvenilir hatlar yaparsınız.
High-watermark ile güvenli artımlı yük uygularsınız.
Notebook/Dataflow'u modüler biçimde orkestre edersiniz.
Git ve deployment pipeline ile hatları taşır ve sürümlersiniz.
Bu eğitim Digital Vizyon Akademi Başarı Sertifikası ile tamamlanır.
Eğitim başında “Ön Test”, bitiminde “Son Test” uygulanarak gelişim ölçümlenir. Değerlendirme formunu dolduran katılımcılar sertifikalarını alır. Sertifikanızın geçerliliğini Sertifika Sorgulama sayfasından doğrulayabilirsiniz.
Snowflake'te yarı yapılandırılmış veri: VARIANT ile JSON/XML yükleme, path notasyonu, cast, LATERAL FLATTEN ve XMLGET ile sorgulamayı öğrenin.
Detayları Gör →GitHub Codespaces, Gitpod ve docker-compose ile tarayıcı tabanlı ortamda Apache Airflow 2.x kurulumu, ilk DAG yazımı ve çalıştırma eğitimi.
Detayları Gör →Snowflake üç katmanlı mimari eğitimi: mikro-bölümler, sanal ambarlar, clustering, result/warehouse cache ve Query Profile ile performans ilişkisi.
Detayları Gör →Snowflake'te Apache Iceberg tabloları, external tablolar ve materialized/secure view'larla veri gölü performansını optimize etme eğitimi.
Detayları Gör →Snowflake Query Acceleration Service, result/metadata/warehouse cache ve search optimization ile sorgu gecikmesini düşürme ve performans eğitimi.
Detayları Gör →