Snowflake Iceberg & External Tablo Eğitimi

Eğitim Hakkında

Snowflake dışı depolamada tablo ve view performansı

Bu eğitim, Snowflake'te Iceberg tabloları, external tablolar ve view türlerinin performansına odaklanır. Apache Iceberg tablo formatı, catalog entegrasyonu (Snowflake-managed vs external catalog), external tablolar için partition tanımı ve otomatik yenileme, metadata/directory table kullanımı işlenir. Standart, materialized ve secure view'ların performans etkisi, external tablolarda pruning sınırları ve Iceberg ile Snowflake yerel tablo karşılaştırması uygulamalı ele alınır.

Süre ve Format

2 Gün. Her gün dört modül; Iceberg ve external tablo kurup Query Profile ile performans karşılaştıran labler.

Seviye

Orta Seviye — Snowflake'te Iceberg tabloları, external tablolar ve view türlerini performans açısından kapsar.

Öğrenme Metodu

Katılımcılar örnek Parquet/Iceberg verisi üzerinde external ve Iceberg tablo tanımlayıp sorgu performansını karşılaştırır.

Neden Bu Eğitim?

🧊Iceberg Tabloları

Apache Iceberg formatıyla açık, taşınabilir tablolar kurarsınız.

🗂️External Tablolar

Dış object storage'daki veriyi kopyalamadan sorgularsınız.

👁️View Performansı

Materialized ve secure view'ların performans etkisini öğrenirsiniz.

Anahtar Konular

snowflake icebergiceberg tablolarıexternal table snowflakematerialized viewsecure viewsnowflake performansveri gölüpartition pruningapache iceberg

“Açık tablo formatı özgürlük verir; doğru pruning onu hızlı kılar.”

Ön Koşullar

Eğitimden verim almak için faydalı olacak bilgi ve ortam gereksinimleri

1

Snowflake Temeli

Snowflake tablo ve sorgu temeline hakimiyet gerekir.

2

SQL

DDL ve sorgu yazımında rahat olmak beklenir.

3

Dosya Formatları

Parquet ve Iceberg kavramlarına aşinalık faydalıdır.

4

Object Storage

S3/Blob/GCS ve stage kavramını bilmek önerilir.

Eğitim İçeriği

Programın gün gün akışı aşağıdadır. Bir güne tıklayarak o günün modüllerini ve içeriklerini görebilirsiniz.

Günün hedefiKatılımcı Iceberg ve external tablo tanımlayıp performans farklarını değerlendirebilir.

Modül 1

Iceberg Tabloları

Apache Iceberg tablo formatı
Snowflake-managed catalog
External catalog (Glue, REST)
CREATE ICEBERG TABLE sözdizimi
Metadata ve manifest dosyaları
Iceberg vs yerel Snowflake tablo

Modül 2

External Tablolar

CREATE EXTERNAL TABLE tanımı
Stage ve file format bağı
Partition sütunu (expression)
VALUE ve metadata$filename
AUTO_REFRESH ve event bildirimi
Manual ALTER ... REFRESH

Modül 3

Directory ve Metadata

Directory table ile dosya listeleme
metadata$file_last_modified
External stage içerik tarama
Dosya ekleme algılama
Partition pruning sınırları
Schema evrim desteği

Modül 4

Performans Karşılaştırma

External tabloda pruning davranışı
Parquet istatistik kullanımı
Iceberg manifest ile pruning
Query Profile'da taranan dosya
Yerel tabloya kopyalama kararı
Maliyet ve gecikme dengesi

Günün hedefiKatılımcı view türlerini doğru senaryoda seçip performansı optimize edebilir.

Modül 1

Standart ve Secure View

CREATE VIEW ve mantıksal katman
Secure view ile veri gizleme
Secure view ve optimizer sınırı
RLS/masking ile birlikte kullanım
View bağımlılık izleme
Performans maliyeti

Modül 2

Materialized View

CREATE MATERIALIZED VIEW
Otomatik bakım ve yenileme
Sınırlamalar (join, agg)
Depolama ve maliyet
Query rewrite ile otomatik kullanım
Clustering ile birleşim

Modül 3

External Tablo Üzerinde View

External tablo üstünde view katmanı
Materialized view ile hızlandırma
Yarı yapısal veriyi düzleştirme
Partition kolonu gösterimi
Yenileme gecikmesi
BI aracı erişimi

Modül 4

Seçim ve İyi Uygulamalar

View vs materialized view kararı
Iceberg vs external vs yerel seçim
Pruning'i artıran tasarım
Maliyet izleme (ACCOUNT_USAGE)
Yenileme sıklığı ayarı
Dokümantasyon ve adlandırma

Eğitim Kazanımları

Program sonunda katılımcılar:

✅

Iceberg Tabloları

Apache Iceberg formatıyla açık tablolar tanımlarsınız.

✅

Catalog Entegrasyonu

Managed ve external catalog seçimini yaparsınız.

✅

External Tablolar

Dış storage'daki veriyi partition'larla sorgularsınız.

✅

Otomatik Yenileme

AUTO_REFRESH ile external tabloları güncel tutarsınız.

✅

View Türleri

Standart, secure ve materialized view'ları ayırt edersiniz.

✅

Materialized View

Query rewrite ile tekrar eden sorguları hızlandırırsınız.

✅

Pruning Analizi

Query Profile'da taranan dosya/bölümü değerlendirirsiniz.

✅

Seçim Kararı

Senaryoya göre Iceberg/external/yerel tablo seçersiniz.

Kimler İçin Uygundur?

Veri gölü
açık tablo formatlarıyla çalışan veri mühendisleri ve Snowflake platform ekipleri için uygundur

Sıkça Sorulan Sorular

Bu eğitim kimler için uygundur?

Veri gölü ve açık tablo formatlarıyla çalışan veri mühendisleri ve Snowflake platform ekipleri için uygundur.

Iceberg tablosu ne sağlar?

Açık, taşınabilir tablo formatı ve catalog entegrasyonu ile veriyi tek kopyada paylaşmayı sağlar.

External tablo veriyi kopyalar mı?

Hayır; veri object storage'da kalır, Snowflake metadata ve partition ile sorgular.

Materialized view ne zaman kullanılır?

Pahalı, tekrar eden toplama sorgularında query rewrite ile hızlandırma için kullanılır.

Sertifika veriliyor mu?

Eğitim sonunda Digital Vizyon Akademi Katılım ve Başarı Sertifikası verilir.

Sertifikalandırma

Bu eğitim Digital Vizyon Akademi Başarı Sertifikası ile tamamlanır.

Eğitim başında “Ön Test”, bitiminde “Son Test” uygulanarak gelişim ölçümlenir. Değerlendirme formunu dolduran katılımcılar sertifikalarını alır. Sertifikanızın geçerliliğini Sertifika Sorgulama sayfasından doğrulayabilirsiniz.

Örnek Sertifika

SNOWFLAKE PERFORMANCE: ICEBERG TABLES, EXTERNAL TABLES, AND VIEWS EĞİTİMİ