Azure ile Veri Gölü Uygulaması Eğitimi

Eğitim Hakkında

Azure veri gölünün uygulamalı olarak kurulması ve ambarla bütünleştirilmesi

Eğitim, ADLS Gen2 üzerinde veri gölü kurulumunu uygulamalı gösterir. Hesap ve hiyerarşik ad alanı kurulumu, bronze/silver/gold klasör yapısı, Data Factory ile toplu alım, Event Hubs ile akış alımı, Databricks ve Synapse Spark ile Parquet/Delta dönüşümü, serverless SQL ile keşif, Synapse dedicated pool'a yükleme, ACL ve ağ güvenliği ile izleme adımları laboratuvar akışıyla işlenir.

Süre ve Format

2 Gün. Her gün dört modül; her modülde mimari anlatım, Azure portal laboratuvarı ve kısa senaryo çalışması yer alır.

Seviye

Orta Seviye — ADLS Gen2 üzerinde veri gölünün kurulması, veri alımı, katmanlandırma, dönüştürme ve ambar entegrasyonunu kapsayan uygulamalı eğitim

Öğrenme Metodu

Kurgusal bir perakende şirketinin ham verisi adım adım veri gölüne alınır, dönüştürülür ve ambara yüklenir.

Neden Bu Eğitim?

🛠️Uçtan Uca Kurulum

Hesaptan ambar yüklemesine kadar çalışan bir veri gölü hattı kurarsınız.

🔗Ambar Entegrasyonu

Veri gölü ile Synapse ambarı arasında COPY ve harici tablo bağlantısı kurarsınız.

🧭Katman Disiplini

Ham, temiz ve sunum katmanlarını kalıcı standartlarla yönetirsiniz.

Anahtar Konular

azure veri gölüdata lake implementationADLS Gen2 kurulumbronze silver golddata factory alımsynapse serverlessCOPY INTOazure veri ambarıdelta lakeevent hubs capture

“Veri gölü, düzenle kurulduğunda ambarın en iyi dostudur.”

Ön Koşullar

Eğitimden verim almak için faydalı olacak bilgi ve ortam gereksinimleri

1

SQL bilgisi

T-SQL ile temel sorgu yazabilmek ve ilişkisel veri kavramlarını bilmek beklenir.

2

Azure temelleri

Kaynak grubu, depolama hesabı ve abonelik kavramlarına aşinalık gerekir.

3

Veri kavramları

ETL/ELT, veri ambarı ve veri gölü terimlerine genel hakimiyet faydalıdır.

4

Azure aboneliği

Laboratuvarlar için ücretsiz veya deneme Azure aboneliği kullanılır.

Eğitim İçeriği

Programın gün gün akışı aşağıdadır. Bir güne tıklayarak o günün modüllerini ve içeriklerini görebilirsiniz.

Günün hedefiKatılımcı ADLS Gen2 veri gölünü kurar ve farklı kaynaklardan bronze katmana veri alır.

Modül 1

ADLS Gen2 Kurulumu

Storage account ve hiyerarşik ad alanı etkinleştirme
Container ve klasör yapısı
abfss yolları ve DFS endpoint
Storage Explorer ile gezinme
Replikasyon ve bölge seçimi
Adlandırma standardı

Modül 2

Katman Tasarımı

Bronze, silver, gold sorumlulukları
Tarih bölümleme: yıl/ay/gün
Ham verinin değiştirilmezliği
Şema kaydı ve metaveri
Gelen veri sözleşmesi
Karantina klasörü

Modül 3

Toplu Veri Alımı

Data Factory Copy Activity ile SQL kaynağı
Dosya tabanlı kaynak ve FTP/SFTP
Artımlı alım watermark yaklaşımı
Self-hosted IR ile şirket içi veri
AzCopy ile ilk yükleme
Alım doğrulama sayımları

Modül 4

Akış Verisi Alımı

Event Hubs Capture ile Data Lake'e yazma
Stream Analytics çıktısı olarak ADLS
Dosya adlandırma ve zaman bölümleme
IoT Hub yönlendirme
Küçük dosya yönetimi
Akış alımı izleme

Günün hedefiKatılımcı silver ve gold katmanları üretir, veriyi Synapse ambarına yükler ve gölü güvenceye alır.

Modül 1

Dönüştürme

Databricks ile CSV'den Parquet'e dönüşüm
Temizleme, tür dönüşümü, tekilleştirme
Delta Lake tablosuna yazma
Synapse Spark pool ile alternatif
Veri kalitesi kontrolleri
Gold özet tabloları

Modül 2

Keşif ve Sorgulama

Synapse serverless SQL ile OPENROWSET
Harici tablo ve view
Parquet şema çıkarımı
Maliyet kontrolü
Power BI ile hızlı keşif
Katalog tanımı

Modül 3

Ambara Yükleme

Dedicated SQL pool tablo hazırlığı
COPY INTO ile gold verisi yükleme
CTAS ve harici tablo
Artımlı ambar yüklemesi
Yükleme performansı ve paralellik
Doğrulama ve mutabakat

Modül 4

Güvenlik ve Operasyon

RBAC ve ACL ile klasör yetkilendirme
Private Endpoint ve firewall
Yaşam döngüsü kuralları
Azure Monitor metrik ve uyarıları
Purview ile katalog
Kurulum doğrulama kontrol listesi

Eğitim Kazanımları

Program sonunda katılımcılar:

✅

Gölün kurulumu

ADLS Gen2 hesabı ve klasör standardı oluşturabilirsiniz.

✅

Katmanlama

Bronze, silver, gold katmanlarını sorumluluklarıyla yönetebilirsiniz.

✅

Toplu alım

Data Factory ile SQL ve dosya kaynaklarından veri alabilirsiniz.

✅

Akış alımı

Event Hubs Capture ile akış verisini göle yazabilirsiniz.

✅

Dönüştürme

Databricks ile Parquet ve Delta dönüşümü yapabilirsiniz.

✅

Keşif

Serverless SQL ile göl verisini sorgulayabilirsiniz.

✅

Ambar yükleme

COPY INTO ile gold verisini dedicated pool'a yükleyebilirsiniz.

✅

Güvenlik

ACL, Private Endpoint ve yaşam döngüsüyle gölü koruyabilirsiniz.

Kimler İçin Uygundur?

Veri ambarı geliştiricileri
veri mühendisleri
ambarına veri gölü katmanı eklemek isteyen BT ekipleri için uygundur

Sıkça Sorulan Sorular

Bu eğitim kimler için uygundur?

Veri ambarı geliştiricileri, veri mühendisleri ve ambarına veri gölü katmanı eklemek isteyen BT ekipleri için uygundur.

Bu eğitim uygulama ağırlıklı mı?

Evet; gün boyunca çalışan bir veri gölü hattı laboratuvarla adım adım kurulur.

Yönetim eğitimiyle farkı nedir?

Burada kurulum ve alım yapılır; işletim, bakım ve maliyet yönetimi ayrı bir eğitimde ele alınır.

Akış verisi de var mı?

Evet, Event Hubs Capture ile akış alımı işlenir.

Belge verilir mi?

Digital Vizyon Akademi Katılım ve Başarı Sertifikası verilir.

Sertifikalandırma

Bu eğitim Digital Vizyon Akademi Başarı Sertifikası ile tamamlanır.

Eğitim başında “Ön Test”, bitiminde “Son Test” uygulanarak gelişim ölçümlenir. Değerlendirme formunu dolduran katılımcılar sertifikalarını alır. Sertifikanızın geçerliliğini Sertifika Sorgulama sayfasından doğrulayabilirsiniz.

Örnek Sertifika

DATA WAREHOUSING WITH AZURE: DATA LAKE IMPLEMENTATION USING AZURE EĞİTİMİ