Cloud Architect Veri Hareketi ve Metrikler Eğitimi

Eğitim Hakkında

Google Cloud veri aktarım araçları, akış boru hatları ve izleme metrikleri

Bu eğitim, Google Cloud üzerinde veri hareketini ve bunun ölçülmesini birlikte ele alır. Storage Transfer Service, Transfer Appliance, Datastream ve Pub/Sub ile veri aktarımı, Dataflow ile akış ve toplu işleme, BigQuery ile analiz; ayrıca Cloud Monitoring metrikleri, özel metrik, MQL ve PromQL, log-based metrics, log sink yönlendirme ve boru hattı sağlığını izleme uygulamalarıyla işlenir.

Süre ve Format

2 Gün. Her gün dört modül; her modülde altı konu başlığı, boru hattı laboratuvarı, metrik panosu çalışması ve mimari tartışma.

Seviye

İleri Seviye — Google Cloud veri aktarım araçları, akış boru hatları ve izleme metrikleri

Öğrenme Metodu

Pub/Sub ve Dataflow ile örnek akış kurulur, aynı boru hattı Cloud Monitoring panolarıyla ölçülür.

Neden Bu Eğitim?

🎯Konuya Odaklı İçerik

Veri hareketi ve izleme birlikte işlenir; böylece boru hattı kurmak kadar ölçmek de öğrenilir.

🛠️Uygulamalı Çalışma

Uçtan uca akış laboratuvarında hata, gecikme ve verim metrikleri canlı izlenir.

📈Kariyer ve Proje Değeri

Veri platformlarında güvenilirlik sağlamak, veri mühendisliği rollerinde güçlü bir fark yaratır.

Anahtar Konular

Cloud Architect Veri Hareketi ve Metrikler eğitimicloud architect veri hareketi ve metrikler kursuStorage Transfer ServiceDatastreamDataflowPub/SubCloud Monitoring metriklerilog sinkGCP veri aktarımı

“Ölçülmeyen veri akışı, güvenilmeyen veri akışıdır.”

Ön Koşullar

Eğitimden verim almak için faydalı olacak bilgi ve ortam gereksinimleri

1

SQL Bilgisi

Temel SELECT ve JOIN sorguları yazabilmek beklenir.

2

Veri Kavramları

Toplu ve akış işleme arasındaki farka genel aşinalık yararlıdır.

3

Laboratuvar Ortamı

Tarayıcı, SSH/terminal istemcisi ve internet erişimi olan bir bilgisayar yeterlidir; uygulamalar için gerekli bulut ortamı eğitim sırasında yönlendirilir.

4

Çalışma Disiplini

Her gün sonunda ilgili dokümantasyon bölümlerinin gözden geçirilmesi ve laboratuvarların tekrarlanması öğrenmeyi belirgin biçimde pekiştirir.

Eğitim İçeriği

Programın gün gün akışı aşağıdadır. Bir güne tıklayarak o günün modüllerini ve içeriklerini görebilirsiniz.

Günün hedefiKatılımcı gün sonunda veri hacmine ve kaynağa göre aktarım yöntemi seçip temel akış boru hattı kurabilir.

Modül 1

Toplu Veri Aktarımı

Storage Transfer Service ile S3 ve şirket içi kopyalama
Transfer Appliance kapasitesi ve süreç
gcloud storage rsync ve paralel yükleme
Bant genişliği ve süre hesabı
Bütünlük doğrulama (checksum)
Aktarım güvenliği ve IAM

Modül 2

Değişiklik Veri Yakalama

Datastream kaynak ve hedef profilleri
MySQL, PostgreSQL ve Oracle desteği
BigQuery ve Cloud Storage hedefleri
Backfill ve CDC birlikte çalışma
Gecikme izleme
Şema değişikliği yönetimi

Modül 3

Pub/Sub

Topic, subscription ve ack süresi
Pull ve push abonelik farkı
Ordering key ve exactly-once teslim
Dead-letter topic
Schema ve mesaj saklama
Pub/Sub Lite ile Kafka karşılaştırması

Modül 4

Dataflow ile İşleme

Apache Beam PCollection ve dönüşümler
Pencereleme ve filigran (watermark)
Hazır Dataflow şablonları
Otomatik ölçekleme ve Flex şablon
BigQuery e akış yazma
Hata ve yeniden deneme yönetimi

Günün hedefiKatılımcı gün sonunda veri boru hattının sağlığını metrik, log ve SLO ile izleyebilir.

Modül 1

Cloud Monitoring Metrikleri

Sistem, agent ve özel metrik türleri
Metric descriptor ve etiketler
MQL ve PromQL sorguları
Panolar ve widget yapılandırma
Metrics scope ile çok proje izleme
Örnekleme ve saklama süreleri

Modül 2

Log Yönetimi

Log Router ve sink türleri
BigQuery ve Cloud Storage hedefleri
Log-based metrics
Exclusion filtreleri ile maliyet
Aggregated sink ve organization düzeyi
Log Analytics sorguları

Modül 3

Uyarı ve SLO

Alerting politikaları ve koşullar
Bildirim kanalları
Veri tazeliği ve gecikme SLO su
Pub/Sub backlog ve oldest unacked age
Dataflow system lag izleme
Uyarı gürültüsü azaltma

Modül 4

Uçtan Uca Laboratuvar

Pub/Sub, Dataflow ve BigQuery akışı kurma
Yapay hata enjeksiyonu
Backlog artışını izleme
Dead-letter incelemesi
Pano ve uyarı doğrulaması
Mimari gözden geçirme

Eğitim Kazanımları

Program sonunda katılımcılar:

✅

Aktarım Aracı Seçimi

Veri hacmine göre doğru aktarım aracını seçebilirsiniz.

☁️

Datastream Kurulumu

Veritabanı değişikliklerini BigQuery e akıtabilirsiniz.

🔧

Pub/Sub Tasarımı

Konu, abonelik ve teslim garantilerini yapılandırabilirsiniz.

📊

Dataflow Boru Hattı

Apache Beam şablonlarıyla akış işleme yapabilirsiniz.

🛡️

Özel Metrik

Uygulamadan özel metrik yazıp panoda gösterebilirsiniz.

🧩

Log Yönlendirme

Log sink ile BigQuery ve Storage a log aktarabilirsiniz.

🚀

SLO İzleme

Gecikme ve tazelik SLO ları tanımlayabilirsiniz.

🧪

Hata Yönetimi

Dead-letter ve yeniden deneme desenleri uygulayabilirsiniz.

Kimler İçin Uygundur?

Veri mühendisleri
bulut mimarları
operasyon ekipleri
veri platformu tasarlayan teknik profesyoneller için uygundur

Sıkça Sorulan Sorular

Bu eğitim kimler için uygundur?

Veri mühendisleri, bulut mimarları, operasyon ekipleri ve veri platformu tasarlayan teknik profesyoneller için uygundur.

Cloud Architect Veri Hareketi ve Metrikler eğitimi kaç gün sürer ve nasıl işlenir?

Eğitim 2 gün sürer. Günlük başlıklar: Veri Hareketi, Metrikler ve Gözlemlenebilirlik. Pub/Sub ve Dataflow ile örnek akış kurulur, aynı boru hattı Cloud Monitoring panolarıyla ölçülür.

Hangi aktarım aracı ne zaman seçilir?

Hacim ve ağ hızına göre STS, Transfer Appliance, Datastream veya Pub/Sub arasındaki seçim süre ve maliyet hesabıyla gösterilir.

Sınav hazırlığı içeriyor mu?

İlgili sınav alanlarını kapsar; sınav başvurusu ve ücreti ilgili kuruma aittir.

Eğitim sonunda sertifika verilir mi?

Eğitimi tamamlayan katılımcılar Digital Vizyon Akademi Katılım ve Başarı Sertifikası alır. Eğitim ilgili resmi sınava hazırlık içeriği taşısa da sınavın kendisini DVA vermez; sınav başvurusu ve ücreti ilgili kuruma aittir.

Sertifikalandırma

Bu eğitim Digital Vizyon Akademi Başarı Sertifikası ile tamamlanır.

Eğitim başında “Ön Test”, bitiminde “Son Test” uygulanarak gelişim ölçümlenir. Değerlendirme formunu dolduran katılımcılar sertifikalarını alır. Sertifikanızın geçerliliğini Sertifika Sorgulama sayfasından doğrulayabilirsiniz.

Örnek Sertifika

GOOGLE PROFESSIONAL CLOUD ARCHITECT: DATA MOVEMENT & METRICS EĞİTİMİ