BigQuery ile büyük veriyi hızlı ve ucuz işleyin
Bu eğitim, BigQuery ile büyük veri çözümü hayata geçirmeyi anlatır: ayrık depolama/hesaplama mimarisi, partitioning ve clustering, Storage Write API ile akış yükleme, Dataflow ve Pub/Sub ile hat kurma, Dataform ile SQL dönüşümleri, BigQuery ML ile model eğiti…
BigQuery mimarisi, ELT hatları, performans ve yönetişim ekseninde büyük veri çözümleri
Bu eğitim, BigQuery ile büyük veri çözümü hayata geçirmeyi anlatır: ayrık depolama/hesaplama mimarisi, partitioning ve clustering, Storage Write API ile akış yükleme, Dataflow ve Pub/Sub ile hat kurma, Dataform ile SQL dönüşümleri, BigQuery ML ile model eğitimi ve policy tag ile sütun düzeyi güvenlik. Sorgu planı okuma ve slot maliyeti yönetimi de uygulamalıdır.
4 Gün. Her gün dört modül; her modülde altı konu başlığı, BigQuery ile büyük veri uygulamaları odaklı uygulamalı laboratuvar ve ekip tartışması.
Orta Seviye — BigQuery Mimarisi, SQL ve Veri Yükleme, Akış İşleme ve Dönüşüm Hatları, Makine Öğrenmesi, Yönetişim ve Raporlama, Ölçek, Maliyet ve İşletim başlıklarını kapsayan BigQuery ile büyük veri uygulamaları eğitimi
Örnek veri setleri üzerinde BigQuery konsolu, bq CLI ve Cloud Shell ile adım adım laboratuvarlar yapılır ve sonuçlar birlikte yorumlanır.
BigQuery, Dataflow ve Pub/Sub gibi servisler gerçek veri setleri üzerinde sorgulanır ve ölçülür.
Taranan bayt, slot ve depolama sınıfı seçimleri maliyet etkisiyle birlikte değerlendirilir.
IAM, policy tag ve satır düzeyi erişim gibi kontroller veri hattına dahil edilir.
Eğitimden verim almak için faydalı olacak bilgi ve ortam gereksinimleri
SELECT, JOIN, GROUP BY ve alt sorgu düzeyinde SQL kullanabilme.
Tablo, şema, ETL ve veri ambarı terimlerine temel aşinalık.
Proje, bölge ve IAM gibi temel bulut kavramlarını bilme.
BigQuery kullanılabilen bir proje veya sağlanan laboratuvar ortamı.
Programın gün gün akışı aşağıdadır. Bir güne tıklayarak o günün modüllerini ve içeriklerini görebilirsiniz.
Program sonunda katılımcılar:
BigQuery Mimarisi ve Veri Setleri konusunda Dremel, Colossus ve Jupiter tabanlı ayrık depolama/hesaplama mimarisi, Dataset, tablo, view ve materialized view kavramları ve Tablo partitioning (zaman, tamsayı aralığı) ve clustering başlıklarını uygulamalı olarak öğrenirsiniz.
BigQuery’ye Veri Yükleme konusunda Batch load job: CSV, Avro, Parquet, ORC ve JSON formatları, Storage Write API ile akış ve exactly-once yazma ve Pub/Sub BigQuery subscription ile doğrudan aktarım başlıklarını uygulamalı olarak öğrenirsiniz.
Pub/Sub ile Olay Akışı konusunda Topic, subscription ve push/pull teslim modelleri, Ack deadline, dead-letter topic ve yeniden deneme politikası ve Şema (Avro/Protobuf) doğrulaması başlıklarını uygulamalı olarak öğrenirsiniz.
Dataform Temelleri konusunda Dataform repository, workspace ve Git bağlantısı, SQLX dosyası yapısı: config bloğu ve ref() fonksiyonu ve dataform.json / workflow_settings.yaml yapılandırması başlıklarını uygulamalı olarak öğrenirsiniz.
BigQuery Güvenlik ve Yönetişim konusunda Dataset ve tablo düzeyinde IAM, Column-level security ve policy tag ve CMEK şifreleme ve VPC Service Controls başlıklarını uygulamalı olarak öğrenirsiniz.
Looker Studio ile Görselleştirme konusunda Veri kaynağı bağlantısı: BigQuery, Sheets ve CSV, Boyut ve metrik kavramları, hesaplanan alanlar ve Filtre kontrolleri, parametreler ve veri harmanlama başlıklarını uygulamalı olarak öğrenirsiniz.
Kaynak ve Fiyat Optimizasyonu konusunda Right-sizing: VM, disk ve Cloud SQL önerileri (Active Assist), Spot VM, autoscaling ve zamanlanmış kapatma ve Cloud Storage lifecycle ve sınıf geçişleri başlıklarını uygulamalı olarak öğrenirsiniz.
Cloud Logging ve Log Analizi konusunda Log Router: sink, exclusion filter ve hedef (BigQuery, GCS, Pub/Sub), Logging query language ile gelişmiş filtreleme ve Log Analytics ve BigQuery bağlantılı veri seti başlıklarını uygulamalı olarak öğrenirsiniz.
Bu eğitim Digital Vizyon Akademi Başarı Sertifikası ile tamamlanır.
Eğitim başında “Ön Test”, bitiminde “Son Test” uygulanarak gelişim ölçümlenir. Değerlendirme formunu dolduran katılımcılar sertifikalarını alır. Sertifikanızın geçerliliğini Sertifika Sorgulama sayfasından doğrulayabilirsiniz.
Serverless App Development: Applications with Google Cloud Functions eğitimi: Cloud Functions (2. Nesil) Temelleri, Cloud Functions Entegrasyonu ve Hata Yönetim
Detayları Gör →
Serverless App Development: Implementation in Google Cloud Platform eğitimi: Cloud Run Servisleri ve Job’ları, Cloud Functions (2. Nesil) Temelleri. 3 gün uygul
Detayları Gör →
Technical Foundations of FinOps on Google Cloud (TFFGC) eğitimi: FinOps Çerçevesi ve Olgunluk Modeli. 2 gün uygulamalı program, DVA Katılım ve Başarı Sertifikas
Detayları Gör →
Technical Foundations of FinOps on Google Cloud eğitimi: FinOps Çerçevesi ve Olgunluk Modeli. 2 gün uygulamalı program, DVA Katılım ve Başarı Sertifikası.
Detayları Gör →
Working with Google Cloud SQL: Advanced Topics in Cloud SQL eğitimi: Cloud SQL Yüksek Erişilebilirlik ve Replikasyon, Cloud SQL Performans Ayarı. 3 gün uygulama
Detayları Gör →