Kafka'nın depolama ve güvenilirlik katmanına inin
Log segment/retention/compaction, tiered storage, ISR dayanıklılık garantileri ve Kafka Connect/Schema Registry/MirrorMaker 2 ekosistemini derinlemesine öğreten ileri eğitim.
Kafka depolama iç yapısı, dayanıklılık ve ekosistem
Bu eğitim, Kafka'nın depolama iç yapısını, dayanıklılık garantilerini ve ekosistem araçlarını derinlemesine öğretir. Log segment, index, retention, log compaction ve tiered storage; ISR, min.insync.replicas, acks ve unclean leader election ile dayanıklılık işlenir. Kafka Connect ile veri entegrasyonu, Schema Registry ile şema yönetimi, MirrorMaker 2 ile çoklu küme replikasyonu uygulamalı ele alınır. Delivery semantiği, idempotence ve exactly-once ekosistem genelinde gösterilir.
3 Gün. Her gün dört modül; depolama ve ekosistem araçları yapılandırma lableri.
İleri Seviye — Kafka depolama iç yapısı, dayanıklılık garantileri ve ekosistem araçlarını (Connect, Registry, MirrorMaker) kapsar.
Log dizinlerini, compaction ve Connect/Registry/MirrorMaker davranışını canlı inceleyerek öğrenilir.
Log segment, index ve compaction'ı anlayıp retention stratejisini bilinçli kurarsınız.
ISR ve acks ayarlarıyla veri kaybı riskini matematiksel olarak kontrol edersiniz.
Connect, Registry ve MirrorMaker ile Kafka'yı tam bir platforma dönüştürürsünüz.
Eğitimden verim almak için faydalı olacak bilgi ve ortam gereksinimleri
Topic, partition, producer/consumer kavramları gerekir.
Dosya sistemi ve log inceleme deneyimi beklenir.
Avro/JSON formatlarına aşinalık faydalıdır.
Kafka, Connect ve Schema Registry çalıştıran bir ortam gerekir.
Programın gün gün akışı aşağıdadır. Bir güne tıklayarak o günün modüllerini ve içeriklerini görebilirsiniz.
Program sonunda katılımcılar:
Segment, index ve retention yapısını derinlemesine açıklarsınız.
Log compaction ile changelog senaryolarını doğru kurarsınız.
ISR ve replica yerleşimiyle dayanıklılığı yönetirsiniz.
acks ve min.insync.replicas ile veri kaybı riskini kontrol edersiniz.
Kafka Connect ile veri entegrasyonu kurarsınız.
Schema Registry ile şema evrimini yönetirsiniz.
Çoklu küme replikasyonu ve felaket kurtarma kurarsınız.
Ekosistemi uçtan uca bir akış platformuna dönüştürürsünüz.
Bu eğitim Digital Vizyon Akademi Başarı Sertifikası ile tamamlanır.
Eğitim başında “Ön Test”, bitiminde “Son Test” uygulanarak gelişim ölçümlenir. Değerlendirme formunu dolduran katılımcılar sertifikalarını alır. Sertifikanızın geçerliliğini Sertifika Sorgulama sayfasından doğrulayabilirsiniz.
ksqlDB ile SQL tabanlı akış işleme ve Kafka Connect ile CDC/JDBC/S3 entegrasyonunu birleştirin; uçtan uca gerçek zamanlı veri hattı tasarlayın.
Detayları Gör →
Apache Hive ile managed/external tablolar kurun, HDFS'ten veri yükleyin, partitioning ve bucketing uygulayın, HiveQL ile JOIN ve pencere fonksiyonları yazın.
Detayları Gör →
Büyük veri platformlarını işletin: YARN kaynak yönetimi, Airflow/Oozie orkestrasyon, veri yönetişimi, Kerberos/Ranger güvenlik, izleme ve maliyet optimizasyonu.
Detayları Gör →
Azure HDInsight ile yönetilen Hadoop/Spark/Hive kümeleri kurun: ADLS Gen2 entegrasyonu, iş çalıştırma, Ambari yönetimi, autoscale ve güvenlik.
Detayları Gör →
Apache Flink işlerini üretimde yönetin: durum yönetimi, RocksDB backend, checkpoint/savepoint, exactly-once, Kubernetes/YARN dağıtım, backpressure ve rescaling.
Detayları Gör →