Hadoop cluster'ının iç mimarisini çözün
Hadoop cluster mimarisi: NameNode/DataNode, blok modeli, HDFS yazma/okuma pipeline'ı, veri yerelliği, rack topolojisi, YARN bileşenleri ve cluster boyutlandırma odaklı orta seviye eğitim.
Mimari bileşenler ve veri akışı odaklı eğitim
Bu eğitim, bir Hadoop cluster'ının mimari bileşenlerini ve bunların nasıl birlikte çalıştığını derinlemesine ele alır. NameNode metadata yönetimi, DataNode blok saklama, blok raporlama ve heartbeat mekanizması, HDFS yazma/okuma veri akışı (write pipeline), YARN'da ResourceManager/NodeManager/ApplicationMaster etkileşimi, veri yerelliği, rack topolojisi ve cluster boyutlandırma gibi somut konuları kapsar. Katılımcı 'bir dosya nasıl saklanır, bir iş nasıl koşar' sorularını bileşen düzeyinde yanıtlar.
3 Gün. Her gün dört modül; her modül diyagram anlatımı ve cluster üzerinde gözlem labı içerir.
Orta Seviye — Hadoop cluster'ının mimari bileşenleri, veri akışı ve bileşenler arası etkileşim.
Çalışan bir cluster üzerinde bileşenleri, logları ve web arayüzlerini inceleyerek mimariyi gözlemleyerek öğrenme.
Her bileşenin görevini ve etkileşimini anlayarak sistemi bir bütün olarak görürsünüz.
Dosyanın yazılma ve okunma yolculuğunu adım adım izleyerek darboğazları tanırsınız.
Mimari anlayışla cluster kapasitesini gerçekçi biçimde planlarsınız.
Eğitimden verim almak için faydalı olacak bilgi ve ortam gereksinimleri
HDFS ve MapReduce/YARN kavramlarına giriş düzeyinde aşinalık gerekir.
İstemci-sunucu ve replikasyon kavramlarına aşinalık faydalıdır.
Temel Linux ve log okuma becerisi avantaj sağlar.
Erişilebilir bir Hadoop cluster veya sandbox önerilir.
Programın gün gün akışı aşağıdadır. Bir güne tıklayarak o günün modüllerini ve içeriklerini görebilirsiniz.
Program sonunda katılımcılar:
NameNode/DataNode rollerini ve metadata yönetimini açıklayabilirsiniz.
Blok yerleşimi ve replikasyon politikasını kavrayabilirsiniz.
HDFS write pipeline'ını adım adım anlatabilirsiniz.
Okuma yolunu ve checksum doğrulamasını açıklayabilirsiniz.
Data locality ve rack topolojisinin etkisini değerlendirebilirsiniz.
ResourceManager, NodeManager ve ApplicationMaster etkileşimini açıklayabilirsiniz.
Bir işin cluster üzerinde nasıl koştuğunu izleyebilirsiniz.
İş yüküne göre cluster kapasitesini planlayabilirsiniz.
Bu eğitim Digital Vizyon Akademi Başarı Sertifikası ile tamamlanır.
Eğitim başında “Ön Test”, bitiminde “Son Test” uygulanarak gelişim ölçümlenir. Değerlendirme formunu dolduran katılımcılar sertifikalarını alır. Sertifikanızın geçerliliğini Sertifika Sorgulama sayfasından doğrulayabilirsiniz.
Büyük veri stratejisi, olgunluk değerlendirmesi, kullanım senaryosu önceliklendirme, ROI ve yol haritasıyla danışmanlık yapmayı öğrenin. Orta seviye eğitim.
Detayları Gör →Büyük verinin temel kavramlarını, iş ve teknoloji itici güçlerini ve analitik tekniklerini öğrenin: 5V, veri madenciliği, ML ve görselleştirme. Temel seviye eği
Detayları Gör →Büyük verinin temellerini uygulamalı öğrenin: 5V, HDFS, YARN, MapReduce, Spark, Hive ve Kafka ile dağıtık depolama ve işleme. Temel seviye DVA eğitimi.
Detayları Gör →Hadoop üzerinde katmanlı bir içgörü mimarisi kurun: veri modelleme, Data Vault, entegrasyon, MDM, kalite, Hive/Impala servisi ve yönetişim. İleri seviye eğitim.
Detayları Gör →Büyük veri dönüşümünü vizyondan uygulamaya aşamalı bir yol haritasına dökün: dalga planı, kilometre taşları, bağımlılık, bütçe, risk ve KPI. Orta seviye eğitim.
Detayları Gör →