Hadoop ve MapReduce dünyasına ilk adım
Hadoop ve MapReduce'a sıfırdan giriş: büyük veri 3V, HDFS, YARN, map-shuffle-reduce akışı, ilk WordCount uygulaması ve ekosistem araçlarına genel bakış sunan başlangıç eğitimi.
Hadoop ve MapReduce'u sıfırdan tanıtan giriş eğitimi
Bu eğitim, Hadoop ekosistemine ve MapReduce programlama modeline sıfırdan giriş yapmak isteyenler içindir. Büyük verinin 3V tanımı, Hadoop'un dağıtık mimarisi, HDFS'in blok ve replikasyon mantığı, YARN'ın kaynak yönetimi, MapReduce'un map-shuffle-reduce akışı, ilk WordCount uygulaması ve ekosistem bileşenlerine (Hive, Pig, Spark) genel bakış gibi somut konuları kapsar. Katılımcı Hadoop'un neden var olduğunu kavrar ve ilk dağıtık işini uygulamalı olarak çalıştırır.
2 Gün. Her gün dört modül; her modül kısa anlatım ve Hadoop üzerinde uygulamalı lab içerir.
Başlangıç Seviye — Hadoop ekosistemi ve MapReduce programlama modeline hızlı ve uygulamalı giriş.
Tek düğümlü Hadoop ortamında HDFS komutları ve ilk MapReduce işini çalıştırarak uygulamalı giriş.
Hadoop'un tüm temel parçalarını kısa sürede uygulamalı olarak kavrarsınız.
HDFS, YARN, MapReduce ve üst araçların birbiriyle ilişkisini netleştirirsiniz.
İlk dağıtık işinizi kendi elinizle çalıştırarak öğrenirsiniz.
Eğitimden verim almak için faydalı olacak bilgi ve ortam gereksinimleri
Dosya sistemi ve komut satırı kavramlarına aşinalık yeterlidir.
Temel Java veya herhangi bir dilde programlama ilgisi faydalıdır.
Basit kabuk komutlarını kullanabilmek avantaj sağlar.
Tek düğümlü Hadoop kurulu bir sandbox veya makine önerilir.
Programın gün gün akışı aşağıdadır. Bir güne tıklayarak o günün modüllerini ve içeriklerini görebilirsiniz.
Program sonunda katılımcılar:
Büyük verinin 3V tanımını ve Hadoop'un neden gerektiğini açıklayabilirsiniz.
HDFS'in blok ve replikasyon mantığını kavrayıp komutları kullanabilirsiniz.
YARN'ın kaynak yönetimi rolünü açıklayabilirsiniz.
Map-shuffle-reduce akışını anlatabilirsiniz.
İlk MapReduce işinizi çalıştırıp sonucu inceleyebilirsiniz.
Hive, Pig, Spark ve HBase'in rollerini ayırt edebilirsiniz.
Hadoop web arayüzleri ve loglarında gezinebilirsiniz.
Büyük veride ilerleme için sonraki adımları planlayabilirsiniz.
Bu eğitim Digital Vizyon Akademi Başarı Sertifikası ile tamamlanır.
Eğitim başında “Ön Test”, bitiminde “Son Test” uygulanarak gelişim ölçümlenir. Değerlendirme formunu dolduran katılımcılar sertifikalarını alır. Sertifikanızın geçerliliğini Sertifika Sorgulama sayfasından doğrulayabilirsiniz.
İleri Hadoop/Spark ayarı, YARN kuyrukları, Spark shuffle/skew/AQE tuning ve Hive/Impala/Trino ile SQL-on-Hadoop optimizasyonunu öğrenin.
Detayları Gör →
Kafka ve Spark Structured Streaming ile exactly-once, watermark, stateful join, state store ve üretim operasyonunu uzman düzeyde öğrenin.
Detayları Gör →
İleri MapReduce: özel partitioner, combiner, secondary sort, map/reduce-side join, counter ve performans ayarını Java ile uygulamalı öğrenin.
Detayları Gör →
Hive/Spark SQL ve DataFrame ile büyük veriyi sorgulama, window analitiği, profilleme, optimizasyon ve dışa aktarmayı uygulamalı öğrenin.
Detayları Gör →
Apache Hadoop eğitimi: HDFS, MapReduce, YARN ve Hive/Sqoop/HBase ekosistemiyle dağıtık depolama ve işlemeyi uygulamalı öğrenin.
Detayları Gör →