HDFS'te dosyayı yaz, oku, kopyala ve yönet
HDFS üzerinde dosyalarla çalışmayı öğreten temel seviye eğitim: NameNode/DataNode mimarisi, hdfs dfs komutlarıyla dosya yönetimi, izinler, Avro/Parquet formatları, sıkıştırma kodekleri, küçük dosya sorunu ve fsck ile sağlık kontrolü.
HDFS komutları, blok/replikasyon mantığı ve dosya işlemleri
Bu temel seviye eğitim, Hadoop Distributed File System (HDFS) üzerinde dosyalarla çalışmayı uygulamalı öğretir. HDFS mimarisi (NameNode, DataNode), blok boyutu ve replikasyon; hdfs dfs komutlarıyla put/get/cp/mv/rm/ls, dizin yönetimi, dosya izinleri ve sahiplik; dosyanın bloklara bölünüp DataNode'lara dağıtılması işlenir. Ayrıca küçük dosya sorunu, sıkıştırma kodekleri, SequenceFile/Avro/Parquet formatları, fsck ile sağlık kontrolü ve WebHDFS ile erişim ele alınır. Katılımcı, HDFS'e veri yükleyip güvenle yönetebilir.
2 Gün. Her gün dört modül; katılımcılar HDFS temel komutlarından format ve sağlık yönetimine ilerler.
Temel Seviye — HDFS üzerinde dosya yönetimi, komut satırı işlemleri ve dosyaların dağıtık saklanma mantığının ele alınması.
Katılımcılar gerçek bir HDFS üzerinde komut satırıyla dosya yükleyip yöneterek ve sağlık kontrolü yaparak öğrenir.
hdfs dfs komutlarıyla dosyaları güvenle yönetirsiniz.
Dosyaların bloklara bölünüp replike edilmesini kavrarsınız.
fsck ile dosya ve blok sağlığını denetlersiniz.
Eğitimden verim almak için faydalı olacak bilgi ve ortam gereksinimleri
Temel Linux komut satırına aşinalık beklenir.
Dizin, dosya ve izin kavramlarına aşinalık faydalıdır.
Hadoop'un ne olduğuna dair genel farkındalık yararlıdır.
Çalışan bir HDFS barındıran Hadoop sandbox veya kümeye erişim.
Programın gün gün akışı aşağıdadır. Bir güne tıklayarak o günün modüllerini ve içeriklerini görebilirsiniz.
Program sonunda katılımcılar:
NameNode, DataNode ve blok/replikasyon mantığını açıklarsınız.
hdfs dfs ile dosya yükler, okur ve listelersiniz.
Kopyalama, taşıma ve silme işlemlerini güvenle yaparsınız.
Dosya izni ve sahipliğini doğru ayarlarsınız.
SequenceFile, Avro ve Parquet arasında seçim yaparsınız.
Bölünebilir kodeklerle depolama ve hız dengesi kurarsınız.
Küçük dosya sorununu tanır ve birleştirme uygularsınız.
fsck ve balancer ile HDFS sağlığını denetlersiniz.
Bu eğitim Digital Vizyon Akademi Başarı Sertifikası ile tamamlanır.
Eğitim başında “Ön Test”, bitiminde “Son Test” uygulanarak gelişim ölçümlenir. Değerlendirme formunu dolduran katılımcılar sertifikalarını alır. Sertifikanızın geçerliliğini Sertifika Sorgulama sayfasından doğrulayabilirsiniz.
APMG EBDP çerçevesiyle büyük veri stratejisi, veri bilimi süreci, mimari seçimi, yönetişim ve etik konularını vaka temelli öğrenin.
Detayları Gör →
HDFS, YARN, MapReduce ve Spark'tan Hive, Sqoop ve Kafka'ya Hadoop ekosistemini gerçek kümede uçtan uca öğrenin. İleri seviye büyük veri eğitimi.
Detayları Gör →
Büyük verinin 5V özelliklerinden dağıtık depolama, batch/stream işleme ve Hadoop/Spark ekosistemine temel seviye kapsamlı giriş. DVA büyük veri eğitimi.
Detayları Gör →
Büyük veri yaşam döngüsünü alım, depolama, dönüşüm, kalite, metadata ve yönetişim süreçleriyle uçtan uca yönetin. Orta seviye DVA eğitimi.
Detayları Gör →
Google Colab'da PySpark kurup DataFrame, Spark SQL ve pencere fonksiyonlarıyla büyük veri analizi yapın ve sonuçları görselleştirin. Orta seviye eğitim.
Detayları Gör →