Hive ve Impala ile büyük veriyi analiz et
Cloudera'da veri analistliğini öğreten orta seviye eğitim: Hive/Impala ile tablo tanımı, join ve agregasyon, karmaşık tipler, pencere fonksiyonları, partitioning, CTAS ile dönüştürme, Impala MPP mimarisi, sorgu optimizasyonu ve BI entegrasyonu.
Hive, Impala, veri dönüştürme ve analitik sorgulama
Bu orta seviye eğitim, Cloudera platformunda veri analistinin temel araçları olan Hive ve Impala'yı kullanarak büyük veri sorgulama ve analizini öğretir. HDFS üzerindeki veriye tablo tanımlama, veri tipleri ve dosya formatları (Text, Avro, Parquet) işlenir. HiveQL ve Impala SQL ile filtreleme, join, agregasyon ve pencere fonksiyonları; karmaşık tipler (array, map, struct) ve metin işleme uygulanır. Partitioning, Impala'nın mimarisi ve etkileşimli sorgu avantajı, sorgu optimizasyonu ve istatistik toplama ele alınır. Veri dönüştürme, analitik tablolar ve BI araçlarıyla entegrasyon gösterilir. Katılımcılar gerçek veri setlerinde analitik sorgular yazıp raporlar üretir.
4 Gün. Her gün dört modül; katılımcılar tablo tanımından ileri sorgulama ve raporlamaya ilerler.
Orta Seviye — Cloudera platformunda Hive ve Impala ile veri sorgulama, dönüştürme ve analitik raporlamanın ele alınması.
Katılımcılar Cloudera ortamında Hive ve Impala sorgularını gerçek veri setleri üzerinde çalıştırarak uygulamalı öğrenir.
HDFS verisine tablo tanımlayıp tanıdık SQL ile sorgularsınız.
Impala ile etkileşimli ve hızlı analitik sorgular çalıştırırsınız.
Analitik tablolar ve raporlar için veriyi şekillendirirsiniz.
Eğitimden verim almak için faydalı olacak bilgi ve ortam gereksinimleri
SELECT, JOIN ve GROUP BY içeren SQL yazımına aşinalık beklenir.
HDFS ve dağıtık depolama hakkında temel bilgi faydalıdır.
Metrik ve boyut kavramlarına aşinalık yararlıdır.
Hive ve Impala erişimi olan bir Cloudera ortamı.
Programın gün gün akışı aşağıdadır. Bir güne tıklayarak o günün modüllerini ve içeriklerini görebilirsiniz.
Program sonunda katılımcılar:
HDFS verisine Hive/Impala tabloları tanımlarsınız.
Join ve agregasyonla analitik sorgular yazarsınız.
array, map ve struct verisini sorgularsınız.
Sıralama ve dönemsel analizleri yaparsınız.
CTAS ve INSERT SELECT ile analitik tablolar üretirsiniz.
Impala ile etkileşimli ve hızlı sorgu çalıştırırsınız.
İstatistik ve plan analiziyle sorguları hızlandırırsınız.
Impala'yı BI araçlarına bağlayıp raporlarsınız.
Bu eğitim Digital Vizyon Akademi Başarı Sertifikası ile tamamlanır.
Eğitim başında “Ön Test”, bitiminde “Son Test” uygulanarak gelişim ölçümlenir. Değerlendirme formunu dolduran katılımcılar sertifikalarını alır. Sertifikanızın geçerliliğini Sertifika Sorgulama sayfasından doğrulayabilirsiniz.
Suç istihbaratı analizinde büyük veri ve iş zekâsı: veri entegrasyonu, ağ/link analizi, merkezilik, hotspot ve BI panoları. Etik odaklı orta seviye eğitim.
Detayları Gör →
Spark SQL ile büyük veriyi sorgulayın: tablo tanımı, join, pencere fonksiyonları, karmaşık tipler ve Catalyst/AQE ile performans ayarı. Orta seviye eğitim.
Detayları Gör →
Python ve pandas ile veri analizine başlayın, pandas sınırlarını görüp Spark'a geçerek büyük veriyle tanışın. Pratik, temel seviye DVA eğitimi.
Detayları Gör →
Spark ile büyük veri temizleme: profilleme, eksik ve aykırı değer yönetimi, standartlaştırma, doğrulama ve yeniden kullanılabilir hazırlık pipeline'ı. Orta sevi
Detayları Gör →
Hadoop ekosisteminde veri akışı kurun: Sqoop, Flume, Kafka ve NiFi ile alım, Hive/Spark ile dönüşüm, Oozie/Airflow ile orkestrasyon. Orta seviye eğitim.
Detayları Gör →