Oracle Big Data Eğitimi

Eğitim Hakkında

Oracle Big Data platformu ve Hadoop entegrasyonunu öğreten uygulamalı eğitim

Oracle Big Data Eğitimi, büyük veri iş yüklerini Oracle ekosistemiyle birlikte yönetmeye odaklanır. Katılımcılar Hadoop mimarisini, HDFS ve YARN'ı, Hive ve Impala ile SQL sorgulamayı, Spark ile dağıtık işlemeyi öğrenir. Oracle Big Data SQL ile HDFS ve Hive üzerinde external table sorgulama, Oracle Loader for Hadoop ve SQL Connector for HDFS ile veri aktarımı, Oracle NoSQL Database, Kafka akışı ve Oracle Data Integrator ile büyük veri entegrasyonu uygulamalı işlenir.

Süre ve Format

3 Gün. İlk gün Hadoop ekosistemi ve HDFS/Spark, ikinci gün Big Data SQL ve connectors entegrasyonu, üçüncü gün yönetim, güvenlik ve ODI işlenir.

Seviye

Orta Seviye — Hadoop ekosistemi, Oracle Big Data SQL, Big Data Connectors, NoSQL ve ODI entegrasyonu uygulamalı işlenir

Öğrenme Metodu

Her konu gerçek bir Hadoop kümesi üzerinde Hive sorguları, Big Data SQL external table ve connector aktarımlarıyla uygulamalı işlenir.

Neden Bu Eğitim?

🗄️Hadoop ekosistemi

HDFS, YARN, Hive ve Spark'ı kavrar, büyük veriyi dağıtık biçimde depolama ve işlemenin temellerini öğrenirsiniz.

🔗Oracle entegrasyonu

Big Data SQL ve Big Data Connectors ile Hadoop verisini Oracle veritabanından tek sorguyla erişilebilir hale getirirsiniz.

🔁Veri akışı

ODI, Kafka ve GoldenGate ile kaynak sistemlerden büyük veriye uçtan uca veri akışı ve entegrasyon kurarsınız.

Anahtar Konular

oracle big data eğitimibüyük veri eğitimihadoop eğitimioracle big data sqlbig data connectorshive spark eğitimioracle nosqlveri gölü eğitimicloudera eğitimibüyük veri entegrasyonu

“Büyük verinin değeri hacminde değil, onu Oracle dünyasındaki soruyla buluşturmakta saklıdır: doğru entegrasyon veriyi karara dönüştürür.”

Ön Koşullar

Eğitimden en iyi verimi almak için faydalı olacak bilgi ve ortam gereksinimleri

1

SQL bilgisi

SELECT, JOIN ve toplama sorgularına hâkimiyet Hive ve Big Data SQL konularını anlamayı kolaylaştırır.

2

Linux temeli

Komut satırı, dosya sistemi ve temel kabuk kullanımı Hadoop ortamında çalışmayı destekler.

3

Veritabanı aşinalığı

İlişkisel veritabanı ve external table kavramlarına aşinalık Oracle entegrasyonunu anlamayı sağlar.

4

Laboratuvar ortamı

Cloudera tabanlı Hadoop kümesi ve Oracle veritabanı bulunan ortam örnekleri takip etmeyi mümkün kılar.

Eğitim İçeriği

Programın gün gün akışı aşağıdadır. Bir güne tıklayarak o günün modüllerini ve içeriklerini görebilirsiniz.

Günün hedefiKatılımcılar Oracle Big Data platformunu ve Hadoop mimarisini kavrar, HDFS ve YARN üzerinde çalışır, Hive ve Impala ile SQL sorgular ve Spark ile dağıtık işleme yapar.

Modül 1

Oracle Big Data Genel Bakış

Büyük verinin hacim, hız ve çeşitlilik (3V) boyutlarının kavranması
Oracle Big Data Appliance ve OCI Big Data Service bileşenleri
Cloudera (CDH/CDP) dağıtımının Oracle ortamındaki rolü
Data lake ve veri ambarı arasındaki tamamlayıcı ilişki
Oracle Big Data referans mimarisi ve katmanları
Tipik büyük veri kullanım senaryoları ve mimari kararlar

Modül 2

HDFS ve YARN Mimarisi

HDFS'in blok tabanlı dağıtık depolama mimarisi ve çoğaltma (replication)
NameNode ve DataNode rolleri ile metadata yönetimi
hdfs dfs komutlarıyla dosya yükleme, listeleme ve okuma
YARN ile küme kaynaklarının (CPU, bellek) yönetilmesi
ResourceManager, NodeManager ve ApplicationMaster ayrımı
Dosya formatları: Parquet, ORC ve Avro'nun kullanım avantajları

Modül 3

Hive ve Impala ile SQL

Hive ile HDFS verisi üzerinde SQL (HiveQL) sorgulama
Managed ve external table ayrımı ile metastore yapısı
Partition ve bucketing ile sorgu performansının artırılması
Impala ile düşük gecikmeli etkileşimli sorgu çalıştırma
Veri formatı ve sıkıştırmanın sorgu maliyetine etkisi
Hive ile veri temizleme ve dönüşüm sorgularının yazılması

Modül 4

Apache Spark ile İşleme

Spark'ın bellek içi (in-memory) dağıtık işleme avantajları
RDD ve DataFrame soyutlamalarının temel farkları
Spark SQL ile yapılandırılmış veri üzerinde sorgulama
Transformation ve action kavramıyla tembel (lazy) değerlendirme
Spark ile Hive tablolarının okunup işlenmesi
YARN üzerinde Spark işi gönderme ve kaynak ayarı

Günün hedefiKatılımcılar Oracle Big Data SQL ile HDFS ve Hive üzerinde external table sorgular, Big Data Connectors ile veri aktarır, Oracle NoSQL ve akış verisiyle çalışır.

Modül 1

Oracle Big Data SQL

Big Data SQL ile Oracle'dan HDFS ve Hive verisini sorgulama
External table'ların ORACLE_HIVE ve ORACLE_HDFS sürücüleriyle tanımı
Storage cell ve Smart Scan ile sorgunun küme tarafında işlenmesi
Oracle SQL ile Hadoop ve ilişkisel tabloların tek sorguda birleşmesi
Predicate pushdown ile veri hareketinin azaltılması
Güvenlik ve veri tipleri açısından external table konuları

Modül 2

Oracle Big Data Connectors

Oracle Loader for Hadoop (OLH) ile Hadoop'tan Oracle'a yükleme
Oracle SQL Connector for HDFS (OSCH) ile HDFS verisine erişim
Çevrimdışı (offline) ve çevrimiçi (online) yükleme modları
Yükleme sırasında bölümleme (partition) ve paralellik ayarı
Büyük veri setlerinin toplu ve verimli aktarım stratejileri
Connector performansı ve hata yönetimi konuları

Modül 3

Oracle NoSQL Database

Anahtar-değer ve tablo modeliyle NoSQL veri saklama
Esnek şema ve yatay ölçeklenebilirliğin avantajları
Shard ve replica yapısıyla dağıtık veri dağılımı
Tutarlılık (consistency) ve dayanıklılık (durability) seçenekleri
NoSQL'in büyük veri mimarisindeki yeri ve kullanım alanı
Oracle NoSQL ile Big Data SQL üzerinden sorgulama

Modül 4

Akış Verisi ve GoldenGate

Apache Kafka ile gerçek zamanlı mesaj/akış verisinin alınması
Topic, producer ve consumer kavramlarının kavranması
Oracle GoldenGate for Big Data ile değişiklik yakalama (CDC)
Kaynak veritabanından Hadoop/Kafka'ya değişikliklerin akıtılması
Batch ve stream işleme yaklaşımlarının karşılaştırılması
Akış verisinin data lake'e kalıcı yazımı

Günün hedefiKatılımcılar Cloudera Manager ile kümeyi yönetir, Kerberos ve Ranger/Sentry ile güvenlik kurar, Oracle Data Integrator ile büyük veri akışını tasarlar ve uçtan uca senaryo uygular.

Modül 1

Cloudera Manager ile Yönetim

Cloudera Manager ile küme servislerinin izlenmesi ve yönetimi
Servis ekleme, yapılandırma ve rol dağıtımı
Küme sağlık (health) göstergeleri ve uyarı (alert) ayarları
Kaynak kullanımı ve iş yükü takibinin yapılması
Log toplama ve sorun giderme yaklaşımı
Yama ve sürüm yükseltme (upgrade) planlaması

Modül 2

Büyük Veri Güvenliği

Kerberos ile küme içi kimlik doğrulama (authentication)
Apache Ranger veya Sentry ile yetkilendirme politikaları
HDFS dosya izinleri ve erişim denetim listeleri (ACL)
Veri şifreleme: aktarımda ve beklemede (at-rest) şifreleme
Audit log ile veri erişiminin denetlenmesi
Çok kiracılı (multi-tenant) kümelerde izolasyon

Modül 3

Oracle Data Integrator (ODI)

ODI ile büyük veri kaynak ve hedefleri arasında mapping tasarımı
Knowledge Module (KM) ile Hive, Spark ve HDFS entegrasyonu
ELT yaklaşımıyla dönüşümlerin küme üzerinde çalıştırılması
Topology ile fiziksel ve mantıksal mimarinin tanımı
ODI paketleri ve senaryolarla iş akışı otomasyonu
Hata yönetimi ve çalışma günlüklerinin izlenmesi

Modül 4

Uçtan Uca Büyük Veri Senaryosu

Ham verinin HDFS data lake'e alınması ve katmanlanması
Hive ve Spark ile verinin temizlenmesi ve zenginleştirilmesi
Big Data SQL ile Oracle ambarıyla birleşik raporlama
Connector ile özet verinin ilişkisel ambara aktarılması
Akış ve batch katmanlarının (lambda) bir arada kullanımı
Mimarinin performans ve maliyet açısından değerlendirilmesi

Eğitim Kazanımları

Program sonunda katılımcılar:

✅

Hadoop mimarisi

HDFS, YARN ve küme bileşenlerini kavrar, büyük veriyi dağıtık depolama ve işlemenin temellerini uygularsınız.

✅

Hive ve Spark

Hive/Impala ile SQL sorgular, Spark ile bellek içi dağıtık işleme yaparak büyük veri setlerini analiz edersiniz.

✅

Big Data SQL

Oracle'dan HDFS ve Hive verisini external table ve Smart Scan ile tek SQL cümlesinde sorgularsınız.

✅

Veri connectors

Oracle Loader for Hadoop ve SQL Connector for HDFS ile Hadoop ve Oracle arasında verimli veri aktarırsınız.

✅

NoSQL ve akış

Oracle NoSQL, Kafka ve GoldenGate ile ölçeklenebilir ve gerçek zamanlı veri akışlarını yönetirsiniz.

✅

Küme yönetimi

Cloudera Manager ile küme servislerini izler, yapılandırır ve sorunları giderirsiniz.

✅

Büyük veri güvenliği

Kerberos ve Ranger/Sentry ile kimlik doğrulama, yetkilendirme ve veri şifreleme politikaları kurarsınız.

✅

ODI entegrasyonu

Oracle Data Integrator ile büyük veri kaynaklarını ELT mantığıyla dönüştürür ve uçtan uca akış tasarlarsınız.

Kimler İçin Uygundur?

Veri ambarı ekiplerini büyük veriyle genişleten veri mühendisleri
Hadoop ortamlarını Oracle'a bağlayan DBA'ler
analitik altyapı kuran veri mimarları
büyük veri projelerinde çalışan BI uzmanları için uygundur

Sıkça Sorulan Sorular

Bu Oracle Big Data eğitimi kimler için uygundur?

Veri ambarı ekiplerini büyük veriyle genişleten veri mühendisleri, Hadoop ortamlarını Oracle'a bağlayan DBA'ler ve analitik altyapı kuran veri mimarları için uygundur. Büyük veri projelerinde çalışan BI uzmanları da bu entegrasyon becerilerinden yararlanır.

Eğitim için hangi ön bilgi gerekir?

Temel SQL bilgisi önemlidir; Hive ve Big Data SQL sorgularını yazmak için SELECT, JOIN ve toplama sorgularına aşina olmak gerekir. Linux komut satırı ve ilişkisel veritabanı kavramlarına temel aşinalık Hadoop ortamında çalışmayı kolaylaştırır; ileri Hadoop deneyimi gerekmez.

Oracle Big Data SQL ile klasik Hive sorgusu arasındaki fark nedir?

Hive, Hadoop kümesi üzerinde HiveQL ile çalışır. Oracle Big Data SQL ise aynı HDFS ve Hive verisini Oracle veritabanından external table olarak, tam Oracle SQL diliyle sorgulamanızı sağlar. Smart Scan sayesinde filtreleme küme tarafında yapılır ve Hadoop verisi ilişkisel tablolarla tek sorguda birleştirilebilir.

Bu eğitim yalnızca Oracle Big Data Appliance için mi geçerli?

Hayır. Kavramlar Big Data Appliance, OCI Big Data Service ve Cloudera tabanlı kümelerde ortaktır. Eğitimde HDFS, Hive, Spark, Big Data SQL ve connector gibi bileşenler platformdan bağımsız biçimde ele alınır; bulut ve şirket içi (on-premise) senaryoların farkları da değerlendirilir.

Eğitim sonunda sertifika veriliyor mu?

Program tamamlayan katılımcılar Digital Vizyon Akademi Katılım ve Başarı Sertifikası alır. Sertifika eğitime katılımı ve değerlendirmedeki başarıyı belgeler. Oracle'ın resmi sınavlarına girmek isteyenler için sınav başvurusu ve ücreti ilgili kuruma aittir.

Sertifikalandırma

Bu eğitim Digital Vizyon Akademi Başarı Sertifikası ile tamamlanır.

Eğitim başında “Ön Test”, bitiminde “Son Test” uygulanarak gelişim ölçümlenir. Değerlendirme formunu dolduran katılımcılar sertifikalarını alır. Sertifikanızın geçerliliğini Sertifika Sorgulama sayfasından doğrulayabilirsiniz.

Örnek Sertifika