Szkolenie IBM Open Platform with Apache Hadoop
Praktyczne informacje o szkoleniu
- KATEGORIA: Technologie
- KOD SZKOLENIA: DW606G
- CZAS TRWANIA: 2 dni
- INFORMACJA CENOWA od: 3000 zł netto za jedną osobę
- RODZAJ SZKOLENIA: szkolenie zamknięte
- JĘZYK SZKOLENIA: polski
- FORMA REALIZACJI: stacjonarna, online
Opis szkolenia
IBM Open Platform (IOP) z Apache Hadoop to pierwsza wiodąca platforma współpracy, która umożliwia opracowywanie rozwiązań Big Data na wspólnym zestawie technologii Apache Hadoop. Inicjatywa Open Data Platform (ODP) to wspólny wysiłek branżowy skoncentrowany na promowaniu i rozwijaniu stanu technologii Apache Hadoop i Big Data dla przedsiębiorstw. Obecny ekosystem jest poddawany wyzwaniom i spowalniany przez rozdrobnione i powielone wysiłki różnych grup. Rdzeń ODP wyeliminuje zgadywanie z procesu i przyspieszy wiele przypadków użycia, działając na wspólnej platformie. Umożliwia przedsiębiorstwom skupienie się na budowaniu aplikacji biznesowych.
Profil uczestnika
Ten średniozaawansowany kurs szkoleniowy jest przeznaczony dla osób, które chcą zdobyć podstawy IBM BigInsights. Obejmuje to: inżynierów Big Data, naukowców zajmujących się danymi, programistów lub deweloperów, administratorów, którzy są zainteresowani nauką o platformie Open Platform firmy IBM z Apache Hadoop.
Agenda
Jednostka 1: IBM Open Platform z Apache Hadoop
- Ćwiczenie 1: Eksploracja HDFS
Jednostka 2: Apache Ambari
- Ćwiczenie 2: Zarządzanie klastrami Hadoop za pomocą Apache Ambari
Jednostka 3: Hadoop Distributed File System
- Ćwiczenie 3: Dostęp do plików i podstawowe polecenia z HDFS
Jednostka 4: MapReduce i Yarn
- Temat 1: Wprowadzenie do MapReduce na podstawie MR1
- Temat 2: Ograniczenia MR1
- Temat 3: YARN i MR2
- Ćwiczenie 4: Tworzenie i kodowanie prostego zadania MapReduce
- Możliwe bardziej złożone drugie ćwiczenie
Jednostka 5: Apache Spark
- Ćwiczenie 5: Praca z RDD Spark do zadania Spark
Jednostka 6: Koordynacja, zarządzanie i nadzór
- Ćwiczenie 6: Apache ZooKeeper, Apache Slider, Apache Knox
Jednostka 7: Przenoszenie danych
- Ćwiczenie 7: Przenoszenie danych do Hadoop za pomocą Flume i Sqoop
Jednostka 8: Przechowywanie i uzyskiwanie dostępu do danych
- Temat 1: Reprezentowanie danych: CSV, XML, JSON i YAML
- Temat 2: Języki programowania Open Source: Pig, Hive i inne [R, Python itp.]
- Temat 3: Koncepcje NoSQL
- Temat 4: Uzyskiwanie dostępu do danych Hadoop za pomocą Hive
- Ćwiczenie 8: Wykonywanie operacji CRUD za pomocą powłoki HBase
- Temat 5: Zapytania do danych Hadoop za pomocą Hive
- Ćwiczenie 9: Uzyskiwanie dostępu do danych Hadoop/HBase za pomocą Hive
Jednostka 9: Tematy zaawansowane
- Temat 1: Kontrolowanie przepływów pracy zadań za pomocą Oozie
- Temat 2: Wyszukiwanie za pomocą Apache Solr
- Brak ćwiczeń laboratoryjnych
Wymagane przygotowanie uczestników
- Jednakże znajomość Linuksa nie będzie pomocna.
Zagadnienia
- Wymienienie i opisanie głównych komponentów stosu Apache Hadoop typu open source oraz podejścia przyjętego przez Open Data Foundation.
- Zarządzanie klastrami Hadoop i ich monitorowanie za pomocą Apache Ambari i powiązanych komponentów.
- Analiza rozproszonego systemu plików Hadoop (HDFS) poprzez uruchamianie poleceń Hadoop.
- Poznanie różnic między Hadoop 1 (z MapReduce 1) a Hadoop 2 (z YARN i MapReduce 2).
- Tworzenie i uruchamianie podstawowych zadań MapReduce za pomocą wiersza poleceń.
- Wyjaśnienie, w jaki sposób Spark integruje się z ekosystemem Hadoop.
- Wykonywanie iteracyjnych algorytmów za pomocą RDD Spark.
- Wyjaśnienie roli koordynacji, zarządzania i nadzoru w ekosystemie Hadoop za pomocą Apache Zookeeper, Apache Slider i Apache Knox.
- Zapoznanie się z typowymi metodami przenoszenia danych.
- Konfigurowanie Flume do ładowania danych plików dziennika.
- Przenoszenie danych do HDFS z baz danych relacyjnych za pomocą Sqoop.
- Zrozumienie, kiedy stosować różne formaty przechowywania danych (pliki płaskie, CSV/rozgraniczone, pliki Avro/Sequence, Parquet itp.).
- Przeglądanie różnic między dostępnymi językami programowania typu open source, często używanymi w Hadoop (Pig, Hive) oraz w Data Science (Python, R).
- Wykonywanie zapytań o dane z Hive.
- Realizowanie losowego dostępu do danych przechowywanych w HBase.
- Poznanie zaawansowanych koncepcji, takich jak Oozie i Solr.
Masz pytania?
Zapraszamy do kontaktu
Klaudia Janecka
+48 539 064 686
klaudia.janecka@eitt.pl
ul. Ząbkowska 3103-736 Warszawa
Organizacja szkolenia
- Minimalna liczba uczestników: 4 osób
- Maksymalna liczba uczestników: 12 osób
- Miejsce: siedziba klienta lub wskazana lokalizacja
- Czas trwania każdego dnia: 8 godzin zegarowych (9:00-17:00)
Formy realizacji szkolenia
Szkolenie stacjonarne
- Szkolenie w siedzibie klienta lub wskazanej lokalizacji
- Sala szkoleniowa wyposażona w niezbędny sprzęt
- Materiały szkoleniowe w formie elektronicznej
- Przerwy kawowe i lunch
- Bezpośrednia interakcja z trenerem
- Networking w grupie
- Ćwiczenia warsztatowe w zespołach
Szkolenie zdalne
- Wirtualne środowisko szkoleniowe
- Materiały w formie elektronicznej
- Interaktywne ćwiczenia online
- Breakout rooms do pracy w grupach
- Wsparcie techniczne podczas szkolenia
- Nagrania sesji (opcjonalnie)
Możliwość dofinansowania
Szkolenie może zostać sfinansowane ze środków publicznych w ramach:
- Krajowego Funduszu Szkoleniowego (KFS)
- Bazy Usług Rozwojowych (BUR)
- Projektów unijnych realizowanych przez PARP
- Programu Akademia HR (PARP)
- Regionalnych programów operacyjnych
W przypadku zainteresowania dofinansowaniem, nasz zespół pomoże w przygotowaniu wymaganej dokumentacji.
MASZ PYTANIA?
Skontaktuj się z nami, aby uzyskać więcej informacji o naszych szkoleniach, programach oraz współpracy. Chętnie odpowiemy na wszystkie Twoje zapytania!
Zaufali nam
Poznaj naszą firmę
Masz pytania?
Zapraszamy do kontaktu
Klaudia Janecka
+48 539 064 686
klaudia.janecka@eitt.pl
ul. Ząbkowska 3103-736 Warszawa
FAQ — Często zadawana pytania
Oferujemy szkolenia w różnych, dopasowanych do potrzeb formatach: stacjonarnie (w siedzibie klienta lub naszym centrum szkoleniowym), interaktywnie online na żywo z trenerem oraz w formule hybrydowej. Szczegółowa informacja o dostępnych formach realizacji dla konkretnego szkolenia znajduje się zawsze w jego opisie na stronie.
Szkolenia otwarte online zazwyczaj odbywają się w godzinach 9:00 - 17:00 czasu polskiego. W przypadku szkoleń zamkniętych, dedykowanych dla firm, harmonogram jest elastyczny i ustalamy go indywidualnie z klientem, aby jak najlepiej dopasować się do potrzeb organizacji.
Do prowadzenia interaktywnych szkoleń online wykorzystujemy sprawdzone i popularne platformy wideokonferencyjne, takie jak Microsoft Teams czy Zoom. Zapewniają one płynną komunikację, możliwość pracy w grupach i bezpośredni kontakt z trenerem. Informację o platformie używanej podczas konkretnego szkolenia przekazujemy uczestnikom przed jego rozpoczęciem.
Do komfortowego udziału w szkoleniu online wystarczy standardowy komputer (stacjonarny lub laptop) ze stabilnym dostępem do internetu oraz zainstalowaną aktualną wersją przeglądarki internetowej. Zalecamy korzystanie ze słuchawek z mikrofonem dla lepszej jakości dźwięku i komunikacji, choć nie jest to bezwzględnie wymagane. Posiadanie kamery internetowej zazwyczaj również nie jest obowiązkowe.
Tak, każdy uczestnik otrzymuje komplet materiałów szkoleniowych przygotowanych przez naszych ekspertów. Zazwyczaj dostarczamy je w formie elektronicznej (np. pliki PDF) na kilka dni przed rozpoczęciem szkolenia, po potwierdzeniu udziału i dokonaniu płatności.
Po pomyślnym ukończeniu większości naszych szkoleń uczestnicy otrzymują imienny Certyfikat Ukończenia EITT, potwierdzający zdobyte kompetencje. Dodatkowo, oferujemy szkolenia akredytowane (np. z zakresu ITIL®, PRINCE2®), które przygotowują do oficjalnych egzaminów certyfikacyjnych uznanych międzynarodowo. Informacja o rodzaju certyfikatu dostępnego po konkretnym szkoleniu znajduje się zawsze w jego szczegółowym opisie.
Proces zapisu zależy od rodzaju szkolenia. Na szkolenia otwarte (dostępne dla każdego chętnego) można zapisać się bezpośrednio przez formularz zgłoszeniowy dostępny na stronie danego szkolenia. W przypadku zainteresowania szkoleniem zamkniętym (dedykowanym dla pracowników jednej firmy), prosimy o bezpośredni kontakt mailowy lub telefoniczny – przygotujemy ofertę dopasowaną do Państwa potrzeb.
Standardowo cena szkolenia obejmuje: udział w zajęciach prowadzonych przez doświadczonego trenera-praktyka, komplet autorskich materiałów szkoleniowych w formie elektronicznej oraz imienny Certyfikat Ukończenia EITT. W przypadku szkoleń akredytowanych, cena często zawiera również koszt podejścia do oficjalnego egzaminu certyfikacyjnego. Szczegółowy zakres świadczeń dla danego kursu jest zawsze podany w jego opisie.
Preferowaną formą płatności za nasze szkolenia jest przelew bankowy, realizowany na podstawie wystawionej faktury pro forma lub faktury VAT. Szczegółowe informacje dotyczące terminów i warunków płatności są przekazywane w procesie potwierdzenia zapisu na szkolenie lub znajdują się w regulaminie.
Oczywiście! Naszą specjalnością są szkolenia zamknięte, projektowane "na miarę" – zgodnie z indywidualnymi potrzebami i celami biznesowymi danej organizacji. Jeśli interesuje Państwa temat spoza naszej regularnej oferty lub chcieliby Państwo zmodyfikować program istniejącego kursu, zapraszamy do kontaktu. Chętnie przygotujemy dedykowane rozwiązanie.
Jesteśmy elastyczni i dostosowujemy się do potrzeb klienta. Szkolenia zamknięte możemy zorganizować nawet dla niewielkich grup – zwykle minimum uczestników to 4 osoby, a koszt jest często kalkulowany dla całej grupy. Dbając o najwyższą jakość i komfort nauki, w przypadku bardzo licznych grup (powyżej 40 osób) zazwyczaj rekomendujemy podział na mniejsze zespoły, aby zapewnić efektywną interakcję.
Państwa opinia jest dla nas niezwykle ważna, ponieważ pozwala nam stale doskonalić naszą ofertę. Po każdym szkoleniu wysyłamy uczestnikom link do krótkiej ankiety ewaluacyjnej online. Zawsze można również skontaktować się z nami bezpośrednio mailowo lub telefonicznie, aby przekazać swoje uwagi.
- Zaproszenie w formie one-pager’a z terminami
- Kick-off projektu
- Strategiczne przywództwo i myślenie
- Komunikacja i współpraca. Zarządzanie konfliktem
- Motywowanie, angażowanie i trudne decyzje w biznesie
- Zarządzanie zmianą i innowacjami. Przywództwo w kryzysie
- Budowa organizacji przyszłości
- Warsztat dobrych praktyk – retrospektywa; stworzenie spójnego programu dla średniego i niższego szczebla zarządzania