To wersja testowa nowego serwisu infoShare Academy — wyświetlane treści i oferta nie są wiążące ani kompletne

Data

Hadoop

Szkolenie Hadoop to intensywny, dwudniowy kurs skoncentrowany na praktycznym zastosowaniu tego popularnego frameworka do przetwarzania i analizy dużych zbiorów danych.

Czas trwania
16h · 2 dni
Dla kogo

Idealny dla zespołów, które…

1 Programistów i inżynierów danych, którzy chcą poszerzyć swoje umiejętności o Hadoop
2 Data scientistów i analityków danych pragnących przetwarzać duże zbiory danych w efektywny sposób
3 Specjalistów IT i big data, którzy chcą wykorzystać Hadoop w swoich projektach
Efekty po programie

Praktyczne warsztaty z AI i analityki danych — na realnych przypadkach Twojego zespołu.

Jak efektywnie zarządzać danymi w HDFS i tworzyć zadania MapReduce

Jak przetwarzać i analizować dane z użyciem Hive i Pig

Jak optymalizować zadania MapReduce i zarządzać zasobami Hadoop

Jak wdrożyć i monitorować aplikacje Hadoop w środowisku produkcyjnym

Wymagania

Co warto wiedzieć przed startem

  • Znajomość podstaw programowania w Java lub Pythonie
  • Podstawowa wiedza z zakresu przetwarzania danych
  • Umiejętność pracy w środowisku Unix/Linux
Program · 9 modułów

Co konkretnie robimy

Dzień 1: Podstawy Hadoop i przetwarzania danych

M01
Architektura Hadoop
  • · Omówienie głównych komponentów Hadoop: HDFS, MapReduce, YARN
  • · Interakcja między komponentami
M02
Podstawy HDFS i MapReduce
  • · Zarządzanie plikami w HDFS
  • · Tworzenie i uruchamianie podstawowych zadań MapReduce
M03
Podstawy Apache Hive i Apache Pig
  • · Wprowadzenie do Hive: struktura tabel, zapytania SQL
  • · Analiza struktury plików pod Hive
  • · Wprowadzenie do Pig: skrypty Pig Latin
M04
Warsztat: Przetwarzanie danych z użyciem MapReduce
  • · Implementacja prostego zadania MapReduce
  • · Analiza wyników i optymalizacja zadania

Dzień 2: Zaawansowane techniki i praktyczne zastosowania

M05
Zaawansowane przetwarzanie danych
  • · Pisanie zaawansowanych zapytań Hive
  • · Tworzenie skomplikowanych skryptów Pig
M06
Optymalizacja i tunning wydajności
  • · Techniki optymalizacji zadań MapReduce
  • · Zarządzanie zasobami w klastrze Hadoop
M07
Warsztat: Analiza danych z użyciem Hive i Pig
  • · Implementacja zapytań Hive na rzeczywistych zbiorach danych
  • · Tworzenie skryptów Pig do przetwarzania danych
M08
Deployowanie i zarządzanie klastrami Hadoop
  • · Przygotowanie i wdrażanie aplikacji Hadoop
  • · Monitorowanie i zarządzanie klastrami Hadoop w środowisku produkcyjnym
M09
Optymalizacja kosztowa – czyli jak kontrolować i optymalizować koszty wynikające z hurtowni Redshift.
Każdy moduł modyfikujemy pod Twój stack i kontekst. Powyższe to punkt wyjścia — nie sztywna agenda.
Jak pracujemy

Od briefu do retro w 30 dniach.

01

Brief i diagnoza

Rozmowa z liderem zespołu + krótka ankieta dla uczestników. Określamy cele, gap, kontekst.

02

Modyfikacja programu

Dostosowujemy moduły, case studies i przykłady kodu pod Twój stack. Akceptacja w 5 dni.

03

Warsztat

Sesje z trenerem, hands-on, code review. Mentor dostępny też pomiędzy sesjami.

04

Retro + raport

Raport z efektami dla zespołu i lidera. 30 dni konsultacji w cenie.

Zapytanie

Wyślij brief. Odezwiemy się w 1 dzień.

Po krótkim briefie przygotujemy program i wycenę. Bez zobowiązań — to tylko punkt wyjścia do rozmowy.

Wycena w 48h od briefu
Pierwsza sesja w 30 dni
Pilotaż przed pełną decyzją
Faktura VAT, możliwość płatności w transzach

Co robimy z Twoimi danymi

Dane służbowe (imię, e-mail firmowy, telefon, firma, stanowisko) przetwarzamy w celu obsługi zapytania o szkolenie dla firmy i przygotowania oferty. Administratorem danych jest infoShare Academy Sp. z o.o., Al. Grunwaldzka 472B, 80-309 Gdańsk. Podanie danych jest dobrowolne, ale niezbędne do udzielenia odpowiedzi. Masz prawo dostępu do danych, ich sprostowania, usunięcia, ograniczenia przetwarzania i wniesienia sprzeciwu. Pełną informację znajdziesz w Klauzuli informacyjnej.

Zgody marketingowe (dobrowolne)

Administratorem danych osobowych jest infoShare Academy sp. z o.o. Zasady przetwarzania danych osobowych znajdują się w dokumentach Polityka Prywatności oraz Klauzula Informacyjna.