ODBIERZ TWÓJ BONUS :: »

Databricks. Kurs video. Wstęp do architektury Data Lakehouse

Podstawowe informacje:
Czas trwania: 05:46:51
Poziom: podstawowy
Autor: Piotr Chudzik
Liczba lekcji: 42
Technologia: Databricks 15.4
Dla firm
Rozwiń umiejętności swoich pracowników dzięki kursom video
Dowiedz się więcej
  • Monitorowanie postępów pracowników. Przejrzyste raporty i imienne certyfikaty ukończenia kursów
  • Atrakcyjne rabaty dla zespołów. Im więcej pracowników liczy zespół, tym większy uzyskasz rabat
  • Doradztwo w wyborze tematyki szkoleń. Mamy setki kursów, dostosujemy program nauczania pod Twój zespół
Indywidualnie
39,90 zł 149,00 zł (-73%)
96,85 zł najniższa cena z 30 dni Dodaj do koszyka Za zakup otrzymasz 39 punktów
Korzyści:
Ten kurs należy do ścieżki Inżynier danych
Czas trwania: 28 godz.
DOWIEDZ SIĘ WIĘCEJ
Ten kurs należy do ścieżki Inżynier danych »

Czego się nauczysz?

  • Przygotujesz środowisko pracy
  • Zaczniesz pracować z notebookami
  • Przyjrzysz się sposobom korzystania z widgetów i „magic functions” w swoich zadaniach
  • Będziesz tworzyć własne klastry obliczeniowe i ich polityki, a także uruchamiać na nich niezbędne biblioteki i skrypty
  • Dowiesz się, czym jest dDBFS i jak odczytuje się z niego dane
  • Poznasz format Delta
  • Wykonasz polecenia SQL w ramach hurtowni danych i stworzysz na niej funkcje
  • Zautomatyzujesz zadania za pomocą Workflows
  • Zaprezentujesz dane za pomocą Dashboard

Spis lekcji

1. Wprowadzenie 00:37:44
1.1. Wstęp
00:05:52
1.2. Przygotowanie środowiska pracy (Azure)
00:08:16
1.3. Przygotowanie środowiska pracy (AWS)
00:09:44
1.4. Prezentacja narzędzia
00:13:52
2. Workspace i Data Explorer 00:40:30
2.1. Workspace i wstęp do notebooka
00:08:57
2.2. SQL i katalogi danych
00:05:28
2.3. Catalog Explorer i DBFS
00:05:03
2.4. Moduł dbutils.fs
00:11:09
2.5. Polecenia terminala
00:05:27
2.6. Podsumowanie rozdziału
00:04:26
3. Praca z notebookiem 00:54:50
3.1. Odczyt danych z DBFS
00:05:00
3.2. dbutils - nazwa użytkownika i notebooka
00:04:15
3.3. Widgety - tworzenie/usuwanie (Python)
OGLĄDAJ » 00:12:45
3.4. Widgety - tworzenie/usuwanie (SQL + UI)
00:07:53
3.5. Widgety - pobieranie wartości
00:07:11
3.6. Funkcja %run
00:08:05
3.7. getAll/zasięg zmiennych
00:03:47
3.8. Podsumowanie rozdziału
00:05:54
4. Praca z formatem delta 01:37:48
4.1. Funkcja display() i _sqldf
00:08:50
4.2. Tworzenie/Usuwanie bazy danych
00:04:43
4.3. Zapis danych do formatu Delta
00:06:08
4.4. Tworzenie/Usuwanie tabeli
00:10:18
4.5. Polecenie MERGE INTO (SQL)
OGLĄDAJ » 00:15:28
4.6. Polecenie MERGE INTO (Python)
00:14:00
4.7. Wersje danych/Odczyt katalogu z SQL
00:11:13
4.8. Polecenia ANALYZE TABLE/VACUUM
00:09:18
4.9. Polecenie ZORDER
00:09:20
4.10. Podsumowanie rozdziału
00:08:30
5. Konfiguracja środowiska 00:41:39
5.1. Instalacja bibliotek
00:06:59
5.2. Polityki klastra - wprowadzenie
00:05:07
5.3. Tworzenie własnej polityki
00:14:35
5.4. Tworzenie własnej polityki - autoskalowanie
00:07:24
5.5. Init script
00:07:34
6. SQL Warehouse/Data Profiler 00:41:01
6.1. Visualization/Data Profiler
00:08:37
6.2. Wprowadzenie do SQL Warehouse
00:05:43
6.3. Praca z SQL w Warehouse
00:10:07
6.4. Tworzenie/Usuwanie funkcji
00:08:57
6.5. Dashboard
00:07:37
7. Automatyzacja zadań 00:42:09
7.1. Polecenie dbutils.notebook.run()
00:08:57
7.2. Workflows/Przykładowy task
00:18:50
7.3. Parametry i zmienne workflows
00:08:28
7.4. Podsumowanie rozdziałów 5-7
00:05:54

Obierz kurs na... inżynierię danych

Jeśli myślisz o karierze inżyniera danych, ale nie masz doświadczenia w pracy na tym stanowisku, to ten kurs jest dla Ciebie idealną propozycją. Inżynier danych dostarcza je innym zespołom w firmie – usługę tę świadczy głównie dla analityków danych i dla data scientist. Do głównych obowiązków inżyniera danych należy tworzenie procesów ETL i ELT, walidacja danych i przygotowywanie ich poprzez budowanie systemu pobierania (na przykład strumienie danych lub orkiestracja zadań). Jego pracę ułatwiają i usprawniają odpowiednie narzędzia. Takie jak platforma analityczna Databricks.

Databricks stanowi jedno z najpopularniejszych rozwiązań służących przetwarzaniu, procesowaniu i analizie danych. Funkcjonuje ono, opierając się na własnym formacie danych, zwanym Delta. Specyfiką tej platformy jest to, że pozwala na tworzenie struktury danych podobnej do relacyjnych baz danych. Jeśli chcesz ją poznać i nauczysz się procesować w niej dane, zapraszamy na szkolenie. W jego trakcie omówimy podstawowe tematy związane z platformą Databricks – przede wszystkim kwestie dotyczące reguł pracy z notebookami i formatem Delta. Przyjrzysz się także kwestiom związanym z korzystaniem z innych modułów Databricks, takich jak SQL Warehouse, Workflows, czy zasadom tworzenia polityki klastra.

Databricks. Kurs video. Wstęp do architektury Data Lakehouse kończy się na poziomie podstawowym. Wiedza zdobyta w trakcie szkolenia pozwala na postawienie pierwszych kroków na platformie Databricks. Nabyte informacje oczywiście można zastosować w praktyce – na przykład w celu przeniesienia swojej pracy w języku Python, Scala, SQL i Spark do środowiska Databricks.

Wybrane bestsellery

O autorze kursu video

Piotr Chudzik - absolwent Politechniki Łódzkiej, jego specjalizacja zawodowa to technologie big data oraz administracja nowoczesnymi środowiskami IT (wykorzystującymi między innymi cloud computing, konteneryzację czy IaC - infrastructure as code). Pracuje jako wykładowca na Uniwersytecie Łódzkim, gdzie przekazuje studentom wiedzę na temat Linuksa, baz danych i programowania w języku Python. Jest również trenerem w Software Development Academy. Na co dzień zatrudniony jako menadżer techniczny w dużym zagranicznym banku, odpowiada za prawidłowe i nieprzerwane działanie aplikacji opartych na Google Cloud Platform. Zawsze otwarty na nowe doświadczenia oraz wiedzę, którą w przyszłości mógłby się podzielić z innymi. Interesuje się grami komputerowymi, światem nowych technologii i fantastyką. Jest fanem serii Wiedźmin i uniwersum Warhammera.

Sukces wymaga wcześniejszego przygotowania, bez niego z pewnością osiągniemy porażkę.

Konfucjusz

Piotr Chudzik - pozostałe kursy

Oceny i opinie klientów: Databricks. Kurs video. Wstęp do architektury Data Lakehouse Piotr Chudzik (1)

Informacja o opiniach
Weryfikacja opinii następuje na podstawie historii zamowień na koncie Użytkownika umiejszczającego opinię. Użytkownik mógł otrzymać punkty za opublikowanie opinii uprawniającej do uzyskania rabatu w ramach Programu Kadr.
6.0
  • 6 (1)
  • 5 (0)
  • 4 (0)
  • 3 (0)
  • 2 (0)
  • 1 (0)
  • Dziękuję! Dobry wstęp do ADB. Ale było by dobrze dodać więcej szczegółów dotyczących administracji databricks: object privileges, jak to działa z Azure Service Principle, dostęp do Azure Storage Accounts, wspólpraca z Azure datafactory.

    Opinia: Konstantyn Opinia dodana: 2024-12-29 Ocena: 6   
    Opinia potwierdzona zakupem
    Opinia dotyczy produktu: kurs video
    Czy opinia była pomocna:

Szczegóły kursu

Dane producenta » Dane producenta:

Helion SA
ul. Kościuszki 1C
41-100 Gliwice
e-mail: gpsr@helion.pl
Format: Online
Data aktualizacji: 2024-11-12
ISBN: 978-83-289-1839-9, 9788328918399
Numer z katalogu: 242634

Videopoint - inne kursy

Kurs video
39,90 zł
Dodaj do koszyka
Sposób płatności