Course details

Databricks. Kurs video. Wstęp do architektury Data Lakehouse

Databricks. Kurs video. Wstęp do architektury Data Lakehouse

Piotr Chudzik

Videocourse

Obierz kurs na... inżynierię danych

Jeśli myślisz o karierze inżyniera danych, ale nie masz doświadczenia w pracy na tym stanowisku, to ten kurs jest dla Ciebie idealną propozycją. Inżynier danych dostarcza je innym zespołom w firmie – usługę tę świadczy głównie dla analityków danych i dla data scientist. Do głównych obowiązków inżyniera danych należy tworzenie procesów ETL i ELT, walidacja danych i przygotowywanie ich poprzez budowanie systemu pobierania (na przykład strumienie danych lub orkiestracja zadań). Jego pracę ułatwiają i usprawniają odpowiednie narzędzia. Takie jak platforma analityczna Databricks.

Databricks stanowi jedno z najpopularniejszych rozwiązań służących przetwarzaniu, procesowaniu i analizie danych. Funkcjonuje ono, opierając się na własnym formacie danych, zwanym Delta. Specyfiką tej platformy jest to, że pozwala na tworzenie struktury danych podobnej do relacyjnych baz danych. Jeśli chcesz ją poznać i nauczysz się procesować w niej dane, zapraszamy na szkolenie. W jego trakcie omówimy podstawowe tematy związane z platformą Databricks – przede wszystkim kwestie dotyczące reguł pracy z notebookami i formatem Delta. Przyjrzysz się także kwestiom związanym z korzystaniem z innych modułów Databricks, takich jak SQL Warehouse, Workflows, czy zasadom tworzenia polityki klastra.

Co Cię czeka podczas naszego profesjonalnego szkolenia

Podczas kursu między innymi:

  • Przygotujesz środowisko pracy
  • Zaczniesz pracować z notebookami
  • Przyjrzysz się sposobom korzystania z widgetów i „magic functions” w swoich zadaniach
  • Będziesz tworzyć własne klastry obliczeniowe i ich polityki, a także uruchamiać na nich niezbędne biblioteki i skrypty
  • Dowiesz się, czym jest dDBFS i jak odczytuje się z niego dane
  • Poznasz format Delta
  • Wykonasz polecenia SQL w ramach hurtowni danych i stworzysz na niej funkcje
  • Zautomatyzujesz zadania za pomocą Workflows
  • Zaprezentujesz dane za pomocą Dashboard

Databricks. Kurs video. Wstęp do architektury Data Lakehouse kończy się na poziomie podstawowym. Wiedza zdobyta w trakcie szkolenia pozwala na postawienie pierwszych kroków na platformie Databricks. Nabyte informacje oczywiście można zastosować w praktyce – na przykład w celu przeniesienia swojej pracy w języku Python, Scala, SQL i Spark do środowiska Databricks.

  • Title: Databricks. Kurs video. Wstęp do architektury Data Lakehouse
  • Author: Piotr Chudzik
  • Duration time: 05:46:51
  • ISBN: 978-83-289-1839-9, 9788328918399
  • Date of issue: 2024-11-12
  • Format: Kurs Video
  • Item ID: vdabrw
  • Publisher: Videopoint