Course details

Obierz kurs na... lepsze zarządzanie i przetwarzanie danych

Jeśli pracujesz z danymi, dobrze wiesz, jakie znaczenie mają dla biznesu, na którego rzecz działasz. Dane są współczesnym złotem – kto je posiada, potrafi odpowiednio posortować, przetworzyć i wyciągnąć z nich korzystne dla siebie wnioski, ten zyskuje ogromną przewagę konkurencyjną. Danych można użyć także do „nakarmienia” sztucznej inteligencji. Trenowana na właściwie dobranych informacjach, będzie w stanie szybko i precyzyjnie wykonać zadania, które ludziom zajęłyby znacznie więcej czasu. Zdając sobie sprawę z wagi tematu, firmy poszukują data engineerów i chętnie inwestują w oprogramowanie, które ułatwia im pracę.

Jednym z takich narzędzi – i to działającym na zasadzie open source – jest Apache Airflow. Platforma ta została stworzona po to, by usprawnić zarządzanie przepływami danych. Stanowi jeden z najpopularniejszych orkiestratorów zadań – każda z dostępnych chmur ma implementację Airflow jako moduł. Dodatkową zaletą platformy jest to, że środowisko pracy można uruchomić w systemie Kubernetes/Docker. Jeśli chcesz bliżej poznać możliwości tego narzędzia, uczestnictwo w naszym kursie video będzie ku temu świetną okazją – za jego sprawą rozwiniesz wiedzę na temat Apache Airflow o nowe operatory bazujące na Pythonie lub na relacyjnych bazach danych. Dodatkowo podczas szkolenia poruszone zostaną tematy pozwalające na rozszerzenie funkcjonalności o nowe komponenty (praca z S3, SFTP/FTP czy serwisem Apache Kafka). W jego trakcie zapoznasz się również ze środowiskiem pracy w wersji HA.

Airflow. Kurs video. Zaawansowane operatory przetwarzania danych kończy się na poziomie średnio zaawansowanym. Aby móc w pełni skorzystać z wiedzy przekazywanej w trakcie szkolenia, dobrze mieć opanowane podstawy Pythona, Airflow i Dockera. Informacje zdobyte podczas kursu pozwolą jego uczestnikowi na budowanie zaawansowanych DAG-ów (czyli grafów acyklicznych).