БД_Лабораторная_работа_8_БСТ2104_Мажукин_И_Н

Министерство цифрового развития связи и массовых коммуникаций

Ордена Трудового Красного Знамени

Федеральное государственное бюджетное образовательное учреждение

высшего образования

«МОСКОВСКИЙ ТЕХНИЧЕСКИЙ УНИВЕРСИТЕТ

СВЯЗИ И ИНФОРМАТИКИ»

Кафедра «Математическая кибернетика и информационные технологии»

Отчёт по лабораторной работе №8

по дисциплине «Большие данные»

Выполнил: студент группы БСТ2104

Мажукин И.Н.

Проверила: Тимофеева А.И.

Москва, 2023 г.

Цель лабораторной работы:

Получить навыки работы с Apache Airflow.

Ход лабораторной работы:

На рисунке 1 представлен вход на хост 192.168.0.7 через ssh

Рисунок 1 – Вход на хост через ssh

На рисунке 2 представлен вход в директорию /data/airflow_dags

Рисунок 2 – Вход в директорию /data/airflow_dags

На рисунке 3 представлено создание .py-файла и просмотр существующих файлов в директории /data/airflow_dags

Рисунок 3 – Создание .py-файла и просмотр существующих файлов в директории /data/airflow_dags

На рисунке 4 представлен переход в созданный .py-файл

Рисунок 4 – Переход в созданный .py-файл

На рисунке 5 представлен код .py-файла, в котором создан даг из следующих тасков: DummyOperator, BashOperator с выводом даты, PythonOperator

Рисунок 5 – Код .py-файла

На рисунке 6 представлен переход в Web UI Airflow путём прописывания адреса 192.168.0.7:8080 в поисковую строку

Рисунок 6 – Переход в Web UI Airflow

На рисунке 7 представлено отображение и ручной запуск сохранённого .py-файла в Web UI Airflow

Рисунок 7 – Отображение и ручной запуск сохранённого .py-файла

На рисунке 8 представлен результат корректного запуска сохранённого .py-файла в Web UI Airflow

Рисунок 8 – Результат корректного запуска сохранённого .py-файла

Вывод:

В результате выполнения данной лабораторной работы были получены навыки работы с Apache Airflow.