Первые 2 раздела

2025-12-06 14:50:13 +03:00
parent 2d3eb8eab4
commit f811226648
5 changed files with 62 additions and 4 deletions
@@ -1,9 +1,17 @@
 # Почему Apache Airflow стал незаменимым инструментом для работы с данными
-# Почему Apache Airflow стал незаменимым инструментом для работы с данными

 Обычно работа с автоматизацией процессов обработки информации начинается с ручного управления задачами. Например, в машинном обучении это может включать подготовку наборов данных, обучение моделей, анализ результатов и развертывание решений в рабочей среде. По мере роста команды и развития продукта эти процессы усложняются: увеличивается количество повторяющихся операций, появляются зависимости между задачами, и каждая из них приобретает всё большее значение для бизнеса. В результате формируется полноценный конвейер задач, требующий регулярного запуска.

-![Введение в Apache Airflow](./_attachments/airflow_introduction.png)
+```mermaid
+flowchart LR
+    in[Данные] --> op1[Операция № 1] --> op2[Операция № 2] --> op3[Операция № 3] --> out[Данные]
+
+    subgraph PIPE[Конвейер]
+        op1
+        op2
+        op3
+    end
+```

 Аналогичная ситуация возникает при обработке данных: в определенный момент необходимо собрать актуальную информацию, преобразовать её и выполнить различные операции — создать витрину данных и сохранить в базу, обучить модель машинного обучения, подготовить отчет в Excel и разослать его по электронной почте. Вариантов множество, и для решения таких задач требуются специализированные инструменты.