DataOps. Актуальные вопросы и не менее актуальные ответы

Спикер: Егоров Павел, руководитель направления BigData «Инфосистемы Джет»

0:00 — Вступление
0:17 — Определение и цели методологии DataOps
0:50 — История развития процессов загрузки данных
1:47 — Современные подходы к автоматизации разработки
2:43 — Стандарт dbt и работа с коннекторами
3:54 — Преимущества абстракции при миграции технологий
5:17 — Внедрение ИИ-агентов в разработку пайплайнов
6:47 — Особенности работы с dbt-моделями в Git
8:02 — Контроль качества и дата-контракты в CI/CD
9:43 — Применение макросов для генерации кода
11:27 — Визуализация связей объектов и расчёт показателей
12:54 — Мониторинг качества данных и скоростей расчётов
14:52 — Продуктовые решения и интеграция с Airflow
16:47 — Работа с семантическим слоем и бизнес-описанием
18:33 — Практические примеры на стендах конференции

Инфосистемы Джет
Автор: Инфосистемы Джет
«Инфосистемы Джет» — инновационная ИТ-компания, работающая на рынке более 28 лет. Надежный технологический партнер крупнейших компаний в России, который создает вместе с ними комплексные цифровые проекты. Входит в ТОП-10 крупнейших поставщиков ИТ-услуг России, №1 на рынке ИТ-аутсорсинга в России, №2 среди крупнейших поставщиков в области комплексных проектов построения инфраструктуры ЦОД, ТОП-3 крупнейших интеграторов России в сфере защиты информации.
Комментарии:

Как мы обрабатываем данные: политика обработки персональных данных