Skip to content

Latest commit

 

History

History
46 lines (26 loc) · 2.65 KB

File metadata and controls

46 lines (26 loc) · 2.65 KB

Проверки качества данных в ETL процессе

Задачи Результаты
Определить, на каких этапах ETL процесса внедрить проверки качества данных

Разработать и внедрить проверки в ETL процесс

Создать витрину данных с результатами проверок

Составить инструкции по поддержке процессов с проверками

Реализация

Исходный DAG DAG To Add Checks.png

Лучшее место на схеме для первой проверки — после шага get_files, а для второй и третьей проверок — после шагов load_user_order_log и load_user_activity_log.

DAG With Checks.png