Статья от компании Neoflex, про разработанную ими систему контроля качества данных, поступающих в Data Lake.
Так же в статье коллеги описывают и общие вопросы обеспечения качества данных и важность этой функции во всей цепочке обработки данных.
https://habr.com/ru/company/neoflex/blog/700118/
Привет! Меня зовут Василий, я работаю в роли Data Engineer в подразделении Big Data Solutions компании Neoflex. Так сложилось, что уже на двух проектах за прошедший год мне довелось заниматься...