Вышла свежая версия OpenMetadata 0.80 [1] инструмента сбора метаданных о таблицах, дашбордах, трубах данных и тд. Аналог Datahub, Amundsen, но с прицелом на открытый общедоступный стандарт описания данных. В новой версии: - политики контроля доступа (access control policy) - ручное добавление происхождения данных (manual linage) - уведомления о событиях (event notification) - контроль качество данных (data profiler) на базе Great Expectations и ещё много чего. Главный недостаток, на мой взгляд, в том что OpenMetadata не поддерживает NoSQL базы данных такие как MongoDB или Elasticsearch. Например, Datahub умеет данные о MongoDB собирать. Об этом я как-нибудь отдельно напишу, о том как существующая среда Modern Data Stack тяжело стыкуется с NoSQL продуктами и что с этим делать. А пока стоит изучить новые возможности OpenMetadata. Ссылки: [1] blog.open-metadata.org/openmet…bd2fbf54 #opensource #datatools #metadata