Вышла свежая версия Delta Lake [1], open source продукта по созданию озер данных используемого во многих облачных решениях, например, в MS Azure [2], а также в Google Cloud и AWS. Создатели Delta Lake, компания Databricks [3], а сам проект переведен в Linux Foundation [4].
Инструмент полезный, если не первоочередной для инженеров данных не имеющих ограничений на работу с облачными продуктами.
Ссылки:
[1] github.com/delta-i…g/v1.1.0
[2] docs.microsoft.com/en-us/a…lta-lake
[3] https://databricks.com/
[4] https://www.linuxfoundation.org/projects
#data #tools
We are excited to announce the release of Delta Lake 1.1.0 on Apache Spark 3.2. Similar to Apache Spark™, we have released Maven artifacts for both Scala 2.12 and Scala 2.13. The key features in th...