В рубрике больших открытых наборов данных стандарт сериализации данных HDT [1], используется для бинарной сериализации данных в формате RDF, используемом при разработке проектов в области семантического веба и онтологий. На сайте стандарта опубликовано множество датасетов [2] самый большой из них - набор данных Wikidata размером в 149GB.
Для работы с этим форматом есть библиотеки для C++ и Java, а также настольное приложение.
Ссылки:
[1] https://www.rdfhdt.org/
[2] https://www.rdfhdt.org/datasets/
#opendata #datasets