Как я могу программно удалить все наборы данных, сохраненные HuggingFace на диске? ⇐ Python

[Гость]

Я загрузил набор данных HuggingFace (uonlp/CulturaX) со следующим кодом Python:

из наборов данных импортируйте load_dataset ds = load_dataset("uonlp/CulturaX", "ar") Он загрузил все файлы .parquet набора данных HuggingFace, а также сгенерировал файлы .arrow после завершения загрузки:




[*]Загрузки содержат файлы .parquet (исходные файлы и формат данных набора данных). [*]uonlp___cultura_x содержит файлы .arrow.
Как я могу программно удалить все наборы данных, сохраненные HuggingFace на диске? Я хочу удалить как сгенерированные файлы .arrow, так и исходные файлы данных набора данных. Есть ли для этого какая-нибудь функция Python?