Как перечислить все файлы по пути, используя библиотеку hdfs в Python? ⇐ Python

[Anonymous]

Я пытаюсь вывести список всех файлов в моем пути к hdfs, но что-то кажется странным. функция выводит список только некоторых файлов, но не всех, даже в путях, содержащих только 7 файлов, она получает только те, которые заканчиваются на 1. Но мне нужно получить все файлы .parquet, находящиеся в пути.
Вы можете мне помочь?
def list_files_hdfs(client, path):
try:
files = client.list(path)
return [f"{path}/{file}" for file in files]
except Exception as e:
print(f"Error listing files: {e}")


Подробнее здесь: https://stackoverflow.com/questions/793 ... -in-python