Lxml iterparser OSError: слишком много открытых файловPython

Программы на Python
Ответить
Anonymous
 Lxml iterparser OSError: слишком много открытых файлов

Сообщение Anonymous »

Мой проект неоднократно загружает XML-файл для обработки большого количества наборов данных. Каждый набор данных сохраняется в файле, а извлечение информации из файла .xml встроено в функцию, обрабатывающую набор данных, поэтому требуется загружать этот файл .xml снова и снова. Я использую lxml для обработки файла .xml, но после запуска функции более 100 раз возникла ошибка OSError:

Код: Выделить всё

  File "src/lxml/iterparse.pxi", line 79, in lxml.etree.iterparse.__init__
OSError: [Errno 24] Too many open files: '/Users/******/unimod.xml'
Тело для обработки XML-файла:

Код: Выделить всё

import lxml.etree as etree

context = etree.iterparse(xml_file, events=["end"])

# namespace: str = my_name_space

for event, element in context:
if event == "end" and element.tag == f"{{{namespace}}}mod":
# extracting necessary info

element.clear()
while element.getprevious() is not None:
del element.getparent()[0]

del context
Вышеупомянутое взято отсюда, но исключение продолжает возникать. Это означает, что загруженный XML-файл фактически не освобождается после завершения выполнения функции. Есть ли способ это исправить?

Подробнее здесь: https://stackoverflow.com/questions/798 ... open-files
Ответить

Быстрый ответ

Изменение регистра текста: 
Смайлики
:) :( :oops: :roll: :wink: :muza: :clever: :sorry: :angel: :read: *x)
Ещё смайлики…
   
К этому ответу прикреплено по крайней мере одно вложение.

Если вы не хотите добавлять вложения, оставьте поля пустыми.

Максимально разрешённый размер вложения: 15 МБ.

Вернуться в «Python»