Как наиболее эффективный способ спасти состояние прогресса в нелетую памяти в Python? ⇐ Python

[Anonymous]

Рассмотрим задачу, которая включает в себя зацикливание на массиве миллиона пунктов, где каждый элемент является строкой. Для каждой итерации программа использует элемент, соответствующий количеству итерации в этом массиве для выполнения задачи. Например, рассмотрим массив, содержащий миллион идентификаторов клиентов, хранящихся как строки. Задача состоит в том, чтобы переоценить все идентификаторы клиентов, а для каждого идентификатора клиента приобретайте информацию о клиенте, связанном с идентификатором, из API, и хранить его в базе данных. Существует вероятность того, что итерация над петлей может быть прервана по любой причине. Для каждой итерации, после успешного извлечения данных клиента из API и хранения их в базе данных, программа должна регистрировать состояние прогресса во внешнем файле. (Невозможно определить состояние прогресса, используя элементы, хранящиеся в базе данных, или с помощью какой-либо функции базы данных.) Это самый эффективный способ выполнения этой задачи? Если нет, то какой наиболее эффективный способ сделать это? Есть ли библиотеки, которые предоставляют инструменты для этого?

Подробнее здесь: https://stackoverflow.com/questions/796 ... latile-mem