Запуск Milvus и действительно высокие скачки памяти ⇐ Python

[Anonymous]

Я использую несколько миллионов векторов, и когда я загружаю коллекцию, она резко возрастает до 40 ГБ используемой оперативной памяти.
Моя коллекция представляет собой один вектор с индексом IVF_FLAT и размерностью 768. Я использую Milvus 2.4 автономно в Docker.
Он работает быстро, но я не уверен насчет использования памяти.
Может кто-нибудь описать, что происходит использование памяти должно быть? Происходит ли утечка памяти или что-то еще.
Я пробовал работать на нескольких разных машинах, в разных версиях Python, версиях Milvus. Я перезапустил, и это очень стабильно. Ничего не вылетает и все очень быстро, но похоже, что памяти слишком много.

Подробнее здесь: https://stackoverflow.com/questions/789 ... eally-high