Размер папки документов Lucene слишком велик ⇐ JAVA

[Anonymous]

Я использую следующий код для добавления документов в индекс Lucene. Я проиндексировал 23 425 документов, но размер папки, в которой хранится индекс, составляет 447,4 МБ. Напротив, при хранении тех же данных в файле Parquet с теми же 23 425 записями размер файла составляет всего 625 КБ. Размер папки индекса Lucene кажется чрезмерно большим. Может ли кто-нибудь помочь определить, почему это происходит и как это оптимизировать? Ниже приведен код, который я использую:
MMapDirectory indexDirectory = new MMapDirectory(Paths.get(directory));
// Configure the IndexWriter with an analyzer
StandardAnalyzer analyzer = new StandardAnalyzer();
IndexWriterConfig config = new IndexWriterConfig(analyzer);
IndexWriter indexWriter = new IndexWriter(indexDirectory, config);

for (Map.Entry entry : operations.entrySet())
{
Document doc1 = new Document();
doc1.add(new StringField("namespace", namespace, Store.YES));
doc1.add(new StringField("type", "operations", Store.YES));
doc1.add(new StringField("data", entry.getKey(), Store.YES));
doc1.add(new StringField("serviceName",entry.getValue().getServiceName(),
Store.YES));
List attributes =
entry.getValue().getOperationAttributes();
for (int i = 0; i < attributes.size(); i++)
{
doc1.add(new StoredField(attributes.get(i).getName(),
String.valueOf(attributes.get(i).getValue())));
}
try { docCount.getAndIncrement();
ndexWriter.addDocument(doc1);
} catch (IOException e) {
logger.error("Error while adding document to index", e);
}
}
indexWriter.commit();
indexWriter.close();


Подробнее здесь: https://stackoverflow.com/questions/792 ... -documents