Каков наиболее эффективный способ подсчета событий в пандах? ⇐ Python

[Anonymous]

У меня большой (около 12 миллионов строк) DataFrame df:

Код: Выделить всё

df.columns = ['word','documents','frequency']

Следующие операции были выполнены своевременно:

Код: Выделить всё

word_grouping = df[['word','frequency']].groupby('word')
MaxFrequency_perWord = word_grouping[['frequency']].max().reset_index()
MaxFrequency_perWord.columns = ['word','MaxFrequency']

Однако выполнение этого процесса занимает неожиданно много времени:

Код: Выделить всё

Occurrences_of_Words = word_grouping[['word']].count().reset_index()

Что я здесь делаю не так? Есть ли лучший способ подсчета вхождений в большом DataFrame?

Код: Выделить всё

df.word.describe()

работает очень хорошо, поэтому я действительно не ожидал, что создание этого DataFrame Occurrences_of_Words займет очень много времени.

Подробнее здесь: https://stackoverflow.com/questions/200 ... -in-pandas