Как получить набор слов и частоту терминов в текстовом формате с помощью Sklearn?Python

Программы на Python
Ответить Пред. темаСлед. тема
Anonymous
 Как получить набор слов и частоту терминов в текстовом формате с помощью Sklearn?

Сообщение Anonymous »

Я хотел бы распечатать список слов (т. е. набор слов) для каждого документа в копрусе и соответствующую частоту их терминов (в текстовом формате), используя Sklearn CountVectorizer. Как мне этого добиться?
Вот мой код:
from sklearn.feature_extraction.text import CountVectorizer

#instantiate vectorizer
vectorizer=CountVectorizer()

#Document creation
document1='this is a sunny day';document2= 'today is a very very very pleasant day and we have fun fun fun';document3= 'this is an amazin experience'

#list
list_of_words= [document1,document2,document3]

#bag of words
bag_of_words = vectorizer.fit(list_of_words)

#verify vocabulary of repeated word
print (vectorizer.vocabulary_.get('very'))

print (vectorizer.vocabulary_.get('fun'))

#transform
bag_of_words=vectorizer.transform(list_of_words)

print(bag_of_words)>>>>
(0, 3) 1 (0, 7) 1 (0, 9) 1 (0, 10) 1 (1, 2) 1 (1, 3) 1 (1, 5) 3 (1, 6) 1 (1, 7) 1 (1, 8) 1 (1, 11) 1 (1, 12) 3 (1, 13) 1 (2, 0) 1 (2, 1) 1 (2, 4) 1 (2, 7) 1 (2, 10) 1


Подробнее здесь: https://stackoverflow.com/questions/707 ... ng-sklearn
Реклама
Ответить Пред. темаСлед. тема

Быстрый ответ

Изменение регистра текста: 
Смайлики
:) :( :oops: :roll: :wink: :muza: :clever: :sorry: :angel: :read: *x)
Ещё смайлики…
   
К этому ответу прикреплено по крайней мере одно вложение.

Если вы не хотите добавлять вложения, оставьте поля пустыми.

Максимально разрешённый размер вложения: 15 МБ.

  • Похожие темы
    Ответы
    Просмотры
    Последнее сообщение

Вернуться в «Python»