Вот пример данных:
Код: Выделить всё
Mr XYZ, XX year old, who was the victim of motor vehicle accident that
occurred on XX-XX-XX date, he sustained numerous injuries.
He has been seen in the hospital for the left shoulder and low-back.
Теперь, если я лемматизирую этот текст, значение слова «левое плечо» изменится на «оставить плечо». И если я удалю стоп-слова, часть тела «нижняя часть спины» не будет распознаваться как объект, а «спина» будет удалена стоп-словами, и значение всего текста изменится.
Я знаю, что некоторые стоп-слова можно удалить, но что, если будут удалены другие важные слова.
Я не уверен, помогают ли мне стоп-слова и леммация.
Ничего, если я не буду выполнять предварительную обработку текста? или мне следует продолжить то же самое?