У объекта «неэтип» нет атрибута «кодировать» при загрузке токенизатора ⇐ Python

[Anonymous]

Ошибка возникает при попытке загрузить модель Pegasus для суммирования текста < /p>

Код: Выделить всё

from transformers import pipeline, set_seed
pipe = pipeline("summarization", model="google/pegasus-cnn_dailymail")

error: attributeerror: 'nonetype' объект не имеет атрибута 'encode'

Код: Выделить всё

   1588     logger.info("Converting from Tiktoken")
1589     return TikTokenConverter(
1590         vocab_file=transformer_tokenizer.vocab_file,
1591         additional_special_tokens=transformer_tokenizer.additional_special_tokens,
-> 1592     ).converted()
1593 except Exception:

Я установил Tiktoken и перезапустил ядро, но возникает та же ошибка

Подробнее здесь: https://stackoverflow.com/questions/793 ... -tokenizer