Как запустить эту модель в Huggingface от Nvidia и Mistral?Python

Программы на Python
Anonymous
Как запустить эту модель в Huggingface от Nvidia и Mistral?

Сообщение Anonymous »

Модель:

nvidia/Mistral-NeMo-12B-Instruct

и ссылку на Huggingface nvidia/Mistral-NeMo-12B-Instruct
На большинстве страниц моделей в Huggingface есть пример кода Python...
но на этой странице модели его нет есть пример кода.
Как запустить эту модель на Python?
Это пример кода для некоторой модели:
# Use a pipeline as a high-level helper
from transformers import pipeline

messages = [
{"role": "user", "content": "Who are you?"},
]
pipe = pipeline("text-generation", model="mistralai/Mistral-Nemo-Instruct-2407")
pipe(messages)


Подробнее здесь: https://stackoverflow.com/questions/787 ... nd-mistral

Вернуться в «Python»