У Google есть страница, описывающая, как использовать одну из моделей Gemini-1.5 для расшифровки аудио. Они включают образец сценария (см. ниже). Скрипт извлекает аудиофайл из хранилища Google с помощью команды Part.from_uri().
Вместо этого я бы хотел использовать локальный файл. Установка URI «file:///...» не работает. Как это сделать?
Код Google (рабочий, облачный) находится здесь:
import vertexai
from vertexai.generative_models import GenerativeModel, GenerationConfig, Part
# TODO(developer): Update and un-comment below line
# PROJECT_ID = "your-project-id"
vertexai.init(project=PROJECT_ID, location="us-central1")
model = GenerativeModel("gemini-1.5-flash-002")
prompt = """
Can you transcribe this interview, in the format of timecode, speaker, caption.
Use speaker A, speaker B, etc. to identify speakers.
"""
audio_file_uri = "gs://cloud-samples-data/generative-ai/audio/pixel.mp3"
audio_file = Part.from_uri(audio_file_uri, mime_type="audio/mpeg")
contents = [audio_file, prompt]
response = model.generate_content(contents, generation_config=GenerationConfig(audio_timestamp=True))
print(response.text)
# Example response:
# [00:00:00] Speaker A: Your devices are getting better over time...
# [00:00:16] Speaker B: Welcome to the Made by Google podcast, ...
# [00:01:00] Speaker A: So many features. I am a singer. ...
# [00:01:33] Speaker B: Amazing. DeCarlos, same question to you, ...
Подробнее здесь: https://stackoverflow.com/questions/793 ... udio-files
Gemini от Google о локальных аудиофайлах ⇐ Python
-
- Похожие темы
- Ответы
- Просмотры
- Последнее сообщение
-
-
Как определить конкретную частоту звукового сигнала в аудиофайлах (.Wav, .Mp3)?
Anonymous » » в форуме C# - 0 Ответы
- 32 Просмотры
-
Последнее сообщение Anonymous
-
-
-
Gemini возвращает ошибку: 400 Многоходовой чат не включен для моделей/gemini-pro-vision
Anonymous » » в форуме Python - 0 Ответы
- 142 Просмотры
-
Последнее сообщение Anonymous
-
-
-
Gemini возвращает ошибку: 400 Многоходовой чат не включен для моделей/gemini-pro-vision
Anonymous » » в форуме Python - 0 Ответы
- 137 Просмотры
-
Последнее сообщение Anonymous
-