Как добавить изображение в качестве входных данных в ChatMessage с помощью Microsoft.Extensions.AI ⇐ C#

[Anonymous]

Я пытаюсь использовать Microsoft.Extensions.AI, чтобы попросить модель, размещенную в Azure OpenAI, описать изображение. Мне удалось успешно пообщаться с моделью gpt-4o-mini, используя следующий код:

Код: Выделить всё

var message = new ChatMessage(ChatRole.User, "Please describe this image in one sentence");
chatHistory.Add(message);

await foreach (var item in
chatClient.CompleteStreamingAsync(chatHistory))
{
Console.Write(item.Text);
}

Однако, если я попытаюсь добавить изображение в сообщение чата локально:

Код: Выделить всё

var data = File.ReadAllBytes(@"C:\temp\example.jpg");
message.Contents.Add(new ImageContent(data, "image/jpeg"));

или через URL-адрес:

Код: Выделить всё

message.Contents.Add(new ImageContent(new Uri("https://example.net/example.jpg")));

После этого я не получаю ответа от ИИ — кажется, он просто зависает на несколько минут. Я считаю, что gpt-4o-mini поддерживает изображение в качестве входных данных. Возможно ли то, что я пытаюсь сделать, и если да, то как правильно добавить изображение в сообщение чата?


Подробнее здесь: https://stackoverflow.com/questions/793 ... ensions-ai