Как оптимизировать большие файлы JSON для использования с API ChatGPT? [закрыто] ⇐ Php

[Anonymous]

Я пытаюсь использовать ChatGPT в качестве чат-бота для своего веб-сайта Magento 2 и хочу передать ему данные о продуктах. Для этого я собрал все продукты и сохранил их в файле JSON, который затем прочитал, чтобы внедрить данные в systemRoleContent системной роли. Однако проблема, с которой я столкнулся, заключается в том, что файл JSON довольно большой.
{
"bot_response": "Error: ChatBot Error: Unexpected API response structure: {\n \"error\": {\n \"message\": \"Request too large for gpt-4o on tokens per min (TPM): Limit 30000, Requested 501140. The input or output tokens must be reduced in order to run successfully. Visit https://platform.openai.com/account/rate-limits to learn more.\",\n \"type\": \"tokens\",\n \"param\": null,\n \"code\": \"rate_limit_exceeded\"\n }\n}\n"
}

Я заметил, что в конфигурацию API необходимо добавить функцию, позволяющую запускать запрос на выбор продуктов на основе ключевых слов, найденных в их названиях или описаниях, соответствующих ключевым словам. в сообщении пользователя. Проблема в том, что пользователи изначально могут не знать названий продуктов; они приходят к чат-боту, чтобы обнаружить их. Как я могу решить эту проблему?
Это код, над которым я сейчас работаю:


Подробнее здесь: https://stackoverflow.com/questions/793 ... hatgpt-api