Множественный источник документов для базы знаний llm ⇐ Python

[Anonymous]

Хотим иметь бот llm с базой знаний.
2 источника: вся веб-ссылка и несколько PDF-файлов.
Webdocs => Использование langchain Sitemaploader позволяет получить данные в виде документов.
Pdf => Использование langchain pypdf-загрузчика позволяет получить данные в виде документов.
Docs = webdocs + pdfdocs.

Код: Выделить всё

Faiss.fromdocuments(docs,openaiembeddings)
faiss.savelocally()
Qa=Retreivalqachain.fromdocuments(llm=chatopenai,)

Проблема: Не на должном уровне ответы или кажется, что у меня иногда возникают галлюцинации.
Запрос: Если я хочу тренироваться с использованием двух источников: веб-ссылки и PDF-файлов, какова наилучшая процедура?
Я ожидаю подробного руководства и ответа, чтобы лучше узнать механизм.>