Перейти к содержанию
НОВОЕМаркетплейс и trig8n Agent: продавайте то, что создали, и получайте планы и изменения, проверенные до того, как вы их увидите. Что нового

Библиотека / RAG и базы знаний

RAG и базы знаний

Оценка релевантности документов RAG с OpenAI и Google Sheets

Когда загружается строка набора данных или приходит сообщение в чате, RAG-агент отвечает, а OpenAI оценивает релевантность найденных документов.

Что делает

## How it works This template shows how to calculate a workflow evaluation metric: retrieved document relevance (i.e. whether the information retrieved from the vector store is relevant to the question). The workflow takes a question and checks whether the information retrieved to answer it is relevant. You can find more information on workflow evaluation here, and other metric examples here.

Шаги

  1. When fetching a dataset row
  2. Evaluating?
  3. When chat message received
  4. Match chat format
  5. Return chat response
  6. Set metrics
  7. Get dataset
  8. Remove Duplicates
  9. Simple Vector Store
  10. Embeddings OpenAI
  11. Default Data Loader
  12. Recursive Character Text Splitter
  13. When clicking ‘Execute workflow’
  14. Calculate doc relevance metric

Всего шагов: 19.

Похожие автоматизации