Kütüphane / RAG ve Bilgi Bankaları
RAG ve Bilgi Bankaları
FTP Dosyalarını OpenAI ile Qdrant Vektör Veritabanına Gömme
Çalıştırdığınızda bir FTP sunucusundaki dosyaları listeler, metinlerini böler, OpenAI gömmeleri oluşturur ve bunları gruplar halinde Qdrant'ta saklar.
Ne yapar
### Store in Vector DB Node: Qdrant Vector Store Batch Size: 100 Collection: Sends cleaned text chunks to OpenAI to get embeddings (1536 dim for text-embedding-ada-002) #### collection settings in Qdrant cluster PUT /collections/{collection_name} { "vectors": { "size": 1536, "distance": "Cosine" } } Embed Chunks Node: Embeddings OpenAI Pushes the embedded chunks (with metadata) into Qdrant for semantic retrieval.
Adımlar
- Qdrant Vector Store
- When clicking ‘Test workflow’
- Embeddings OpenAI
- Default Data Loader
- Character Text Splitter
- List all the files
- Loop over one item
- Downloading item
Benzer otomasyonlar
Dosyalar ve Bulut DepolamaFTP Üzerinden Dosya İndirme ve Yükleme4 adımRAG ve Bilgi BankalarıFTP'deki Dosyaları Qdrant Vektör Veritabanına Gömme10 adımDosyalar ve Bulut DepolamaDosyaları FTP Sunucusu ile HTTP Arasında Taşıma5 adımDosyalar ve Bulut DepolamaDrive, OneDrive ve FTP'den Excel dosyalarını oku ve yaz12 adım