Kütüphane / Veri Senkronizasyonu ve ETL
Veri Senkronizasyonu ve ETL
RSS beslemelerini ve Hugging Face veri kümelerini temizlenmiş bir pazarlama CSV dosyasında birleştirin
Her üç günde bir çalışır, iki Hugging Face veri kümesini ve dört RSS beslemesini çeker, hepsini tek bir şemaya eşler, kayıtları temizleyip kontrol eder ve bir CSV dosyasıyla JSON kalite raporu dışa aktarır.
Ne yapar
## Combine RSS feeds and Hugging Face datasets into a quality-checked CSV ### How it works This workflow runs every three days, reads configuration values, then pulls marketing data from two Hugging Face datasets and four RSS feeds. Each source is mapped into a unified schema, merged, and passed through a quality-checking and cleaning step. The cleaned records are exported as a CSV, while a separate quality report is generated as JSON for documentation and auditing. ### Setup steps - Configure the schedule trigger interval if every three days is not the desired cadence. - Review the Configure Sources node and set the Hugging Face dataset names, row limits, offsets, and RSS feed URLs as needed. - Ensure the HTTP Request nodes can access the Hugging Face datasets-server endpoints; add authentication headers if you switch to private datasets. - Verify the Convert to CSV and Convert Report to JSON nodes produce files in the expected format and connect them to storage, email, or another delivery destination if needed. ### Customization You can add or replace RSS sources, adjust the number of Hugging Face rows fetched per run, change the unified schema in the mapping code nodes, or tighten the quality rules before export.
Adımlar
- Fetch HuggingFace Ad Copy
- Fetch HuggingFace Campaigns
- Read MarTech RSS Feed
- Read Marketing Dive RSS Feed
- Read HubSpot RSS Feed
- Read Social Media Examiner RSS
- Map Ad Copy Data
- Map Campaign Data
- Combine RSS Feeds
- Map RSS Article Data
- Merge All Data Sources
- Perform Quality Checks
- Transform Records to Rows
- Generate Quality Report
Toplam 18 adım.
Benzer otomasyonlar
Sohbet Botları ve Mesajlaşma BotlarıHugging Face Üzerinden Mistral-7B ile Sohbet3 adımİçerik Yazımı ve ÜretimiHugging Face Makalelerini OpenAI Özetleriyle Notion'a Kaydetme11 adımİçerik Yazımı ve ÜretimiOpenAI ile Hugging Face Makalelerini Notion'a Özetle11 adımBelgeler, PDF ve OCRHugging Face RAG ajanıyla kiracı değerlendirmesini özetleme10 adım