Перейти к содержанию
НОВОЕМаркетплейс и ваша команда: продавайте то, что создали, и получайте планы и изменения, проверенные до того, как вы их увидите. Что нового

Библиотека / Веб-скрейпинг и исследования

Веб-скрейпинг и исследования

Извлечение проверенных данных о компании со страниц Impressum сайтов с помощью OpenAI

Вебхук получает URL сайта, загружает страницу с юридической информацией и с помощью LLM извлекает название компании, адрес, контакты и ИНН/VAT ID, отбрасывая любые значения, которых нет в тексте страницы.

Что делает

## Extract company data from a website's Impressum (legal notice) How it works - A webhook receives a website and optionally organization and reference_id. - The workflow loads the homepage, finds the Impressum or imprint link (HTML links, embedded JSON, /impressum fallback) and converts the page to clean text. - An LLM extracts company name, legal form, representatives, address, phone, email, VAT ID and commercial register entry. - A verification step drops every value that does not literally appear in the page text, so invented data never reaches your CRM. - The JSON response holds data, dropped_fields and the Impressum URL. Setup steps 1. Create an OpenAI credential and attach it to "Extract Company Data with AI". Any OpenAI-compatible endpoint works if you change URL and model. 2. Protect the webhook with Header Auth before you expose it. 3. POST {"website": "example.de", "organization": "Example GmbH"} to the webhook. Good to know - Business websites in Germany, Austria and Switzerland must publish an Impressum, which makes it a reliable source. - Sites that render the Impressum only with JavaScript return no_content. - Private and local addresses are rejected.

Шаги

  1. Receive Website URL
  2. Validate Input
  3. Input Valid?
  4. Respond with Input Error
  5. Fetch Homepage
  6. Find Impressum URL
  7. Fetch Impressum Page
  8. Clean Page Text
  9. Page Has Content?
  10. Extract Company Data with AI
  11. Verify Against Page Text
  12. Respond with Company Data

Похожие автоматизации