Библиотека / Код, Git и инструменты разработчика
Код, Git и инструменты разработчика
Поиск скрытых API-эндпоинтов сайта с помощью regex и ИИ
При запуске загружает HTML и JavaScript-файлы сайта, извлекает API-эндпоинты с помощью regex и очищает и упорядочивает их с помощью ИИ-моделей.
Что делает
# 1. API Endpoints Extraction With a Predefined Regex * Paste the URL of the target website into the URL field of the Configuration node. * Fetch the HTML page of the site and extract the URLs of the JS files. * Keep relevant JS files with potential API endpoints (e.g. local, bundled, CDN sources). You can customise the logic to your needs: add or remove URL conditions. * Load JS content from kept URLs: convert references to JS files into properly formatted, complete URLs. * Apply predefined regex to extract API endpoints. * Keep JS files with enough URLs (>4 endpoints). Assume that JS files with fewer URLs do not contain relevant API endpoints. Discard them to send only the necessary data to the LLM. * Clean up the extracted URLs by removing duplicated items.
Шаги
- Auto-fixing Output Parser
- Start API Discovery
- Configuration
- Fetch Website HTML
- Extract URLs of JS files
- Split URLs of JS files
- Keep Relevant JS Files
- Fetch JS Content
- Extract API Endpoints
- Check Endpoints Count
- Split Endpoints
- Remove Duplicates
- AI Endpoints Analysis
- Add Source Metadata
Всего шагов: 42.
Похожие автоматизации
Строительные блоки и утилитыУстановка даты закрытия на три недели вперёд с помощью regexШагов: 6Автоматизация эл. почтыDraft beginner-friendly AI Instagram post drafts with OpenRouter and Google SheetsШагов: 17Код, Git и инструменты разработчикаТестирование выходных данных LLM с GPT-4 в роли судьи в SheetsШагов: 12ИИ-агенты и ассистентыПоиск в интернете со ссылками на источники через SearchAPI и OpenRouterШагов: 5