Поисковый агент сам выбирает как искать: DaData, Crawl4AI, Vane и Tavily
2 сезон 9 серия [S02E09] Собираем поискового агента, который живёт на сервере, ищет в вебе без ограничений по количеству запросов и не требует платных подписок. В этом видео: — Как устроен веб-поиск: кравлинг vs скрапинг — Архитектура поискового агента (роутинг, субагенты, воркфлоу Scout) — Два мощных опенсорс-решения: Vane и Crawler4AI — Сервис Дадата для работы с юрлицами — Сборка поисковой машины в n8n с Тавили — Тестирование на 5 реальных запросах Результат: агент, который находит производителей по ИНН, вытаскивает данные со страниц, строит карты ссылок, проводит ресерч и собирает досье на компании. Условно бесплатно — только сервер и API. --- Ссылки из видео: Vane — https://github.com/ItzCrazyKns/Vane Crawler4AI — https://github.com/unclecode/crawl4ai Дадата — https://dadata.ru --- Инструменты в сборке: • n8n — оркестрация агента • Tavily — базовый поиск (1000 бесплатных запросов/мес) • Vane — Perplexity-style поиск без лимитов • Crawler4AI — кравлинг страниц в markdown • Дадата — проверка компаний по названию • DeepSeek Chat — LLM для агента --- Содержание: — Как устроен веб-поиск — Архитектура агента Scout — Vane: свой Perplexity на сервере — Crawler4AI: парсинг для AI — Сервис Дадата — Сборка агента в n8n — Тест 1: Дадата, поиск компании — Тест 2: Комбинированный поиск — Тест 3: Кравлинг страницы — Тест 4: Поиск страницы + извлечение данных — Тест 5: Комплексный ресерч через Vane — Итоги и конфигурация агента --- 💬 Если интересен подробный разбор Дадаты или других сервисов — пишите в комментариях. 🎯 Подписывайтесь, если хотите следить за применением AI-агентов в жизни и работе. --- Мой Telegram канал: https://t.me/MyAIBackOffice Внедряй AI. Автоматизируй жизнь. #MyAIBackOffice #AIагенты #n8n #поисковыйагент #автоматизация #опенсорс #искусственныйинтеллект
2 сезон 9 серия [S02E09] Собираем поискового агента, который живёт на сервере, ищет в вебе без ограничений по количеству запросов и не требует платных подписок. В этом видео: — Как устроен веб-поиск: кравлинг vs скрапинг — Архитектура поискового агента (роутинг, субагенты, воркфлоу Scout) — Два мощных опенсорс-решения: Vane и Crawler4AI — Сервис Дадата для работы с юрлицами — Сборка поисковой машины в n8n с Тавили — Тестирование на 5 реальных запросах Результат: агент, который находит производителей по ИНН, вытаскивает данные со страниц, строит карты ссылок, проводит ресерч и собирает досье на компании. Условно бесплатно — только сервер и API. --- Ссылки из видео: Vane — https://github.com/ItzCrazyKns/Vane Crawler4AI — https://github.com/unclecode/crawl4ai Дадата — https://dadata.ru --- Инструменты в сборке: • n8n — оркестрация агента • Tavily — базовый поиск (1000 бесплатных запросов/мес) • Vane — Perplexity-style поиск без лимитов • Crawler4AI — кравлинг страниц в markdown • Дадата — проверка компаний по названию • DeepSeek Chat — LLM для агента --- Содержание: — Как устроен веб-поиск — Архитектура агента Scout — Vane: свой Perplexity на сервере — Crawler4AI: парсинг для AI — Сервис Дадата — Сборка агента в n8n — Тест 1: Дадата, поиск компании — Тест 2: Комбинированный поиск — Тест 3: Кравлинг страницы — Тест 4: Поиск страницы + извлечение данных — Тест 5: Комплексный ресерч через Vane — Итоги и конфигурация агента --- 💬 Если интересен подробный разбор Дадаты или других сервисов — пишите в комментариях. 🎯 Подписывайтесь, если хотите следить за применением AI-агентов в жизни и работе. --- Мой Telegram канал: https://t.me/MyAIBackOffice Внедряй AI. Автоматизируй жизнь. #MyAIBackOffice #AIагенты #n8n #поисковыйагент #автоматизация #опенсорс #искусственныйинтеллект