Claude Code собирает базу лидов через open-source scrapegraph-ai

Как повторить

1. Поставить Claude Code (если ещё не стоит) и в терминале дать ссылку на репозиторий: https://github.com/ScrapeGraphAI/Scrapegraph-ai и команду Install this. Claude сам прогонит pip install scrapegraphai и playwright install - это обычная способность Claude Code ставить что угодно по ссылке, а не фишка конкретно этого инструмента.
2. Выбрать LLM-бэкенд для извлечения: платный (OpenAI/Anthropic/Gemini, по токену за карточку) или локальный через Ollama, если нужен настоящий нулевой счёт за экстракцию.
3. Попросить Claude написать Python-скрипт на базе scrapegraphai под конкретные каталоги. Какие именно классы библиотеки он задействует (SmartScraperGraph, SearchGraph и т.п.) в ролике не видно, это восстановлено по смыслу их API.
4. Отдельно подключить запись в Google Sheets - через сервисный аккаунт Google или MCP-коннектор для Sheets, в саму scrapegraphai это не входит.
5. Если нужен ежедневный прогон в 7 утра, как в ролике - обернуть скрипт в cron или launchd самому, планировщика в библиотеке нет.

Ссылки и ресурсы

• ScrapeGraphAI/Scrapegraph-ai - сам open-source скрапер на Python, MIT-лицензия, сейчас 32 588 звёзд (проверено через GitHub API). Адрес виден прямо на кадре f_13.jpg, проверен curl - HTTP 200.
• ScrapeGraphAI MCP-сервер для Claude Code - официальная настройка одной командой: claude mcp add --transport http sgai https://mcp.scrapegraphai.com/mcp, вход через claude mcp login sgai (OAuth, Google) или ключ SGAI_API_KEY в заголовке Authorization: Bearer. Внутри инструменты search, crawl_start/crawl_get_status и extract - то есть тот же поиск+краулинг+извлечение, что и в ролике, но записи в Google Sheets среди них нет, это отдельный шаг. В самом ролике сервер не упомянут, но это и есть тот реальный «одной командой», если не хочешь собирать пайплайн руками. Тарифы (проверено на scrapegraphai.com/pricing): Free - 500 кредитов разово и всё, дальше Starter $20/мес за 10 000 кредитов, Growth $100/мес за 100 000, Pro $500/мес за 750 000.
• Apify - конкурент для сравнения цены в ролике ($0.004/компания), прямой ссылки в материале нет, сервис общеизвестный (apify.com).
• Ссылка, которую автор обещает прислать за комментарий «Клод», не найдена: закрыта за вовлечённостью в Instagram, в материале её попросту нет.

Проверочный прогон

Сначала попроси Claude Code собрать 10-20 компаний из одного каталога, а не три тысячи сразу. Правильный результат - таблица с реальными названиями, именами и email, которые можно руками сверить по тому же каталогу. А если в строках мусор, дубли или email, которых на сайте нет вообще - модель галлюцинирует вместо того, чтобы читать страницу, и тогда нужно сузить промпт или сменить LLM-бэкенд на более сильный.

Оговорки

• Главный трюк ролика, «дай Claude ссылку и скажи install», это общая способность Claude Code ставить что угодно по URL, не особенность именно этого инструмента.
• «$0.00 за компанию» верно только при локальной модели на своём железе. Официальный путь для Claude Code - платный MCP-сервер ScrapeGraphAI с кредитным лимитом и тарифами от $20/мес, об этом в ролике ни слова.
• Цифры в самом ролике, собственно, не бьются друг с другом: звёзды репозитория - 25 512 на одном кадре и 28 999 на другом в одном и том же видео, число найденных компаний скачет 2 340 / 2 418 / 3 412 на разных кадрах. Похоже на склейку нескольких разных прогонов, а не один честный снятый терминал.
• Запись в Google Sheets и ежедневный крон по расписанию в scrapegraphai не входят, собирать их нужно отдельно.
• Массовый сбор email с бизнес-каталогов упирается в их ToS и антибот-защиту - автор не говорит ни слова про прокси или лимиты запросов, хотя именно это Apify продаёт как часть сервиса.
• Руками пайплайн целиком не воспроизводил: не ставил, не запускал, не проверял реальную точность извлечения email с живого каталога.