XCrawler — лёгкий и простой в обслуживании фреймворк для создания пауков на PHP.

Особенности:

• простота использования, есть подробная документация и примеры;
• поддерживает многопоточное сканирование;
• позволяет повторить попытку после сбоя, использовать прокси-серверы и продолжить сканирование с точки останова;
• предоставляет подробные журналы сканирования;
• может анализировать содержимое с помощью XPath или CSS-селекторов;
• имитирует поведение браузера, например, пользовательский агент, файлы cookie, отправку форм;
• использует надёжные библиотеки: HTTP-клиент на основе Guzzle, парсер DOM на основе Symfony/DomCrawler.

Установка:

composer require xcrawler/xcrawler

Документация:

Смотрите документацию по ссылке: https://xcrawler.yanshuju.com/docs/.

Общение:

Группа общения XCrawler: 790478771.

Лицензия:

XCrawler распространяется под лицензией MIT.