Приложение для универсального парсинга на основе WebMagic, главное преимущество которого — простота и удобство использования. После настройки легко извлекает данные.
Система краулеров на основе Java может собирать данные о видео с основных китайских видеоплатформ. В настоящее время поддерживаются платформы: Douban, Meituan, IMDB, Baidu Baike, Youku и Tencent Video.
Webmagic — это удобный для вторичной разработки и не требующий настройки фреймворк для краулеров, предоставляющий простой и гибкий API. Для создания краулера с помощью Webmagic требуется написать лишь небольшое количество кода.
Инструмент для веб-скрейпинга: выберите подходящий веб-сайт, укажите URL, и инструмент автоматически выполнит скрап данных и создаст шаблон. Все просмотренные веб-сайты могут быть использованы мной!