zhihu-crawler — это проект краулера на основе Java, основная функция которого заключается в сборе основных данных пользователей Zhihu.

Спайдер на основе Java/Groovy, который упрощает сбор данных.

Практика по созданию различных веб-сайтов и ботов для сбора данных с сайтов электронной коммерции. Включает в себя: товары с Taobao, публичные аккаунты WeChat, отзывы с Dazhongdianping, сайты поиска работы, Xiaoyu, задачи от Alibaba, Scrapy с Blogspot, ...

Инструмент для сбора URL-адресов. Поддерживает пользовательские правила сбора для адаптации к различным поисковым системам.

Ещё один Java-краулер.

Node.js Rss Spider

Используйте объединённую структуру веб-краулера на основе asyncio и aiohttp!

**GetZPInfo — инструмент для сбора информации о вакансиях** Это программное обеспечение для парсинга, предназначенное для сбора данных о вакансиях с определённого сайта по подбору персонала и вывода их на экран LED-панели, подключённой к последовательн...

Простой паук для сети на C++, использующий Google Gumbo для парсинга HTML и LibCurl для работы с сетью.

**Скачивание статей с CSDN и их преобразование в формат MD.**

Полностью автоматический скрипт для сбора информации о доменных именах, легко расширяемый, с полными комментариями.

Проект краулера на основе фреймворка Scrapy.