1 В избранное 0 Ответвления 0

OSCHINA-MIRROR/mcar-scrapy-redis

Присоединиться к Gitlife
Откройте для себя и примите участие в публичных проектах с открытым исходным кодом с участием более 10 миллионов разработчиков. Приватные репозитории также полностью бесплатны :)
Присоединиться бесплатно
Клонировать/Скачать
HISTORY.rst 3.1 КБ
Копировать Редактировать Web IDE Исходные данные Просмотреть построчно История
Отправлено 16.03.2025 22:42 6b5fc76
======= История ======= .. комментарий:: метка bumpversion 0.6.3 (2016-07-03) ------------------ * Добавлены настройки ``REDIS_START_URLS_KEY``. * Исправлена сигнатура метода пауков ``from_crawler``. 0.6.2 (2016-06-26) ------------------ * Поддержка параметра ``redis_cls`` в настройках ``REDIS_PARAMS``. * Исправлена совместимость с Python 3.x. * Добавлены настройки ``SCHEDULER_SERIALIZER``. 0.6.1 (2016-06-25) ------------------ * **Нестабильная обратная совместимость:** теперь требуется явное указание настроек ``DUPEFILTER_CLASS``. * Добавлены настройки ``SCHEDULER_FLUSH_ON_START``. * Добавлены настройки ``REDIS_START_URLS_AS_SET``. * Добавлены настройки ``REDIS_ITEMS_KEY``. * Добавлены настройки ``REDIS_ITEMS_SERIALIZER``. * Добавлены настройки ``REDIS_PARAMS``. * Добавлен атрибут пауков ``REDIS_START_URLS_BATCH_SIZE`` для чтения начальных URL-ов порциями. * Добавлен класс ``RedisCrawlSpider``. 0.6.0 (2015-07-05) ------------------ * Обновлен код для совместимости со Scrapy 1.0. * Добавлен параметр командной строки ``-a domain=...`` для примерных пауков. 0.5.0 (2013-09-02) ------------------ * Добавлены настройки ``REDIS_URL`` для поддержки строки подключения Redis. * Добавлены настройки ``SCHEDULER_IDLE_BEFORE_CLOSE`` для предотвращения быстрого завершения паука при пустой очереди. По умолчанию значение равно нулю, что сохраняет предыдущее поведение. * Предварительное планирование запросов на основе отскraped элементов. * Эта версия является последней совместимой с Scrapy 0.24.x.0.4.0 (2013-04-19) ------------------ * Добавлены классы ``RedisSpider`` и ``RedisMixin`` как основные компоненты для создания пауков, работающих через очередь Redis. * Добавлена статистика очередей Redis. * Оставлено использование энкодера для обработки элемента без его преобразования в словарь.0.3.0 (2013-02-18) ------------------ * Добавлена поддержка различных типов очередей. * Изменено использование сериализации запросов с ``marshal`` на ``cPickle``. 0.2.0 (2013-02-17) ------------------ * Улучшена обратная совместимость. * Добавлен пример проекта. 0.1.0 (2011-09-01) ------------------ * Первый выпуск на PyPI.

Опубликовать ( 0 )

Вы можете оставить комментарий после Вход в систему

1
https://api.gitlife.ru/oschina-mirror/mcar-scrapy-redis.git
git@api.gitlife.ru:oschina-mirror/mcar-scrapy-redis.git
oschina-mirror
mcar-scrapy-redis
mcar-scrapy-redis
master