Проблемы выбора задачи для периодического задания у краулеров. Поля не реагируют на изменения в краулерах.
Проблема конфликта периодических заданий. Если установить одинаковое время для двух разных краулеров, может возникнуть ошибка. #515, #565.
Проблемы с журналом задач. Разные задачи, запущенные одновременно, могут записывать данные в один и тот же файл журнала. #577.
Неполный список параметров задач.
Версия 0.4.6 (2020-02-13)
Node.js SDK. Пользователи могут применять SDK к своим краулерам на Node.js.
Оптимизация управления журналами. Поиск по журналам, выделение ошибок, автоматическая прокрутка.
Оптимизация процесса выполнения задач. После запуска задачи пользователь может перейти на страницу с подробной информацией о задаче.
Улучшение отображения задач. В таблице последних задач на странице с подробностями о краулере появился столбец «Параметры». #295.
Улучшения списка краулеров. На странице со списком краулеров появились поля «Дата обновления» и «Дата создания». #505.
Заполнитель загрузки страницы.
Потеря фокуса при настройке периодических задач. #519.
Невозможно загрузить краулер с помощью CLI-инструмента. #524.
Версия 0.4.5 (2020-02-03)
Интерактивное руководство. Помогает пользователям понять основные функции Crawlab.
Добавление глобальных переменных среды. Можно задать глобальные переменные среды и передать их во все программы краулера. #177.
Проекты. Позволяет пользователям связывать краулеры с проектами. #316.
Примеры краулеров. При инициализации автоматически добавляются примеры краулеров. #379.
Оптимизированное управление пользователями. Ограничение прав администраторов. #456.
Настройка страницы.
Оптимизация страницы результатов задачи.
Ошибка при поиске файла краулера. #485.
Переход при нажатии кнопки удаления. #480.
Нельзя создать файл в пустом краулере. #479.
Ошибки при загрузке результатов. #465.
Crawlab-SDK CLI-ошибка. #458.
Проблемы обновления страницы. #441.
Результаты не поддерживают JSON. #202.
Исправление ошибки при удалении краулера и получении всех краулеров.
Исправление предупреждений i18n.
Версия 0.4.4 (2020-01-17)
Уведомления по электронной почте. Пользователи могут отправлять уведомления по электронной почте.
Уведомления от DingTalk. Пользователи могут отправлять сообщения роботам DingTalk.
Уведомления от WeChat Work. Пользователи могут отправлять сообщения корпоративным роботам WeChat.
Оптимизация API-адресов. В интерфейсе появилась поддержка относительных путей, поэтому пользователям не нужно указывать CRAWLAB_API_ADDRESS
.
Совместимость с SDK. Пользователи могут интегрировать Crawlab с Scrapy или другими универсальными краулерами через SDK.
Улучшенное управление файлами. Появилась древовидная боковая панель для более удобного редактирования файлов.
Расширенные возможности Cron для периодических задач. Пользователи могут редактировать периодические задачи с помощью визуального редактора Cron.
nil returned
.
Появление ошибок при использовании HTTPS.
При запуске настраиваемого краулера из списка краулеров возникает ошибка.
Отсутствует проверка формы при загрузке файла краулера.
Версия 0.4.3 (2020-01-07)
Установка зависимостей. Пользователи могут устанавливать и удалять зависимости, а также добавлять языки программирования (пока поддерживается только Node.js) в интерфейсе платформы.
Предварительная установка языков программирования в Docker. Пользователи Docker могут предварительно установить Node.js, установив CRAWLAB_SERVER_LANG_NODE
в значение Y
.
Список периодических задач на странице краулера. Пользователи могут просматривать, добавлять и редактировать периодические задачи на странице краулера. #360.
Выражение Cron соответствует Linux. Выражение сокращено с 6 до 5 элементов, чтобы соответствовать стандарту Linux.
Включение и отключение периодических задач. Пользователи могут включать и отключать периодические задачи. #297.
Оптимизация управления задачами. Пользователи могут массово удалять задачи. #341.
Оптимизация управления краулерами. Пользователи могут фильтровать и сортировать краулеры на странице списка краулеров.
Добавлен китайский CHANGELOG.
Кнопка «Добавить звезду» на GitHub в верхней части страницы.
Периодические задачи. #423.
Сбой из-за проблем с сетью. #340.
Периодическая задача не выполняется должным образом.
Перемещение списка периодических задач.
Ошибка перехода при нажатии на кнопку обновления.
Версия 0.4.2 (2019-12-26)
Отказ от ответственности. Добавлен отказ от ответственности.
Получение версии через API. #371.
Разрешение регистрации через конфигурацию. #346.
Возможность добавления новых пользователей.
Более продвинутое управление файлами. Пользователи могут добавлять, редактировать, переименовывать и удалять файлы кода. #286.
Упрощение процесса создания краулеров. Пользователи могут создавать пустые настраиваемые краулеры перед загрузкой zip-файлов.
Оптимизация управления задачами. Пользователи могут выбирать условия для фильтрации задач. #341.
Версия 0.4.1 (2019-12-13)
Spiderfile оптимизирован. Этап заменён на словарь. #358.
Обновлена статистика Baidu.
Crawlab: изменения в версиях 0.4.0, 0.3.5, 0.3.1, 0.3.0, 0.2.4, 0.2.3, 0.2.2
В тексте описаны изменения и улучшения в системе Crawlab, а также исправления ошибок в разных версиях программы.
Основной язык текста — русский.
Текст не содержит специальных символов или непечатаемых символов.
Вы можете оставить комментарий после Вход в систему
Неприемлемый контент может быть отображен здесь и не будет показан на странице. Вы можете проверить и изменить его с помощью соответствующей функции редактирования.
Если вы подтверждаете, что содержание не содержит непристойной лексики/перенаправления на рекламу/насилия/вульгарной порнографии/нарушений/пиратства/ложного/незначительного или незаконного контента, связанного с национальными законами и предписаниями, вы можете нажать «Отправить» для подачи апелляции, и мы обработаем ее как можно скорее.
Опубликовать ( 0 )