Введение

Kettle — это открытый ETL-инструмент, написанный на Java, который может работать на различных системах. Он является легковесным и не требует установки, обеспечивает эффективное и надежное извлечение данных, а также прост в использовании благодаря множеству компонентов для выполнения различных типов преобразований данных. Этот инструмент основан на открытом исходном коде Kettle и предоставляет ряд часто используемых функций для управления задачами Kettle. Он удовлетворяет большинству случаев управления задачами Kettle и просмотра логов выполнения.

Инструмент kettle-monitor-platform использует Ruoyi как основу для административной системы, на которой строятся необходимые функции. Разработка осуществляется на основе версии Kettle (kettle-8.3.0.0-371).

Основные технологии, применяемые в проекте: Spring Boot, MyBatis, Druid, Thymeleaf, Kettle-8.

Описание функциональности 1. Управление преобразованиями: конфигурация и управление преобразованиями, возможность редактирования имени преобразования и выбора параметров, запуск.

2. Управление задачами Job: конфигурация и управление задачами Job, возможность редактирования имени задачи и выбора параметров, запуск.

3. Конфигурация параметров: конфигурация переменных параметров для выполнения преобразований и задач.

4. Управление узлами сервиса: конфигурация узлов Kettle, управление состоянием узлов.

5. Классификация групп параметров: конфигурация групп параметров, одна группа может содержать несколько параметров.

6. Просмотр логов выполнения: просмотр деталей выполненной задачи и прекращение выполнения текущих задач.

7. Расписание задач: онлайн добавление, изменение и удаление расписаний для выполнения преобразований, задач Job и других задач, включая логи выполнения.#### Настройка среды разработки

8. Подготовка окружения

   • JDK >= 1.8 (рекомендовано использование версии 1.8)
   • MySQL >= 5.5.0 (рекомендовано использование версии 5.7)
   • Maven >= 3.0
   • Tomcat >= 8.4

9. Создайте базу данных и выполните несколько SQL-скриптов из папки doc.

10. Измените конфигурационный файл application-dev.yml в директории resource модуля ruoyi-admin для настроек соединения с базой данных.

4. Для запуска в среде разработки IDEA запустите модуль ruoyi-admin через com.deodar.KettleMonitorApplication.
5. При развертывании и запуске в Tomcat необходимо скопировать каталог simple-jndi из Kettle в {tomcat_home}\bin, чтобы избежать ошибок из-за отсутствия указанного каталога.
6. Адрес доступа к проекту: http://127.0.0.1:8080/kettle-monitor

Скриншоты системы

Общение

QQ: Добро пожаловать в нашу QQ-группу для общения 743155099. Поскольку старая группа была заблокирована за нарушение правил, все документы и материалы внутри группы были потеряны.

Благодарность

• Благодарим RuoYi за систему управления back-end
• Благодарим kettleweb за web-платформу для интеграции данных