1 В избранное 0 Ответвления 0

OSCHINA-MIRROR/dtstack_dev_0-taier

Присоединиться к Gitlife
Откройте для себя и примите участие в публичных проектах с открытым исходным кодом с участием более 10 миллионов разработчиков. Приватные репозитории также полностью бесплатны :)
Присоединиться бесплатно
Клонировать/Скачать
README.md 5.7 КБ
Копировать Редактировать Web IDE Исходные данные Просмотреть построчно История
gitlife-traslator Отправлено 29.11.2024 11:17 6b58491

Taier

Распределённая система диспетчеризации

Taier Logo

Taier

Распределённая система диспетчеризации

Сайт компании | Документация

中文 | English

Введение

Taier, произносится как «тайа», — один из древних китайских прославленных мечей.

Taier — это распределённая система диспетчеризации, которая фокусируется на различных задачах, представленных и запланированных. Она направлена на снижение стоимости ETL, чёткое представление сложных зависимостей между задачами и сокращение трудозатрат на представление, планирование и эксплуатацию.

В Taier нет необходимости беспокоиться о сложных зависимостях между задачами или базовой архитектуре платформы больших данных, поэтому вы можете уделять больше внимания бизнесу.

Taier предоставляет универсальную платформу больших данных для представления задач, планирования задач, эксплуатации, технического обслуживания и представления показателей.

Основные функции Taier:

  • Простота расширения;
  • Визуализация конфигурации для DAG;
  • Наличие IDE-платформы для разработки, предназначенной для пользователей больших данных;
  • Поддержка разработки собственных плагинов;
  • Несколько режимов задач, включая режим руководства и режим сценария;
  • Поддержка зависимостей между восходящими и нисходящими задачами;
  • Поддержка пакетных и потоковых задач;
  • Интеграция различных версий Hadoop;
  • Лёгкая интеграция с Flink Standalone;
  • Полная безопасность и неинвазивность для среды кластера;
  • Изоляция по арендаторам и кластерам;
  • Поддерживает аутентификацию Kerberos;
  • Различные версии для задач;
  • Поддерживает пользовательские параметры для задачи;
  • Мониторинг в реальном времени ресурсов кластера;
  • Индикаторы данных представлены в режиме реального времени;
  • Ограничение ресурсов задачи.

Архитектура

architecture

Быстрый старт

В Docker

$ wget https://raw.githubusercontent.com/DTStack/Taier/master/docker-compose.yml
$ docker-compose up -d

Онлайн-просмотр

Разработка задач

main

Задачи

Задачи Документация
Рабочий поток Документация
Синхронизация данных Документация
Получение данных Документация
Flink Документация
Shell Документация
Python Документация
Spark SQL Документация
Hive SQL Документация
Flink SQL Документация

Опубликовать ( 0 )

Вы можете оставить комментарий после Вход в систему

1
https://api.gitlife.ru/oschina-mirror/dtstack_dev_0-taier.git
git@api.gitlife.ru:oschina-mirror/dtstack_dev_0-taier.git
oschina-mirror
dtstack_dev_0-taier
dtstack_dev_0-taier
master