YangDocker

Автономно собранный кластер hadoop + spark + kafka + zookeeper + storm + hbase + hive + flume + mysql + redis, с одним главным и двумя репликами.

Пользовательское руководство

Сначала клонируйте проект на локальную машину, затем перейдите в директорию и запустите:

bash ./image.sh

Затем подождите, пока будут построены все необходимые образы.

Операционная система

ubuntu:16.04

Инструменты

Hadoop 2.6: Ссылка на скачивание

Hive 1.2.2: Ссылка на скачивание

Kafka 2.11: Ссылка на скачивание

JDK 1.8: Ссылка на скачивание

Scala 2.11.4: Ссылка на скачивание

Spark 1.6.0: Ссылка на скачивание

Zookeeper 3.4.5: Ссылка на скачивание

Hbase 0.98.6: Ссылка на скачивание

Flume 1.6.0: Ссылка на скачивание

mysql-connector 5.1.41: Ссылка на скачивание

Redis 2.8.3: Ссылка на скачивание

Storm 0.9.3: Ссылка на скачивание## Внимание

Поскольку все среды/установочные пакеты загружаются временно, процесс сборки может быть медленным, а образы могут быть большими.

Другое

Приглашаем к обсуждению через issue.

Ссылки

1. Сборка кластера для обработки больших данных с помощью Docker