Фон

В 2008 году компания Alibaba начала использовать MySQL для поддержки своих бизнес-операций. Разработали промежуточное ПО и инструменты, связанные с MySQL, такие как Cobar/TDDL (в настоящее время продукт DRDS от Alibaba Cloud), которые решали проблему недостаточной расширяемости одиночного сервера Oracle. В то же время это вызвало волну проектов по переходу от Oracle к MySQL, и проект Yugong был создан с целью помочь пользователям выполнить миграцию данных из Oracle в MySQL и сделать важный шаг в переходе от Oracle к MySQL.

Проект

Название: Yugong

Перевод: «Юй Гун передвинул горы»

Язык: чистая Java-разработка

Назначение: миграция базы данных (в настоящее время поддерживает Oracle / MySQL / DRDS)

Весь процесс миграции данных делится на две части:

1. Полная миграция.
2. Инкрементальная миграция.

Процесс включает:

1. Сбор инкрементных данных (создание инкрементальных материализованных представлений для таблиц Oracle).
2. Полное копирование.
3. Инкрементальное копирование (можно параллельно проверять данные).
4. Остановка записи в исходной базе данных и переключение на новую базу данных.

Архитектура:

Описание:

1. Один контейнер Jvm соответствует нескольким экземплярам, каждый экземпляр соответствует задаче миграции одной таблицы.
2. Экземпляр состоит из трёх частей: a. extractor — извлекает данные из исходной базы данных, может быть реализован как для полной, так и для инкрементальной миграции. b. translator — преобразует данные исходной базы в соответствии с требованиями целевой базы. c. applier — обновляет данные в целевой базе, может быть реализовано для полной, инкрементальной или сравнительной миграции.

Схема проекта: DevDesign.

Быстрый старт: QuickStart.

Управление эксплуатацией: AdminGuide.

Отчёт о производительности: Performance.

Связанные материалы:

1. Краткое введение в Yugong PPT: ppt.
2. Распределённая реляционная база данных DRDS (предшественник — Cobar/TDDL от компании Alibaba, основная концепция — разделение MySQL на несколько баз данных и таблиц).

Коммуникация и взаимодействие:

1. Подробности см. на домашней странице wiki.