Перейти к основному содержимому

Подробно о кластеризации и репликации

Кластер NATS — больше, чем три соединённых сервера. Под связями работает механизм поиска соседей, выборов лидеров, согласования записей и синхронизации реплик. Эта глава разбирает его послойно, как при запуске настоящего кластера и наблюдении за ним.

Топологии создали формы: от одного сервера к east, суперкластеру и листовым узлам, оставив внутреннее устройство для этой главы. JetStream кратко показал устойчивость к потере узла: задать R=3, потерять сервер и продолжить работу. Здесь объясняется механизм согласования и репликации, обеспечивающий эти возможности.

Что вы получите​

  • Работающий кластер east из n1-east, n2-east, n3-east, обнаруживших друг друга через один начальный маршрут.
  • Поток ORDERS с R=3 и запись, прослеженную от публикации order-svc в orders.created через журнал лидера до фиксации кворумом, переживающей отказ сервера.
  • Модель пяти механизмов: маршруты формируют сеть, группы RAFT согласуют, кворум фиксирует записи, размещение выбирает серверы реплик, управление участниками безопасно меняет состав.
  • Команды просмотра лидеров, реплик и отставания, а также понимание отказов при эксплуатации.

Для кого эта глава​

Вы прочитали основные понятия, желательно также JetStream и топологии. Потоки, потребители, маршруты и кластеры предполагаются известными.

Знание алгоритмов согласования и репликации не требуется. Начнём с поиска одного сервера другим и постепенно перейдём к размещению и управлению участниками.

Как читать главу​

Каждая страница вводит не больше двух понятий и продолжает работу с тем же кластером. Сначала вы запускаете n1-east, n2-east, n3-east, затем выбираете лидера, реплицируете запись, размещаете поток по меткам и добавляете или удаляете участника. Имена серверов, ORDERS и полезная нагрузка не меняются.

Терминов много: лидер, ведомый, срок, кворум, фиксация, применение. Каждый определяется до использования, поэтому читайте по порядку. Длинные списки параметров и таймеров оставлены в справочнике; здесь объясняется необходимое для механизма.

Глава посвящена репликации внутри одного кластера. Обмен между кластерами — шлюзы, географическая привязка, трафик суперкластера — остаётся в Суперкластерах.

Карта главы​

СтраницаЧто вы узнаете
Формирование кластераЯвные начальные маршруты, неявное обнаружение и рост до полносвязной сети
RAFT и лидерыГруппы RAFT, лидеры метаданных и потоков, выборы
Репликация и R=3Фиксация записи кворумом, применение ведомыми и гарантии согласованности
РазмещениеОграничение реплик кластером и метками, перенос лидера
Масштабирование и управление участникамиДобавление с синхронизацией и безопасный вывод реплик без потери кворума
Желаемое состояние и эвакуацияНаблюдение за изменением состава, освобождение сервера одной командой и откат
Куда двигаться дальшеИтоги механизма и контрольный список

Серверы образуют сеть, выбирают лидеров, реплицируют записи, размещают реплики на нужных узлах и позволяют менять состав без потери согласованности.

Предварительные условия​

Вам понадобятся:

  • Три локальных процесса nats-server с JetStream, которые первая страница объединит в east. Один сервер не показывает работу согласования: для большинства нужно взаимодействие нескольких узлов.
  • CLI nats. Большинство примеров — конфигурация и команды администратора; для некоторых операций показаны JavaScript, Go, Python, Java, Rust и C#, задающие одинаковые реплики и размещение.
  • Системная учётная запись ($SYS) для команд nats server. Конфигурации главы её не создают: добавьте системного пользователя по главе безопасности и используйте его данные перед первым nats server list, info или report.

Откройте терминал и перейдите к формированию кластера.

См. также​