CECS: Трансформацията на един Proxmox клъстер в автономен cloud

CECS Architecture Notes

Cloud Empire Control System — Technical Architecture Specification

Transforming a Proxmox Cluster into an Autonomous Private Cloud

 

1. Introduction

CECS е официалната абревиатура на платформата Live Host Platform. Пълното име е:

Cloud Empire Control System („Облачна имперска контролна система“)

CECS е архитектурен модел, чиято цел е да трансформира стандартен Proxmox клъстер в:

  • автономна

  • самовъзстановяваща се

  • zero‑downtime

  • HA (High Availability)

  • мигрируема

  • независима от хардуер

частна cloud платформа, аналогична по поведение на AWS, Google Cloud и Azure.

CECS не е „домашен сървър“. CECS не е „няколко VM‑и“. CECS е частен cloud, който:

  • не спира

  • не губи данни

  • не зависи от един диск

  • не зависи от един нод

  • не зависи от един storage

  • не зависи от един IP

  • не зависи от един човек

  • може да се обновява без downtime

  • може да се разширява без прекъсване

 

2. Glossary — Обяснение на всички съкращения

2.1 CECS — Cloud Empire Control System

Официалното име на платформата. Функционира като частен cloud control‑plane.

 

2.2 HA — High Availability (Висока Наличност)

High Availability означава архитектура, в която услугите продължават да работят дори при отказ на компонент.

HA гарантира:

  • липса на downtime при отпадане на нод

  • автоматично прехвърляне на VM към друг нод

  • непрекъснато предоставяне на услуги

  • устойчивост към хардуерни повреди

В CECS HA се постига чрез:

  • централен storage

  • мигрируеми VM

  • реплицирани control‑plane компоненти

  • автоматични health‑checks

 

2.3 NFS — Network File System

Мрежов протокол за споделен storage. Позволява множество сървъри да използват един и същ файлов ресурс.

В CECS NFS се използва за:

  • централизирано съхранение на VM дискове

  • live migration

  • HA функционалност

 

2.4 ZFS — Zettabyte File System

Файлова система и volume manager с:

  • checksums

  • snapshots

  • replication

  • self‑healing

ZFS предоставя:

  • висока надеждност

  • защита от silent corruption

  • бързи snapshot‑и

  • ефективна репликация

В CECS ZFS е backend за NFS.

 

2.5 Directus

Headless data platform, която предоставя API слой върху Postgres.

В CECS Directus е:

  • control‑plane UI

  • API за конфигурации

  • централен метаданни слой

 

2.6 Directus HA

„Directus да е HA“ означава:

  • да работи на повече от един нод

  • да бъде мигрируем

  • да не зависи от локален диск

  • да продължи да работи при отказ на нод

  • да използва централен storage

  • да разчита на HA Postgres

 

2.7 Nomad

HashiCorp Nomad е scheduler за:

  • контейнери

  • услуги

  • batch jobs

В CECS Nomad управлява:

  • разпределението на workload‑и

  • autoscaling

  • rolling updates

 

2.8 Consul

HashiCorp Consul предоставя:

  • service discovery

  • health checks

  • key/value store

В CECS Consul е част от control‑plane.

 

2.9 Live Migration

Процес, при който VM се премества между нодове без прекъсване.

Изисква:

  • централен storage (NFS/ZFS)

  • синхронизация на RAM

  • Proxmox HA stack

 

2.10 Background Live Copy

Техника за копиране на VM диск, докато VM работи.

Позволява:

  • миграция без downtime

  • преминаване от local‑lvm към NFS/ZFS

  • безопасен cutover

 

2.11 Cutover

Кратка операция (5–15 минути), при която:

  • VM се спира

  • storage се пренасочва към новия диск

  • VM се стартира от новото място

 

2.12 Control‑Plane

Логическият слой, който управлява платформата.

В CECS включва:

  • Nomad

  • Consul

  • Postgres

  • Directus

  • Auth services

  • Registry

Control‑plane трябва да бъде HA и мигрируем.

 

3. Current Architecture State

CECS клъстерът преминава през критична трансформация:

Преместване на критичните VM от local‑lvm към централен NFS/ZFS storage.

Това е основата на:

  • HA

  • live migration

  • zero‑downtime updates

  • autoscaling

  • disaster recovery

 

4. Critical Component: VM 240

VM 240 е централният мозък на CECS. Съдържа:

  • Postgres

  • Directus

  • Nomad state

  • Consul state

  • Docker registry

  • Storage backend

  • API

  • Auth

  • всички core services

VM 240 не може да остане на local‑lvm, защото:

  • няма миграция

  • няма HA

  • няма recovery

  • отказ на диск = отказ на платформата

 

5. Target Architecture: CECS v7.0

CECS v7.0 цели да предостави функционалност, аналогична на AWS/GCP.

5.1 Compute Layer

  • мигрируеми VM

  • HA failover

  • autoscaling

5.2 Storage Layer

  • централен NFS/ZFS

  • репликация

  • snapshots

  • self‑healing

5.3 Control‑Plane Layer

  • HA Postgres

  • HA Directus

  • HA Nomad

  • HA Consul

  • HA Mailcow

  • HA Ziti

5.4 Operations Layer

  • zero‑downtime updates

  • rolling upgrades

  • automated recovery

 

6. Migration Plan

6.1 Remove Single Point of Failure (local‑lvm)

Local‑lvm е рисков storage:

  • отказ на диск → загуба на VM

  • отказ на нод → загуба на VM

  • няма миграция

  • няма HA

 

6.2 Move Critical VM to NFS/ZFS

Това позволява:

  • live migration

  • HA

  • snapshots

  • backups

  • recovery

  • balancing

 

6.3 Control‑Plane HA

Nomad + Consul + Postgres трябва да бъдат:

  • мигрируеми

  • независими от hardware

  • реплицирани

 

6.4 Mail HA

Mailcow трябва да може:

  • да се премества между нодове

  • да работи при отказ

  • да използва централен storage

 

6.5 CECS Autonomous Mode

CECS + агент = самовъзстановяваща се платформа:

  • автоматично откриване на проблеми

  • автоматично възстановяване

  • автоматично преместване на VM

  • автоматично управление на конфигурации

 

7. Why Background Live Copy Is Required

VM 240 е критична. Тя не може да бъде:

  • спирана

  • мигрирана директно

  • копирана с downtime

  • рискувана

Background live copy позволява:

  • копиране на диска, докато VM работи

  • без прекъсване

  • без риск

  • без промяна на конфигурацията

  • без миграция

  • без cutover

Cutover ще бъде кратък и контролиран.

 

8. Current Status

  • Mail работи

  • Платформата работи

  • VM 240 работи

  • Background copy върви

  • Няма downtime

  • Няма риск

  • Няма промени по конфигурацията

  • Няма миграция

  • Няма cutover

 

9. Next Steps

  1. Изчакване на background copy

  2. Изпълнение на cutover

  3. Преместване на VM 240 на NFS/ZFS

  4. Активиране на HA

  5. Преминаване към автономен CECS режим

 

10. Summary

CECS трансформира Proxmox клъстер в:

  • автономен

  • HA

  • мигрируем

  • zero‑downtime

  • самовъзстановяващ се

  • независим от хардуер

VM 240 става:

  • мигрируема

  • HA

  • независима от local‑lvm

  • част от истински cloud control‑plane

CECS v7.0 е частен cloud на ниво AWS/GCP, но изцяло мой.