-
Notifications
You must be signed in to change notification settings - Fork 1
updates_encrypted_manifests
Stand: 5. Dezember 2025
Version: 1.0.0
Kategorie: Updates
Wie stellen wir sicher, dass:
- Release-Manifests verschlüsselt auf GitHub liegen
- Jede ThemisDB-Instanz einen eigenen Entschlüsselungsschlüssel in ihrer Datenbank hat
- Nur autorisierte Instanzen Manifests entschlüsseln können
┌──────────────────────────────────────────────────────────┐
│ GitHub Release (Public) │
├──────────────────────────────────────────────────────────┤
│ │
│ ┌────────────────────────────────────────────────┐ │
│ │ encrypted_manifest.json │ │
│ │ - Verschlüsselt mit AES-256-GCM │ │
│ │ - Signiert mit CMS/PKCS#7 │ │
│ │ - Öffentlich lesbar, aber nicht entschlüsselbar│ │
│ └────────────────────────────────────────────────┘ │
│ │
└──────────────────────────────────────────────────────────┘
│
│ HTTPS Download
▼
┌──────────────────────────────────────────────────────────┐
│ ThemisDB Instanz (z.B. Kunde A) │
├──────────────────────────────────────────────────────────┤
│ │
│ ┌────────────────────────────────────────────────┐ │
│ │ RocksDB (Lokal) │ │
│ │ ┌──────────────────────────────────────┐ │ │
│ │ │ KEK (Key Encryption Key) │ │ │
│ │ │ - Master-Schlüssel der Instanz │ │ │
│ │ │ - Verschlüsselt MDK │ │ │
│ │ └──────────────────────────────────────┘ │ │
│ │ ┌──────────────────────────────────────┐ │ │
│ │ │ MDK (Manifest Decryption Key) │ │ │
│ │ │ - Verschlüsselt mit KEK gespeichert │ │ │
│ │ │ - Entschlüsselt Release-Manifests │ │ │
│ │ └──────────────────────────────────────┘ │ │
│ └────────────────────────────────────────────────┘ │
│ │
│ ┌────────────────────────────────────────────────┐ │
│ │ ManifestEncryption │ │
│ │ 1. Download encrypted_manifest.json │ │
│ │ 2. Verify CMS signature (public) │ │
│ │ 3. Decrypt with local MDK │ │
│ │ 4. Parse and validate manifest │ │
│ └────────────────────────────────────────────────┘ │
│ │
└──────────────────────────────────────────────────────────┘
- Zweck: Master-Schlüssel für die ThemisDB-Instanz
- Speicherort: RocksDB, verschlüsselt mit PKI oder HSM
- Lebensdauer: Permanent, außer bei Rotation
- Verwendung: Verschlüsselt alle DEKs (Data Encryption Keys)
- Zweck: Entschlüsselung von Release-Manifests
- Speicherort: RocksDB, verschlüsselt mit KEK
- Lebensdauer: Permanent pro Instanz
- Verwendung: Nur für Manifest-Entschlüsselung
- Zweck: Verschlüsselung von Release-Manifests (Build-Zeit)
- Speicherort: Sicher beim Release-Team/CI
- Lebensdauer: Pro Release oder rotiert
- Verwendung: Verschlüsselt Manifests vor GitHub-Upload
# 1. Build Release
make release VERSION=1.2.0
# 2. Generate Manifest
./tools/generate_manifest.sh \
--version 1.2.0 \
--release-dir ./build/release
# Output: manifest.json (plaintext)
# 3. Encrypt Manifest
./tools/encrypt_manifest.sh \
--input manifest.json \
--output encrypted_manifest.json \
--key-id manifest_encryption_key_v1
# Output: encrypted_manifest.json
{
"schema_version": 1,
"encryption_algorithm": "AES-256-GCM",
"key_id": "manifest_decryption_key",
"key_version": 1,
"encrypted_blob": {
"key_id": "manifest_decryption_key",
"key_version": 1,
"iv": "YWJjZGVmZ2hpams=",
"ciphertext": "...",
"tag": "..."
},
"version": "1.2.0", // Public metadata
"tag_name": "v1.2.0",
"is_critical": true
}
# 4. Sign Encrypted Manifest (CMS/PKCS#7)
openssl cms -sign \
-in encrypted_manifest.json \
-out encrypted_manifest.json.sig \
-signer release_cert.pem \
-inkey release_key.pem
# 5. Upload to GitHub Release
gh release upload v1.2.0 \
encrypted_manifest.json \
encrypted_manifest.json.sig# Beim ersten Start einer ThemisDB-Instanz
themis_server --init
# Intern:
1. KEK initialisieren (PKIKeyProvider)
2. MDK generieren und mit KEK verschlüsseln
3. MDK in RocksDB speichern// Pseudocode
void initializeInstance() {
// 1. Initialize KeyProvider with KEK
auto key_provider = std::make_shared<PKIKeyProvider>(
pki_client, storage, "themisdb_instance_1"
);
// 2. Initialize FieldEncryption
auto field_encryption = std::make_shared<FieldEncryption>(key_provider);
// 3. Initialize ManifestEncryption
auto manifest_encryption = std::make_shared<ManifestEncryption>(
field_encryption, key_provider
);
// 4. Generate and store MDK
if (!manifest_encryption->hasManifestKey()) {
uint32_t version = manifest_encryption->initializeManifestKey();
LOG_INFO("Initialized manifest key v{}", version);
}
}// 1. Download encrypted manifest from GitHub
std::string encrypted_data = downloadFromGitHub(
"https://github.com/makr-code/ThemisDB/releases/download/v1.2.0/encrypted_manifest.json"
);
// 2. Verify signature (public operation, before decryption)
std::string signature = downloadFromGitHub(
"https://github.com/makr-code/ThemisDB/releases/download/v1.2.0/encrypted_manifest.json.sig"
);
bool verified = manifest_encryption->verifyEncryptedManifestSignature(
encrypted_data, signature, release_certificate
);
if (!verified) {
throw SecurityException("Manifest signature verification failed");
}
// 3. Decrypt manifest with local MDK
ReleaseManifest manifest = manifest_encryption->decryptManifest(encrypted_data);
// 4. Validate manifest content
if (!validateManifest(manifest)) {
throw ValidationException("Invalid manifest content");
}
// 5. Proceed with update...Problem: Manifests enthalten sensible Informationen
- Dateinamen und Pfade
- Build-Commits und interne Metadaten
- Potentiell Sicherheitsdetails
Lösung: AES-256-GCM Verschlüsselung
- Nur autorisierte Instanzen können entschlüsseln
- Öffentlich auf GitHub, aber geschützt
Problem: Manipulierte Manifests könnten schadhafte Updates liefern
Lösung: Mehrschichtige Validierung
- CMS-Signatur auf verschlüsseltem Manifest (öffentlich prüfbar)
- GCM Authentication Tag (Integritätsschutz)
- Manifest-Hash nach Entschlüsselung
- Datei-Hashes (SHA-256) für jede Datei
Problem: Nur legitime Releases dürfen installiert werden
Lösung: Digitale Signaturen
- Release-Team signiert mit PKI-Zertifikat
- Signatur wird vor Entschlüsselung geprüft
- Certificate Chain Verification bis zum Root CA
Problem: Kompromittierung einer Instanz
Lösung: Instanz-spezifische Schlüssel
- Jede ThemisDB-Instanz hat eigenen MDK
- KEK schützt MDK in Datenbank
- HSM-Integration für höchste Sicherheit
# Instanz A
themis_server --init
# Generiert: MDK_A (gespeichert in DB_A)
# Instanz B
themis_server --init
# Generiert: MDK_B (gespeichert in DB_B)Wichtig: MDK_A ≠ MDK_B
- Jede Instanz hat eigenen Schlüssel
- Kompromittierung von A gefährdet nicht B
Wie erhalten Instanzen den gleichen MEK?
Option 1: Symmetric Release Encryption (Aktuell)
- Ein MEK für alle Releases
- Jede Instanz bekommt MEK bei Installation
- Problem: Alle Instanzen teilen gleichen Schlüssel
Option 2: Asymmetric Per-Instance Encryption (Besser)
- Jede Instanz hat RSA-Schlüsselpaar
- Public Key registriert bei Release-Server
- Manifest verschlüsselt mit Public Keys aller Instanzen
- Problem: Skaliert nicht bei vielen Instanzen
Option 3: Hybrid Encryption (Beste Lösung)
1. Release-Manifest mit symmetrischem Key verschlüsseln (MEK)
2. MEK mit Public Key jeder Instanz verschlüsseln
3. Alle verschlüsselten MEKs in Manifest einbetten
encrypted_manifest.json:
{
"encrypted_keys": [
{"instance_id": "A", "encrypted_mek": "..."},
{"instance_id": "B", "encrypted_mek": "..."}
],
"encrypted_data": "..." // Manifest encrypted with MEK
}
Jede Instanz:
1. Findet ihren encrypted_mek
2. Entschlüsselt MEK mit privatem Schlüssel
3. Entschlüsselt Manifest mit MEK
// Rotate MDK (z.B. nach Sicherheitsvorfall)
uint32_t new_version = manifest_encryption->initializeManifestKey();
LOG_INFO("Rotated to manifest key v{}", new_version);
// Alte Version bleibt für Entschlüsselung alter Manifests
// Neue Version für zukünftige Verschlüsselung// Export für Disaster Recovery
std::string encrypted_bundle = manifest_encryption->exportManifestKey(
"secure_backup_password_123"
);
// Speichern an sicherem Ort (z.B. Vault, Offline-Storage)
saveToSecureLocation(encrypted_bundle);
// Restore nach Datenverlust
manifest_encryption->importManifestKey(
encrypted_bundle,
"secure_backup_password_123"
);// In UpdateChecker::checkForUpdates()
auto latest_release = fetchLatestRelease();
// Download encrypted manifest
std::string encrypted_manifest_url =
latest_release.download_url + "/encrypted_manifest.json";
std::string encrypted_data = httpGet(encrypted_manifest_url);
// Decrypt and parse
try {
ReleaseManifest manifest = manifest_encryption_->decryptManifest(encrypted_data);
// Store in ManifestDatabase
manifest_db_->storeManifest(manifest);
// Continue with update check...
} catch (const DecryptionException& e) {
LOG_ERROR("Failed to decrypt manifest: {}", e.what());
// Fall back to public manifest if available
}// In ManifestDatabase::storeManifest()
bool ManifestDatabase::storeManifest(const ReleaseManifest& manifest) {
// Manifests werden entschlüsselt gespeichert
// (bereits in der DB verschlüsselt durch RocksDB encryption-at-rest)
std::string key = manifest.version;
std::string value = manifest.toJson().dump();
storage_->Put(cf_manifests_, key, value);
return true;
}Kunde A: ThemisDB in eigenem Rechenzentrum
- Eigener MDK in lokaler DB
- KEK gesichert mit HSM
- Updates automatisch entschlüsselt
Kunde B: ThemisDB in AWS
- MDK in RDS (encrypted-at-rest)
- KEK in AWS KMS
- Updates via S3 Gateway
SaaS-Provider: Viele Kunden auf einer Plattform
- Ein MDK pro Tenant-Datenbank
- Zentrale Manifest-Verteilung
- Audit-Trail pro Tenant
-
End-to-End Vertraulichkeit
- Manifest verschlüsselt auf GitHub
- Verschlüsselt während Download
- Entschlüsselt nur in autorisierter Instanz
-
Defense in Depth
- Signatur-Verifikation (Authentizität)
- Verschlüsselung (Vertraulichkeit)
- Hash-Checks (Integrität)
-
Compliance-Ready
- DSGVO: Verschlüsselung von Metadaten
- SOC 2: Key Management und Rotation
- ISO 27001: Kryptographische Controls
-
Flexible Deployment
- On-Premise mit eigenem KEK
- Cloud mit KMS-Integration
- HSM für höchste Sicherheit
- ✅
ManifestEncryptionKlasse implementiert - ✅
EncryptedManifestDatenstruktur definiert - ⏳ Integration in
UpdateChecker - ⏳ Integration in
ManifestDatabase - ⏳ Build-Tool für Manifest-Verschlüsselung
- ⏳ GitHub Actions Workflow
- ⏳ Dokumentation und Tests
-
Key Distribution: Wie erhalten neue Instanzen den MDK?
- Antwort: Generiert bei Installation, nicht verteilt
-
Key Escrow: Backup-Strategie für MDK?
- Antwort: Export mit Passwort-Verschlüsselung
-
Revocation: Wie sperren wir kompromittierte Instanzen?
- Antwort: Certificate Revocation List (CRL) + neue Releases nur mit neuen Keys
-
Performance: Overhead durch Verschlüsselung?
- Antwort: Minimal (~1ms für Manifest, einmalig beim Download)
- Architecture-ACCESS-MODEL-IMPLEMENTATION-SUMMARY
- Architecture-ADR-003-pg-dump-sql-parser
- Architecture-BASEENTITY-PRINCIPLE
- Architecture-CACHE-STORAGE-INTEGRATION
- Architecture-CMAKE-ARCHITECTURE
- Architecture-CMAKE-FLAGS-REFERENCE
- Architecture-CMAKE-MODULAR-ARCHITECTURE
- Architecture-CONCERNS-ARCHITECTURE-DIAGRAM
- Architecture-CONCERNS-IMPLEMENTATION-SUMMARY
- Architecture-CONTENT-MODEL
- Architecture-COPILOT-THEMISDB-GRAPH-RAG-BACKEND-ARCHITECTURE
- Architecture-CRYPTO-AND-KEYS
- Architecture-FEATURE-FLAGS-REFERENCE
- Architecture-GPU-ARCHITECTURE-REVIEW-TEMPLATE
- Architecture-HTTP-SHUTDOWN-HARDENING
- Architecture-MIGRATION-GUIDE-CONCERNS
- Architecture-MIGRATION-GUIDE-v13-v14
- Architecture-MODULARIZATION-GUIDE
- Architecture-MODULAR-ARCHITECTURE-ROADMAP
- Architecture-MODULE-ARCHITECTURE-INDEX
- Architecture-P1D01-ISSMPLUGIN-DESIGN-REVIEW
- Architecture-P1-D01-ISSMPLUGIN-DESIGN-REVIEW
- Architecture-P1-D08-MAMBA-GOVERNANCE-CONTRACT
- Architecture-P1-P2-IMPLEMENTATION-COMPLETION-INDEX
- Architecture-PHASE0-COMPLETION-ASSESSMENT
- Architecture-PHASE3-QUERYENGINE-DI-ARCHITECTURE
- Architecture-PHASE4-INDEX-MANAGER-DI
- Architecture-POSTGRESQL-WIRE-PROTOCOL
- Architecture-QUERYENGINE-IMPLEMENTATION-GUIDE
- Architecture-QUERY-SCHEDULING
- Architecture-RAFT-CONSENSUS-DESIGN
- Architecture-README
- Architecture-README-SSM-HYBRID-IMPLEMENTATION
- Architecture-REFACTORING-SUMMARY
- Architecture-RESOURCE-POOLING
- Architecture-SOURCE-DIRECTORY-GUIDE
- Architecture-THEMIS-CORE-GUIDE
- Architecture-UNIFIED-ACCESS-MODEL
- Architecture-WAL-GRPC-MTLS-CONFIGURATION
- Architecture-WIRE-PROTOCOL-RETRY
- Architecture-boltzmann-observability-draft
- Architecture-experimental-logarithmic-vector-storage
- Architecture-llm-wiki-mvp-adr
- Architecture-rewrite-engine-architecture
- Architecture-rope-api-architecture
- Architecture-ssm-gguf-mamba-status
- Architecture-ssm-hybrid-analysis
- Architecture-ssm-hybrid-rollout-plan
- Architecture-ssm-plugin-interface-design-review
- Architecture-transaction-coordinators
- Architecture-wiki-secondary-index
- Architecture-wire-protocol
- Governance-DISABLED-STUB-POLICY
- Governance-DOCS-PR-POLICY
- Governance-GA-PROMOTION-SIGN-OFF
- Governance-GITHUB-MILESTONES-SETUP
- Governance-MATURITY-CLAIM-VERIFICATION-CHECKLIST
- Governance-MATURITY-EVIDENCE-REGISTRY
- Governance-MERGE-GATE-BOT-CONFIG
- Governance-MERGE-GATE-STATUS-LIVE
- Governance-PHASE3-ENFORCEMENT-RUNBOOK
- Governance-PHASE-1-CLOSURE-REPORT
- Governance-PHASE-CLOSURE-POLICY
- Governance-PHASE-DEPENDENCY-GRAPH
- Governance-PLUGIN-SUBMODULE-ROLLBACK
- Governance-PRODUCTION-READY-2026-DELIVERY-PLAN
- Governance-PR-VERSION-TARGETING
- Governance-PR-VERSION-TARGETING-BACKFILL
- Governance-QUERY-MODULE-STATUS
- Governance-README
- Governance-RELEASE-PROMOTION-GATE-POLICY
- Governance-RELEASE-VALIDATION-CHECKLIST
- Governance-SECURITY-MODULE-5671-EVIDENCE-SUMMARY
- Governance-SHARDING-P6-RESIDUAL-RISK-ACCEPTANCE
- Governance-SOURCECODE-COMPLIANCE-GOVERNANCE
- Governance-UPDATES-DEVELOPMENT-STATUS-SIGN-OFF
- Governance-WAVE-C-IMPLEMENTATION-COMPLETE
- Module-acceleration-Roadmap
- Module-access-model-Roadmap
- Module-ai-Roadmap
- Module-analytics-Roadmap
- Module-api-Roadmap
- Module-aql-Roadmap
- Module-auth-Roadmap
- Module-base-Roadmap
- Module-cache-Roadmap
- Module-cdc-Roadmap
- Module-chaos-Roadmap
- Module-chimera-Roadmap
- Module-config-Roadmap
- Module-content-Roadmap
- Module-core-Roadmap
- Module-distributed-knowledge-Roadmap
- Module-distributed-tensor-Roadmap
- Module-document-Roadmap
- Module-ethics-ai-Roadmap
- Module-evaluation-Roadmap
- Module-execution-Roadmap
- Module-exporters-Roadmap
- Module-failover-Roadmap
- Module-geo-Roadmap
- Module-governance-Roadmap
- Module-gpu-Roadmap
- Module-graph-Roadmap
- Module-image-analysis-Roadmap
- Module-importers-Roadmap
- Module-index-Roadmap
- Module-ingestion-Roadmap
- Module-llama-cpp-Roadmap
- Module-llm-Roadmap
- Module-llm-streaming-Roadmap
- Module-llm-wiki-Roadmap
- Module-maintenance-Roadmap
- Module-metadata-Roadmap
- Module-network-Roadmap
- Module-observability-Roadmap
- Module-onnx-clip-Roadmap
- Module-performance-Roadmap
- Module-plugins-Roadmap
- Module-process-Roadmap
- Module-projects-Roadmap
- Module-prompt-engineering-Roadmap
- Module-query-Roadmap
- Module-rag-Roadmap
- Module-replication-Roadmap
- Module-retrieval-Roadmap
- Module-rpc-grpc-Roadmap
- Module-scheduler-Roadmap
- Module-scraper-Roadmap
- Module-search-Roadmap
- Module-security-Roadmap
- Module-server-Roadmap
- Module-sharding-Roadmap
- Module-stable-diffusion-Roadmap
- Module-storage-Roadmap
- Module-temporal-Roadmap
- Module-tensor-Roadmap
- Module-themis-Roadmap
- Module-timeseries-Roadmap
- Module-toolbox-Roadmap
- Module-training-Roadmap
- Module-transaction-Roadmap
- Module-updates-Roadmap
- Module-user-storage-encrypted-Roadmap
- Module-utils-Roadmap
- Module-vector-search-Roadmap
- Module-voice-Roadmap
- Module-whisper-Roadmap