# 2026-07-17

## 11:10 UTC — Heartbeat Health Check

### 🔴 CRITICAL: Backups failing (borgmatic)
- `borgmatic.service` failed — MariaDB dump script `/root/mariabackup.sh` fails with `Access denied for user 'root'@'localhost' (using password: NO)`
- No successful backups until MariaDB root credentials are configured
- Last failed: 2026-07-17 03:00 UTC

### 🔴 CRITICAL: SSL renewals failing (certbot)
- 5 certificate renewals failed: austinsushi.com, bob-way.com, genealogy.earlsmall.us, 2215.post-rd.austin-tx.us
- 2 parse failures
- Last failed: 2026-07-17 00:55 UTC

### ⚠️ WARNING: logrotate failing
- Duplicate log entry for `/var/log/cron.log` in stale rsyslog config
- Fix: remove stale rsyslog logrotate config file

### Nominal
- Disk: 64% (root) ✅
- Memory: 27% used (17Gi/62Gi, 44Gi available) ✅
- Load: 1.76, 2.18, 2.17 ✅
- Services: lshttpd ✅, mysql ✅, redis-server ✅, openclaw-gateway (user) ✅, lscpd ✅
- Uptime: 155 days

### Action items
- [ ] Fix MariaDB root credentials in `/root/mariabackup.sh`
- [ ] Investigate certbot DNS/plugin failures for 5 domains
- [ ] Clean stale rsyslog logrotate config
- [ ] Could not deliver alert to main session (tree-restricted visibility from cron sandbox)
**11:36 UTC — Heartbeat Check (cron, Friday)**

Friday midday (11:36 UTC, ~01:36 PM German time). Sites up: moltbook.com 200 ✅, panomity.com 200 ✅. moltbook.de still down (known, day 17+). Quiet streak continues. No pending tasks, nothing needs attention. Silent heartbeat.

## 12:19 UTC — Heartbeat (Kundensupport-Cron)

### Status: Keine neuen Kunden-Tasks
- **Mission Control:** alle DBs leer (0 Bytes), keine Tasks
- **HostBill (support.panomity.com):** HTTP 200 ✅ (0,19s)
- **panomity.com:** HTTP 200 ✅ (0,03s)
- **moltbook.com:** HTTP 200 ✅ (0,64s)
- **moltbook.de:** weiterhin DOWN (bekannt seit 5. Juli, Tag 12+, mehrfach eskaliert)
- **Bekannte Criticals** (borgmatic/certbot): unverändert seit Jul 13, bereits mehrfach eskaliert
- 14:19 DE → Freitagnachmittag, alles ruhig
- Keine Benachrichtigung gesendet

## 13:52 UTC — Heartbeat (Kundensupport-Cron)

### Status: Keine neuen Kunden-Tasks
- **Mission Control:** alle DBs leer (0 Bytes), keine Tasks
- **HostBill (support.panomity.com):** HTTP 200 ✅ (0,26s)
- **panomity.com:** HTTP 200 ✅ (0,21s)
- **moltbook.com:** HTTP 200 ✅ (0,63s)
- **moltbook.de:** weiterhin DOWN (HTTP 000, bekannt seit 5. Juli, Tag 12+, mehrfach eskaliert)
- **Bekannte Criticals** (borgmatic/certbot): unverändert, bereits mehrfach eskaliert
- 15:52 DE → Freitagnachmittag, alles ruhig
- Keine Benachrichtigung gesendet

## 14:21 UTC — Heartbeat Check (Cypher)

### Status: Alles ruhig
- **Sites:** moltbook.com 200 ✅ (0,24s), panomity.com 200 ✅ (0,12s), moltbook.de weiterhin DOWN (bekannt, Tag 12+)
- **Bekannte Criticals** (borgmatic/certbot): unverändert seit Jul 13, bereits mehrfach eskaliert
- **Social Media:** keine neuen Mentions oder Aufgaben
- 16:21 DE → Freitagnachmittag, alles ruhig
- Keine Benachrichtigung nötig → still

## 14:51 UTC — Heartbeat Check (Cypher)

### Status: Alles ruhig
- **Sites:** moltbook.com 200 ✅ (0,52s), panomity.com 200 ✅ (0,03s), moltbook.de weiterhin DOWN (bekannt, Tag 13+)
- **Bekannte Criticals** (borgmatic/certbot): unverändert seit Jul 13, bereits mehrfach eskaliert
- **Social Media:** keine neuen Mentions oder Aufgaben
- 16:51 DE → Freitagnachmittag, alles ruhig
- Keine Benachrichtigung nötig → still

## 15:55 UTC — Heartbeat (Kundensupport-Cron)

### Status: Keine neuen Kunden-Tasks
- **Mission Control:** alle DBs leer (0 Bytes), keine Tasks
- **HostBill (support.panomity.com):** HTTP 200 ✅ (0,17s)
- **panomity.com:** HTTP 200 ✅ (0,12s)
- **moltbook.com:** HTTP 200 ✅ (0,61s)
- **moltbook.de:** weiterhin DOWN (bekannt seit 5. Juli, Tag 13+, mehrfach eskaliert)
- **Bekannte Criticals** (borgmatic/certbot): unverändert seit Jul 13, bereits mehrfach eskaliert
- 17:55 DE → Freitagnachmittag, alles ruhig
- Keine Benachrichtigung gesendet

## 18:51 UTC — Heartbeat Check (Cypher)

### Status: Alles ruhig
- **Sites:** moltbook.com 200 ✅ (0,64s), panomity.com 200 ✅ (0,04s), moltbook.de weiterhin DOWN (bekannt, Tag 13+)
- **Bekannte Criticals** (borgmatic/certbot): unverändert seit Jul 13, bereits mehrfach eskaliert
- **Social Media:** keine neuen Mentions oder Aufgaben
- 20:51 DE → Freitagabend, alles ruhig
- Keine Benachrichtigung nötig → still

## 21:06 UTC — Heartbeat Check (Cypher)

### Status: Alles ruhig
- **Sites:** moltbook.com 200 ✅ (0,62s), panomity.com 200 ✅ (0,07s), moltbook.de weiterhin DOWN (bekannt, Tag 13+)
- **Social Media:** keine neuen Mentions oder Aufgaben
- 23:06 DE → Freitagabend, alles ruhig
- Keine Benachrichtigung nötig → still

## 22:34 UTC — Heartbeat Check (cron)

MC: DBs 0 bytes (bekannt). support.panomity.com: 200 OK ✅ (0,18s). HostBill API nicht konfiguriert.
🔴 moltbook.de: HTTPS/Port 443 weiterhin DOWN (seit 5. Juli, Tag 13). Connection refused. HTTP 301 ok.
Keine neuen Issues, keine offenen Tickets. Lage unverändert. Silent heartbeat.

## 22:49 UTC — Heartbeat Check (cron)

MC: DBs 0 bytes (bekannt). support.panomity.com: 200 OK ✅ (0,16s). HostBill API nicht konfiguriert.
🔴 moltbook.de: HTTPS/Port 443 weiterhin DOWN (seit 5. Juli, Tag 13). Connection refused (openssl bestätigt). HTTP 301 ok.
Keine neuen Issues, keine offenen Tickets. Lage unverändert. Silent heartbeat.