perf(influx): batch measurements and reuse HTTP connections

This commit is contained in:
root
2026-11-11 22:57:12 +00:00
parent dde4736cc2
commit e88623cf6e
11 changed files with 782 additions and 325 deletions
+55
View File
@@ -242,3 +242,58 @@ bereits aufgelöste LVGL-Komponente unter `firmware/managed_components`.
Ein optionaler Verzeichnispfad hinter dem UI-Testbefehl speichert vier gerenderte
PPM-Vorschauen mit simulierten Messwerten. Physische Darstellung und Fingerbedienung
müssen zusätzlich am Gerät geprüft werden.
## Effiziente InfluxDB-Übertragung
Der Sensor misst weiter mit 1 Hz. Der Influx-Worker bündelt bis zu zehn einzelne
Messpunkte in einer HTTP-Anfrage; spätestens zehn Sekunden nach Beginn eines
Pakets wird auch ein kleineres Restpaket versendet. Ein Paket ist zusätzlich auf
4096 Bytes begrenzt. Keine Mittelung oder Änderung der Influx-Feldnamen/Einheiten;
Display und lokaler Verlauf aktualisieren sich unabhängig vom Netzwerk weiter.
Im normalen 1-Hz-Betrieb entstehen etwa sechs Schreibanfragen pro Minute statt 60,
mit bis zu etwa zehn Sekunden zusätzlicher Sichtbarkeitsverzögerung auf dem Server.
Jeder Punkt erhält einen eigenen Zeitstempel mit `precision=ms`. Der Messzeitpunkt
wird beim Einreihen über den monotonen ESP-Timer erfasst. Ein einmaliger GET auf
`/health` liest den HTTP-`Date`-Header desselben Influx-Servers und richtet damit
nur die interne Messuhr aus; weder ein Internet-Zeitdienst noch eine Änderung der
Systemuhr ist nötig. HTTP Date besitzt Sekundenauflösung: Die absolute Zuordnung
ist entsprechend ungefähr sekundengenau; die Abstände der Sekundenmessungen
bleiben erhalten. Spätere Date-Header gleichen größere Uhrdrift vorsichtig aus.
Explizite Zeitstempel der API bleiben erhalten. Fehlt ein gültiges Date vollständig,
werden sichere Einzelpunkt-Anfragen mit Serverzeit verwendet, bis eine Zeitbasis
verfügbar ist. Mehrere ungestempelte Punkte derselben Serie werden nicht gebündelt.
HTTP-Client und Verbindung werden über mehrere Anfragen wiederverwendet. Ein
Konfigurationswechsel oder Verbindungsfehler verwirft den Handle; der nächste
Versuch baut ihn neu auf. Es werden keine Token oder Messwert-Payloads protokolliert.
Der Worker meldet HTTP-Status, Punkt-/Bytezahl, erste/letzte UTC-Zeit im Paket und
gezählte Verbindungsaufbauten. Die Gerätestatusanzeige zählt nur bestätigte HTTP 204
als erfolgreiche Übertragung; ihr Alter kann jetzt regulär etwa zehn Sekunden betragen.
Der RAM-Puffer enthält 32 vorserialisierte Punkte ohne einzelne Heap-Allokationen
für jeden Feldnamen/Wert. Ein Paket bleibt bei Transportfehlern, Rate-Limits oder
Serverproblemen mit unverändertem Inhalt und Zeitstempeln für einen erneuten
Versuch erhalten (exponentielle Pause von 2 s bis maximal 300 s). Fünf Fehler lösen
ein Neuladen der vorhandenen Konfiguration aus. HTTP 400/413/422 wird als abgelehntes
Paket protokolliert und verworfen; bereits teilweise geschriebene Daten werden dabei
nicht gelöscht. Ohne Zeitbasis werden fehlgeschlagene Einzelpunkte nicht automatisch
wiederholt, da deren Serverzeit sonst neue Punkte erzeugen könnte.
Bei längerem Ausfall ersetzt die volle Warteschlange die ältesten noch nicht
versendeten Punkte; die Verluste werden gezählt und protokolliert. Puffer und
laufendes Paket sind RAM-basiert und gehen bei Neustart verloren. Der Producer
wartet nicht auf HTTP. Beim Stoppen räumt der Worker seine Ressourcen selbst auf;
er wird nicht mitten in einer Anfrage gewaltsam beendet.
Nativer Test mit dem echten Worker und simuliertem FreeRTOS/HTTP unter Address- und
UndefinedBehavior-Sanitizer, vom Repository-Hauptverzeichnis:
```bash
python3 firmware/test/net_influx/run_tests.py
```
Prüft Serialisierung/escaping, fehlende Kanäle, UTC-/Kalenderkonvertierung,
Messzeitabstände, 10er-Pakete, Wiederholungen mit identischem Body, Warteschlangen-
Überlauf, fehlende Zeitbasis, Einzelpunktfehler, Zeitlimit bei Restpaketen,
Bytegrenzen, dauerhaft abgelehnte Pakete und Wiederverwendung/Freigabe des Clients.