Neu: Die KI-Firewall überwacht die gesamte Plattform und erklärt jeden Vorfall in einfachen Worten. So funktioniert es

Schutzmechanismen und fehlgeschlagene Nachrichten

Die Flow-Schutzmechanismen, die Schleifen und fehlschlagende Flows pausieren, der Notstopp, fehlgeschlagene Nachrichten und Replay sowie die Automatisierungsalarme.

Flows laufen unbeaufsichtigt, deshalb schützt Hermetry sie: Ein Flow, der in einer Schleife hängt oder immer wieder fehlschlägt, pausiert sich selbst, Nebenwirkungen werden in ihrer Häufigkeit begrenzt, und Nachrichten, die nicht ausgeführt werden konnten, werden als fehlgeschlagene Nachrichten aufbewahrt, damit Sie sie erneut abspielen können. Diese Seite erklärt jeden Schutz und was Sie tun, wenn einer greift.

Flow-Schutzmechanismen

SchutzStandardWas passiert
Läufe pro Minute6.000 Läufe eines Flows in einer gleitenden MinuteDer Flow pausiert sich selbst: Eine Schleife wird vermutet
Fehlgeschlagene Läufe100 fehlgeschlagene Läufe in FolgeDer Flow pausiert sich selbst
Gleichzeitige Läufe16 Läufe eines Flows zur gleichen ZeitWeitere Läufe warten (höchstens 1.000 pro Flow; die ältesten werden darüber hinaus verworfen)
Fan-out100 Nachrichten, die ein Block für eine Eingabe sendetDie übrigen Nachrichten dieses Blocks für diesen Eingang werden verworfen
Nachrichtengröße256 KiB pro NachrichtDie Nachricht wird abgelehnt (msg_too_big)
Schleifenschutz4 Sprünge aus Events und Run flow zwischen Flows; 512 Schritte in einem LaufDie Kette wird unterbrochen
Wiederholungen aufgebrauchtHöchstens 5 Versuche eines externen AufrufsDie Eingabe wird zu einer fehlgeschlagenen Nachricht, sofern der Flow den Fehler nicht abfängt
Wiederholte NachrichtenEine Geräte-Nachricht, die innerhalb von 60 Sekunden erneut eintrifftWird quittiert, ohne dass ein Lauf stattfindet
Zu altEine Nachricht, die länger als 5 Minuten wartetWird nicht ausgeführt (Geräte-Nachrichten laufen trotzdem in ihrem Root-Flow weiter und werden als verspätet markiert)
Gerätebefehle pro Minute30 Befehle und Einstellungen aus Flows an ein GerätDer Befehl wird abgelehnt (limit)
Wiederholte BenachrichtigungenDieselbe Benachrichtigung an dieselbe Person innerhalb von 10 MinutenDiese Person wird übergangen

Ihr Tarif kann andere Werte innerhalb fester Grenzen festlegen. Jedes Mal, wenn ein Schutz greift, wird dies gezählt: in der Zeile des Flows (Begrenzt · Schutz), im Editor („Ein Flow-Schutz hat auf diesen Flow reagiert: …“, mit den markierten Blöcken) und in der Nutzungskarte (Flow-Schutzmechanismen in diesem Monat). Siehe Flow-Limits.

Ein Flow, der sich selbst pausiert hat

Ein pausierter Flow startet keinen Lauf, bis er wieder fortgesetzt wird. Seine Zeile nennt den Grund:

  • „Er hat sich selbst pausiert: Er lief in einer Minute häufiger, als dieser Workspace erlaubt, daher wird eine Schleife vermutet.“
  • „Er hat sich selbst pausiert: Zu viele seiner Läufe sind in Folge fehlgeschlagen.“

Die Verantwortlichen für Automatisierung erhalten den Alarm Flow hat sich selbst pausiert. Was zu tun ist:

  1. Öffnen Sie den Flow und sehen Sie sich Activity > Errors sowie die Runs der letzten Minuten an.
  2. Beheben Sie die Ursache: Unterbrechen Sie die Schleife (ein Flow, der sich selbst auslöst, oder ein Status-Trigger, der einen Block überwacht, der bei jeder Nachricht seinen Status ändert), oder beheben Sie den fehlschlagenden Aufruf.
  3. Deployen Sie, und setzen Sie dann Resume im Zeilenmenü des Flows oder im Banner des Editors fort. Eine Pause behält den Speicher des Flows und die wartenden Nachrichten.

Root-Flows werden nie automatisch pausiert

Ein Root-Flow speichert die Daten jedes Geräts, das er bedient, daher ist er von der automatischen Pause und von Runs at once ausgenommen. Scheitert eine Root zu oft, erhalten die Eigentümer und Administratoren der Organisation den kritischen Alarm Root flow not paused („This root flow was not paused, because it stores the data of every device it serves…“), höchstens einmal alle 6 Stunden pro Flow. Beheben Sie es rasch: Fehlschlagende Läufe einer Root können bedeuten, dass Messwerte nicht gespeichert werden.

Der Notstopp

Der Notstopp pausiert alle laufenden Flows der Organisation, auf allen Hosts, gleichzeitig, einschließlich der Root-Flows.

  1. Öffnen Sie unter Automation das Kopfmenü und wählen Sie Stop every flow.
  2. Lesen: „Jeder laufende Flow dieses Workspaces, auf jedem Host, wird gleichzeitig pausiert: Gerätenachrichten, Zeitpläne, Webhooks und Events starten keinen Lauf, bis Sie fortsetzen. Laufende Läufe werden beendet. Auch ein Root-Flow wird pausiert, sodass Gerätedaten in der Zwischenzeit nicht gespeichert werden.“
  3. Setzen Sie das Häkchen bei „Ich verstehe, dass nichts läuft, bis die Flows fortgesetzt werden.“, geben Sie STOP ein und bestätigen Sie.

Ein Banner zeigt „Notstopp: n Flows sind pausiert…“. Zum Beenden wählen Sie Resume the flows: Jeder Flow, den der Stopp pausiert hat, läuft wieder; ein Flow, der sich selbst pausiert hatte, bleibt pausiert. Beide Aktionen werden protokolliert.

Verwenden Sie dies nur, wenn Flows Schaden anrichten (falsche Befehle senden, ein Partnersystem überfluten). Gerätedaten werden nicht gespeichert, solange es aktiv ist.

Fehlgeschlagene Nachrichten

Eine Nachricht, die die Plattform nicht ausführen konnte, wird als fehlgeschlagene Nachricht (Dead Letter) aufbewahrt. Sie öffnen sie über das Kopfmenü der Flow-Liste (Failed messages, alle Flows eines Hosts) oder im Editor (Failed messages, die Nachrichten für diesen Flow).

GrundBedeutung
Wiederholt fehlgeschlagenMehrfach zugestellt, ohne dass die Verarbeitung abgeschlossen wurde
Ein Aufruf ist bei jedem Versuch fehlgeschlagenEin externer Aufruf hat seine Wiederholungen aufgebraucht, und der Flow hat den Fehler nicht abgefangen
Zu lange gewartetEin Webhook-Aufruf oder ein benannter Timer hat länger als seine Lebensdauer gewartet (nach einem Ausfall). „Spielen Sie sie erneut ab, um sie jetzt auszuführen.“
Durch ein Redeploy unvollendetDer zugehörige Lauf wurde nicht beendet, bevor die Version, auf der er lief, ersetzt wurde
Rückstau zu langZu viele Nachrichten der Organisation haben gewartet
Nicht lesbarDie gespeicherte Eingabe ist beschädigt
Vom Host abgelehntDer Host hat sie nicht angenommen

Jede Zeile zeigt First seen, Reason, Error und Tries. View zeigt die gespeicherte Eingabe (für Personen, die debuggen dürfen).

  • Replay stellt die Nachricht mit ihren ursprünglichen IDs zurück in die Warteschlange. „Sein Lauf hat möglicherweise schon einen Teil seiner Arbeit erledigt: Aufrufe, Nachrichten oder Schreibvorgänge, die er ausgeführt hat, können sich erneut ereignen.“ Blöcke, die nach außen aufrufen, senden denselben Idempotency-Key, sodass ein Empfänger, der Duplikate filtert, nur einen Aufruf sieht.
  • Discard löscht sie. Danach kann sie nicht mehr erneut abgespielt werden.

Jeder Host behält seine eigenen fehlgeschlagenen Nachrichten. Standardmäßig werden höchstens 10.000 aufbewahrt; darüber hinaus werden die ältesten gekürzt. Bei 80 % erhalten die Manager den Alarm Failed messages nearly full, höchstens einmal alle 6 Stunden.

Eine verspätete Geräte-Nachricht in einem Root-Flow wird nie zu einer fehlgeschlagenen Nachricht: Sie wird gespeichert. Ein verspäteter Zeitplan-Tick wird einfach übersprungen.

Alarme

Errors and alerts (Kopfmenü der Flow-Liste) zeigt die Automatisierungsalarme der letzten 6 Stunden, eine Zeile pro veröffentlichtem Flow mit seinen Fehlern der letzten 24 Stunden, den fehlgeschlagenen Nachrichten von heute und der Aufzeichnungsstufe, die häufigsten Fehler der letzten 7 Tage sowie Summen nach Tag.

Die Alarmregel legt fest, wer wann benachrichtigt wird:

FeldBedeutung
Alarme sendenEin oder aus
Fehler pro Minute1 bis 10.000
Minuten in Folge1 bis 19
FlowsNichts angekreuzt = alle Flows
EventsNichts angekreuzt = alle Alarmarten
EmpfängerEine Mitglieds-Benutzer-ID pro Zeile, höchstens 100. Leer: die Personen, die Automatisierung verwalten dürfen. E-Mail-Adressen werden nicht akzeptiert.

Alarmarten: Viele Fehler, Aufrufe pausiert (Breaker offen), Nebenwirkung gedrosselt, Block startet nicht, Fehlgeschlagene Nachrichten fast voll, Flow hat sich selbst pausiert und Root-Flow nicht pausiert. Root-Flow nicht pausiert wird unabhängig von der Regel immer an die Eigentümer und Admins sowie an die Empfänger der Regel gesendet.

Aufrufe pausiert (Breaker)

Ein Block, dessen externe Aufrufe immer wieder fehlschlagen (ein HTTP-Endpunkt, der nicht erreichbar ist), pausiert seine Aufrufe für eine Weile; seine Nachrichten schlagen in dieser Zeit mit circuit_open fehl. Die Events des Flows zeigen Aufrufe pausiert (Breaker offen) und später Aufrufe wieder aufgenommen (Breaker geschlossen). Beheben Sie den Empfänger; der Block erholt sich von selbst.