Para guardar datos MQTT en una base de datos, ejecute un suscriptor que reciba todos los mensajes de los dispositivos desde el broker y los escriba en la base de datos. El broker no es un historial. Mantiene un mensaje retenido por tema y conserva los mensajes QoS 1 y QoS 2 en cola solo para una sesión que no haya caducado, dentro de sus límites de almacenamiento.
Una pantalla en vivo puede funcionar directamente desde el broker, pero un gráfico de la semana pasada necesita que cada mensaje se escriba en algún lugar. Esa tarea corresponde a un servicio escritor, y lo diseño desde el primer día.
¿Un broker MQTT almacena mensajes?
Solo de dos formas limitadas, ambas definidas en la especificación MQTT 5.0, y ninguna es un historial.
- Mensajes retenidos. Cuando un cliente publica con el flag RETAIN activado, el servidor reemplaza cualquier mensaje retenido existente para ese tema y guarda el nuevo para los suscriptores futuros, de modo que conserva un mensaje por tema.
- Estado de sesión. Para un cliente con sesión, el servidor mantiene los mensajes QoS 1 y QoS 2 pendientes de transmisión y, opcionalmente, los QoS 0. Una sesión dura mientras dure la conexión de red más el Session Expiry Interval; si ese intervalo es 0 o no está presente, la sesión termina al cerrarse la conexión.
La especificación añade que el almacenamiento del servidor tiene límites y que el estado de sesión puede ser descartado por un administrador o por una respuesta automatizada, por lo que trato una cola del broker como un buffer para una caída breve.
¿Cómo se guardan los mensajes MQTT en SQL?
Escriba un servicio pequeño que se suscriba a los temas de sus dispositivos e inserte cada mensaje como una fila:
- Conéctese con un identificador de cliente fijo, Clean Start en 0 y un Session Expiry Interval que cubra un reinicio, de modo que el broker encole los mensajes mientras el escritor no está disponible.
- Suscríbase con QoS 1 a un filtro que cubra sus dispositivos, por ejemplo
sites/+/devices/+/telemetry. Un mensaje llega con el menor de los QoS de su publicación y de la suscripción, así que los dispositivos también deben publicar con QoS 1. - Tome el id del dispositivo del tema y la marca de tiempo de la carga útil cuando el reloj del dispositivo sea fiable, no el reloj de la base de datos.
- Inserte por lotes dentro de una transacción, con una clave única por dispositivo y marca de tiempo. QoS 1 es «al menos una vez», así que pueden llegar duplicados; la clave los hace inofensivos.
- Para ejecutar dos escritores, use una suscripción compartida como
$share/writers/sites/+/devices/+/telemetry. Cada mensaje va entonces a una sola de las sesiones del grupo.
Relacionado: MQTT frente a HTTP para dispositivos IoT, webhook frente a WebSocket frente a polling para reenviar datos, y el artículo de Sema sobre reducción de muestreo de series temporales para gráficos largos.
Hermetry conecta dispositivos de campo con paneles en vivo, reglas y alertas: telemetría IoT y SCADA en una sola plataforma. Cada organización empieza con un flujo raíz Default que recibe todos los mensajes de los dispositivos y guarda su telemetría. Los mensajes esperan en una cola mientras un trabajador de procesamiento está caído y se siguen almacenando cuando la plataforma se recupera, y un mensaje con los mismos valores en el mismo momento para el mismo dispositivo se almacena una sola vez. Consulte cómo se almacenan las lecturas de telemetría.
¿Qué pasa con los datos MQTT cuando la base de datos está caída?
Depende de cuándo confirme el escritor un mensaje. Con QoS 1, el receptor envía un PUBACK «habiendo aceptado la propiedad» del mensaje; no necesita terminar la entrega antes, y la propiedad pasa al receptor cuando el emisor recibe el PUBACK.
Una vez que el cliente del escritor ha confirmado un mensaje, el broker lo ha soltado, y si la base de datos es inaccesible el escritor debe conservar el mensaje por sí mismo. Le doy al escritor un buffer pequeño en disco local, reintento desde él en orden y lanzo una alarma cuando crece. La otra opción es desconectarse y dejar que el broker encole para la sesión, lo que funciona solo hasta que la sesión caduque o se alcance el límite de almacenamiento del broker.
Preguntas frecuentes
¿Puedo usar los mensajes retenidos como un historial sencillo?
No. Un nuevo mensaje retenido reemplaza al existente para el tema, y un mensaje retenido con carga útil vacía lo elimina. Los mensajes retenidos dan a un nuevo suscriptor el último valor conocido, por ejemplo el estado de un dispositivo, pero nunca más de un mensaje por tema.
¿Por qué un escritor en una suscripción compartida no recibe los mensajes retenidos?
La especificación MQTT 5.0 indica que no se envían mensajes retenidos a una sesión cuando se suscribe a una suscripción compartida. Un escritor que necesite los últimos valores conocidos al arrancar debe leerlos de otro lugar, por ejemplo de su propia base de datos.
¿Sigo necesitando una clave única si uso QoS 2?
QoS 2 es el nivel de entrega exactamente una vez de MQTT y evita entregas duplicadas en el enlace entre el broker y el escritor. Mantengo la clave única igualmente, porque un escritor que reintenta desde su buffer en disco, o un dispositivo que reenvía tras un reinicio, aún puede producir la misma lectura dos veces.

