Registro y almacenamiento de datos fuera de línea en puertas de enlace industriales IoT

Respuesta rápida

Por qué es importante la capacidad sin conexión

Las estaciones remotas de clima, agricultura, hidrología y calidad del agua a menudo dependen de redes celulares que pueden verse interrumpidas por una señal débil, mantenimiento del operador o problemas de energía. El servidor del cliente también puede estar fuera de línea. Sin retención local, un sistema de monitorización puede perder exactamente los datos necesarios para analizar una tormenta, una inundación o un fallo en el equipo.

Registro de datos local frente a caché sin conexión

Dónde se almacenan los datos

Las diferentes clases de puertas de enlace utilizan Flash interno, tarjetas TF externas, unidades USB o bases de datos integradas. No asuma que la especificación de memoria indicada es igual al espacio disponible para datos históricos; el sistema operativo y la partición reducen la capacidad utilizable. Del mismo modo, una puerta de enlace con capacidad USB puede utilizar la unidad USB como copia de seguridad en lugar de transmisión continua en tiempo real.

Archivos de base de datos frente a archivos CSV

Algunos firmware almacenan registros en un archivo de base de datos local estilo SQLite. Esto es eficaz para la puerta de enlace, pero puede requerir una herramienta de base de datos para exportar CSV. Otros productos de registro de datos o versiones de firmware pueden exportar CSV directamente. Para la adquisición, “almacenamiento USB compatible” y “USB exporta CSV directamente” deben tratarse como dos requisitos diferentes.

CSV es atractivo para la investigación y el mantenimiento porque puede abrirse mediante un software de hoja de cálculo e importarse a herramientas de análisis. El almacenamiento de bases de datos suele ser mejor para el sistema integrado porque maneja registros indexados y escrituras incrementales de manera más fiable.

Cómo estimar la duración del almacenamiento

No estime la retención únicamente a partir del número de sensores. La fórmula útil se basa en el tamaño del registro y el intervalo de muestreo. Un registro JSON con quince nombres de campos cortos puede tener un tamaño muy diferente al de un registro binario o de base de datos compacto. El método más seguro es generar un registro real a partir de la configuración prevista y medirlo.

Una fórmula de planificación aproximada es: duración del almacenamiento = bytes utilizables ÷ bytes por registro ÷ registros por día. Registros por día = 86.400 segundos ÷ intervalo de muestreo en segundos. Agregue margen para índices, metadatos y sobrecarga del sistema de archivos.

Ejemplo: muestreo de 10 minutos frente a 15 minutos

En un intervalo de 10 minutos, un conjunto de canales genera 144 registros por día. En un intervalo de 15 minutos, genera 96 ​​registros por día. Por lo tanto, aumentar el intervalo extiende la retención significativamente, pero el intervalo correcto debe basarse en el proceso físico. El nivel de inundación o los fenómenos meteorológicos rápidos pueden requerir intervalos más cortos que la humedad del suelo o el seguimiento de las tendencias ambientales a largo plazo.

Cómo debería funcionar el almacenamiento y reenvío

Un flujo de trabajo sólido es: la puerta de enlace toma muestras de los sensores, intenta cargar, detecta que la red o el servidor no está disponible, escribe el registro no enviado en el almacenamiento local, continúa recopilando, luego se vuelve a conectar automáticamente y retransmite el trabajo pendiente cuando se restablece la comunicación. Las implementaciones de campo pueden reenviar registros rápidamente uno por uno.

Si el orden cronológico estricto, la deduplicación o la publicación simultánea en tiempo real son importantes para la base de datos del cliente, verifique estos detalles con el firmware exacto. "Se admite caché sin conexión" no define automáticamente todas las políticas de reproducción.

El comportamiento sin conexión de MQTT y HTTP puede diferir

El almacenamiento y reenvío se implementa comúnmente para la telemetría, pero la ruta de reintento real puede diferir según el protocolo. Si un proyecto requiere específicamente que los datos HTTP POST se almacenen en caché y se reenvíen después de una interrupción, pruebe esa ruta exacta del firmware HTTP en lugar de asumir que una función de caché MQTT verificada se comporta de manera idéntica.

Investigación y registro de campo solo sin conexión

Algunos proyectos no necesitan ninguna red externa. Un instituto de investigación puede conectar sensores a un registrador de datos, dejar la estación en funcionamiento durante semanas y recuperar datos periódicamente con almacenamiento USB o TF. En este caso, la prioridad de selección cambia del rendimiento 4G a la fiabilidad del almacenamiento local, la precisión de la marca de tiempo, la potencia del sensor, el formato de los datos y la facilidad de exportación.

Preguntas para incluir en la solicitud de cotización

1. ¿Qué medio de almacenamiento se utiliza para el historial normal y para el caché no enviado?
2. ¿Cuánto almacenamiento utilizable hay disponible para la aplicación?
3. ¿La retención está limitada por días, registros, bytes o porcentaje de almacenamiento?
4. ¿Qué formato de archivo/base de datos se utiliza localmente?
5. ¿Puede un usuario exportar CSV directamente o se requiere conversión?
6. ¿La puerta de enlace se vuelve a conectar automáticamente después de un fallo de 4G o del servidor?
7. ¿Los registros almacenados en caché se reenvían automáticamente después de la recuperación?
8. ¿Cuál es el orden de reproducción y cómo se manejan los registros duplicados?
9. ¿Puede la puerta de enlace continuar tomando muestras mientras se reenvía el trabajo pendiente?
10. ¿Puede un cliente instalar su propia tarjeta TF o unidad USB y qué formato se requiere?

Prueba de aceptación de fiabilidad fuera de línea

1. Ejecute el sistema en línea y confirme las marcas de tiempo y la carga normales.
2. Desconecte el enlace ascendente de red/celular mientras deja los sensores y la puerta de enlace encendidos.
3. Deje que se acumulen localmente varios ciclos de muestreo.
4. Restaure la conectividad y verifique la reconexión automática.
5. Compare la base de datos del servidor con las marcas de tiempo locales para confirmar que se recuperó el período faltante.
6. Apague y encienda la puerta de enlace durante un corte si se requiere resistencia a la pérdida de energía.
7. Exporte el historial local para verificar el acceso al mantenimiento y el formato del archivo.
8. Documente el firmware, el medio de almacenamiento y el comportamiento de retención/reproducción probado para la entrega.

Preguntas frecuentes

P1. ¿Qué es el almacenamiento y reenvío en una puerta de enlace IoT?

A1. Es el proceso de almacenar la telemetría localmente cuando falle la entrega y retransmitir automáticamente el trabajo pendiente una vez que se restablece la comunicación.

P2. ¿El registro de datos local es lo mismo que el caché sin conexión?

A2. No. La tala local es una historia continua; La caché sin conexión protege específicamente los registros que no se pudieron cargar.

P3. ¿Puede una puerta de enlace IoT almacenar datos sin acceso a Internet?

A3. Sí, si el modelo seleccionado proporciona registro local en Flash, tarjeta TF, USB u otro medio de almacenamiento.

P4. ¿Se puede utilizar USB para la salida de datos en tiempo real?

A4. No necesariamente. En muchas puertas de enlace, el USB está diseñado para realizar copias de seguridad o exportar manualmente el historial en lugar de un flujo continuo en tiempo real.

P5. ¿Los datos locales siempre serán CSV?

A5. No. Algunos firmware utilizan un archivo de base de datos y requieren una exportación CSV posterior. Especifique el formato requerido en el proyecto.

P6. ¿Cómo calculo cuántos días puede almacenar la puerta de enlace?

A6. Mida un tamaño de registro real, calcule los registros por día a partir del intervalo de muestreo, luego divida el almacenamiento utilizable por el volumen de datos diario e incluya el margen general.

P7. ¿Los datos almacenados en caché se enviarán automáticamente después de que regrese la red?

A7. Cuando la función de caché fuera de línea está habilitada y admitida por el protocolo configurado, la puerta de enlace puede volver a conectarse y retransmitir registros almacenados.

P8. ¿Debo probar la interrupción del servidor y la interrupción de 4G por separado?

A8. Sí. Ambos pueden detener la entrega, pero el comportamiento de reconexión y reintento puede diferir y debe verificarse de forma independiente.