Flujo de datos
La Preparación de Datos es el módulo de ETL de la plataforma Dattos. En él se recolecta, limpia, transforma, combina y organiza información de diferentes sistemas y fuentes externas para generar resultados confiables para análisis, BI y visualizaciones. Todo esto en una interfaz no-code, diseñada para usuarios de negocio, que sustituye las hojas de cálculo tradicionales con más agilidad y seguridad.
Este artículo presenta el diseñador de flujos: las áreas de la pantalla, cómo construir y configurar un flujo y los recursos que ayudan a documentar y validar el resultado.
Cómo funciona un flujo de preparación
Un flujo de datos es un conjunto de etapas conectadas, cada una ejecutando una función sobre la información. Usted agrega, conecta y configura las etapas de acuerdo con el objetivo del flujo.
Cada etapa puede tener uno o más puertos de entrada y de salida, que es por donde se crean las conexiones entre etapas. Las conexiones representan las transiciones entre las etapas y siguen una lógica horizontal, de izquierda a derecha.
El encabezado del diseñador
En la parte superior de la pantalla aparecen el nombre del proceso y, de izquierda a derecha, los botones de acción:
Cerrar: cierra la edición del flujo y lleva a la pantalla de Visualización/Ejecución del proceso, donde se encuentra la información de configuración.
Galería: abre los modelos de flujo listos para usar, con búsqueda y filtros por tipo de fuente de datos y de resultado.
Identificación: abre las reglas de identificación de los archivos utilizados en el flujo para la carga automática.
Ejecutar: lleva a la pantalla de Importación y Ejecución del proceso, considerando el flujo creado en el diseñador.
Opciones: permite Restaurar modelo (recupera un modelo en formato Dattos .XDTT) y Descargar modelo (descarga el flujo construido en el estándar .XDTT).
Signo de interrogación: abre el Manual del Sistema (guía "Introducción al Flujo Preparación de Datos") en una nueva pestaña y el Iniciar Tutorial, con un paso a paso de las principales funcionalidades y un video de cómo configurar un flujo desde cero.
La barra de herramientas y las categorías de etapas
La barra de herramientas enumera todas las etapas disponibles, agrupadas por categoría e identificadas por color:
Fuente de Datos: importación de archivos y datos.
Preparación: limpieza, normalización y modelado de datos.
Combinación: unión y mezcla de datos.
Agregación: consolidación y agrupación de datos.
Salida: exportación de datos y resultados.
Agregar, conectar y eliminar etapas
Para agregar: arrastre la etapa de la barra de herramientas al canvas, justo debajo.
Para conectar: acerque la etapa a otra que tenga una salida libre y la plataforma sugerirá la conexión; simplemente suéltela. Para conectar manualmente, haga clic en el puerto de salida de una etapa, arrastre el puntero hasta el puerto de entrada de la otra y suelte.
Para eliminar: seleccione la etapa y haga clic en la x roja que aparece sobre ella, o presione la tecla Delete. Confirme en la ventana que aparece haciendo clic en Confirmar.
Configurar una etapa
Para abrir el área de configuración de una etapa, haga doble clic sobre ella después de agregarla al flujo. Las opciones varían según la etapa elegida. El detalle de cada una se encuentra en los artículos de etapas de la Preparación de Datos.
Sugerencia: las etapas de la categoría Fuente de Datos abren el área de configuración automáticamente cuando se agregan al flujo.
Reprocesamiento automático: el flujo se vuelve a procesar cada vez que se agrega, edita o elimina una etapa, para que la muestra de datos refleje el resultado actual con fidelidad.
Menú de contexto de la etapa
Haga clic con el botón derecho sobre cualquier etapa del flujo para abrir el menú de contexto:
Configurar Etapa: accede a las configuraciones específicas para ajustes.
Editar Nombre: personaliza el nombre de visualización de la etapa, para una identificación más intuitiva.
Agregar Descripción: inserta información sobre la etapa. Cuando ya existe una descripción, el menú ofrece Editar nombre y descripción y Eliminar descripción.
Eliminar Etapa: elimina la etapa del flujo.
Sugerencia: describir las etapas facilita la comprensión del flujo, ahorra tiempo, reduce la posibilidad de error y brinda claridad adicional en la comunicación del equipo.
Notas explicativas en el diseñador
Además de las descripciones por etapa, puede agregar anotaciones libres en el diseñador para documentar el flujo. Haga clic con el botón derecho en cualquier espacio en blanco y seleccione Agregar anotación. Se abre una ventana para que incluya información útil e insights en los puntos más relevantes del flujo.
Para editar o eliminar una anotación, haga clic con el botón derecho sobre ella y use las opciones que se muestran.
Validar mediante la Muestra de Datos
La Muestra de Datos se encuentra en una barra azul en la parte inferior del diseñador. Haga doble clic para ampliarla. Con una etapa configurada y seleccionada, esta muestra las primeras 100 filas de esa etapa del flujo.
La ventana de muestra contiene:
Pestañas de puertos de salida: disponibles según la etapa seleccionada.
Información general de tamaño: por ejemplo, "Mostrando muestra de 100 filas de un total de 300 filas - 20 columnas".
Tabla de muestra de datos.
Campo de búsqueda: localiza contenido dentro de la muestra.
Fecha de la simulación.
Descargar: exporta la muestra en un archivo .xlsx.
Límite de la muestra: la Muestra de Datos muestra un máximo de 100 filas, independientemente del tamaño de las fuentes de datos cargadas en el flujo.
Historial de Mensajes
Para entender errores y alertas, abra el historial haciendo clic en cualquier icono en la esquina inferior derecha del diseñador. Los mensajes se clasifican en tres tipos, que se pueden filtrar en la ventana:
Error: configuraciones de etapas inválidas.
Aviso: fallos de sincronización del flujo de datos.
Mensaje: eventos de edición y sincronización de las configuraciones de las etapas.
La tabla enumera, para cada registro:
Tipo: la categoría del mensaje.
Origen: la etapa que originó el mensaje. Cuando no se especifica, se trata de un evento del flujo en su totalidad.
Mensaje: el texto del mensaje.
Galería de Modelos
La Galería reúne modelos de flujo listos que puede usar por completo o aprovechar en partes. Haga clic en el botón Galería, en la esquina superior derecha, para abrir la ventana de selección, con búsqueda y filtros por categoría de etapas y por caso de uso (contable, fiscal, financiero, salud, entre otros).
Al hacer clic en Usar Modelo, la plataforma carga el modelo en el diseñador. Para ver más detalles antes de elegir, haga clic en el área del modelo deseado y abra la pantalla con etiqueta de filtro, captura de pantalla del modelo en el diseñador y descripción.
Sugerencia: puede sumar más de un modelo a su proceso y luego editar el flujo para adaptarlo a su necesidad.
Configurar la Regra de Identificação
La Regla de Identificación permite que la plataforma dirija automáticamente cada archivo enviado a través de las pantallas "Carga de Archivos" y "Ejecución de Procesos" al flujo correcto. La regla utiliza el contenido de columnas específicas para realizar este direccionamiento.
Haga clic en el botón Regla de Identificación para abrir la pantalla donde configura la regla para cada Fuente de Datos de tipo archivo. Cada fuente muestra un estado:
Válido: la etapa de entrada ya tiene configurada la regla de identificación.
Inválido: la etapa de entrada aún no tiene una regla configurada.
Para crear la regla, seleccione el contenido de una celda (intersección de columna y fila) y haga clic en Agregar Regla. Es posible definir una o más reglas. Al finalizar, el estado de la fuente cambia a Válido.
Sugerencia: mantenga presionada la tecla Ctrl para marcar más de una celda de la hoja de cálculo.
Qué etapas aparecen: solo se incluyen en la lista las Fuentes de Datos que leen archivos y que tienen muestra de datos. Cuando hay etapas elegibles que aún no tienen una regla configurada, aparece un indicador rojo en el botón Regla de Identificación en el diseñador.
Versionado y restauración
A través de la acción Opciones, en el diseñador, descarga el modelo del flujo (.XDTT) y restaura una preparación a partir de un archivo guardado. El paso a paso completo se encuentra en el artículo Versionado y restauración.
Artículos relacionados
Etapa Archivo Excel
Etapa Archivo OFX
Etapa Archivo de Texto
Versionado y restauración