En la plataforma low-code Meltemee hemos desarrollado una aplicación que ayuda a las organizaciones que procesan grandes volúmenes de datos, normalmente en múltiples sistemas informáticos, a organizar sus datos personales. En la práctica, la deduplicación de datos es una técnica para eliminar datos repetidos. Puede parecer sencillo, pero cuando un banco o una aseguradora cuenta con muchos sistemas que procesan datos personales y, además, la organización ha crecido mediante adquisiciones, ordenar los datos y eliminar duplicados supone un auténtico reto.
La aplicación low-code de la plataforma Meltemee ayuda a los clientes a deduplicar datos y a crear el denominado registro de referencia. El proceso comienza con la estandarización y limpieza de los datos, la eliminación de caracteres no deseados, la corrección de nombres mediante un diccionario de nombres, la expansión de abreviaturas, el rellenado de campos vacíos cuando pueden deducirse a partir de otros campos, la estandarización y tokenización de campos seleccionados, la verificación de la corrección de los datos y el cumplimiento de las normas, la comparación de registros y la clasificación, y, por último, la creación de los denominados registros de referencia. La aplicación cuenta con un repertorio de algoritmos avanzados de comparación de datos, basados en métodos reconocidos a nivel mundial y matemáticamente probados. El resultado del trabajo se pone a disposición de los sistemas de origen del cliente como registro de referencia: la fuente de verdad más actualizada sobre los datos personales procesados.
