Metadatos Ha sido fundamental desde hace mucho tiempo gobernanza de datos, pero a medida que los datos evolucionan, también lo hacen los desafíos en la gestión de esos datos, en todos los ámbitos. privacidad, seguridady gobernanzaEn los últimos años, catálogos de datos Han surgido como herramientas fundamentales en la gobernanza de datos para capturar, gestionar y buscar metadatos. Pero ¿es suficiente?
Una parte del mundo de los datos, metadatos Se refiere simplemente a la columna de información disponible y ubicada dentro de bases de datos o fuentes de datos similares. Se trata de datos sobre datos, y es crucial para los profesionales de datos. Proporciona un mapa de qué datos residen y dónde. Acelerar la capacidad de los profesionales de datos para localizar los mejores datos para IA y BI., gestionar la comercialización de datos y cumplir con solicitudes regulatorias de datos, y más.
Sin embargo, los catálogos de datos tradicionales tienen serias limitaciones:
Cobertura limitada de fuentes de datos: Si bien las bases de datos estructuradas y los almacenes tienen un protagonismo destacado, Hay una falta de atención a los puntos ciegos – que incluyen archivos, documentos, imágenes, mensajes, plataformas de mensajería, SaaS, canales de datos, entornos de desarrollo, NoSQL y mucho más.
Falta de escala: Típico catálogos de metadatos No pueden cubrir todo el patrimonio de datos de empresas, corporaciones o grandes conjuntos de datos. Carecen de la escala necesaria para cubrir todo el patrimonio de datos de una empresa, lo que deja a las organizaciones con un mapa de, por ejemplo, Winnipeg, cuando lo que realmente necesitan es un mapa del mundo.
Capacidades aisladas: Si está limitado en los datos que está mirando, eso significa que no elaboración de perfiles de datos globales, no hay un inventario de datos consistente y hay una conciencia muy limitada sobre seguridad y privacidad.
¿El resultado? Este tipo de catálogos por sí solos ofrecen una visión incompleta del universo de datos de una organización, lo cual resulta problemático no solo para identificar y gestionar datos de alto valor, sino también para identificar y gestionar datos de alto riesgo.
Data Fabric y la ampliación de la visibilidad de los datos
Una forma en que las organizaciones han comenzado recientemente a abordar estos desafíos es ampliando su campo de visión a través de estrategias de virtualización, como tejido de datosSi bien los catálogos tradicionales funcionan mejor en conjuntos de datos altamente concentrados en fuentes de datos específicas, una estructura puede escalar más allá de esto. tejido de datos Proporciona un medio para virtualizar el acceso a conjuntos de datos distribuidos y concentrados.
Sin embargo, no todas las estrategias de abstracción o virtualización son iguales. La mayoría requiere proxies, lo que aumenta la latencia y el punto único de fallo. Estos enfoques tienden a limitar las vistas (a conjuntos de datos compatibles con SQL), lo que deja un punto ciego en el resto del panorama de datos (desde SaaS hasta NoSQL, pasando por archivos y mensajería).
Productos como BigID Han surgido para abordar esto: convertirse en la base para el funcionamiento descubrimiento de datos y funciones de gobernanza en todos los datos, en toda la estructura.
Cómo obtener una vista global con capacidad de búsqueda de sus metadatos, datos confidenciales y datos personales
En respuesta a algunas de las limitaciones de los catálogos actuales en términos de cobertura y contexto, algunas organizaciones han comenzado a explorar registros de datos para complementar esa estructura de datos. Con una capa de registro de datos, las organizaciones pueden:
- Ampliar el campo de visión de los datos más allá de un conjunto limitado de lagos y almacenes de datos
- Proporcionar escala para observar la totalidad de un patrimonio de datos corporativos
- Habilitar la capacidad de descubrimiento de metadatos, datos de privacidad y datos de seguridad (de vital importancia dada la creciente complejidad de los entornos)
- Aplicar capacidades de creación de perfiles globales, ya sea para mejorar la calidad de los datos, minimizar los datos duplicados o incluso simplemente racionalizar los costos posibles en todo el volumen de activos de datos de la empresa.
- Proporcionar los metadatos comerciales y operativos necesarios para simplificar las acciones en la gobernanza de datos, así como las actividades de privacidad y seguridad.
Registro de datos + Fabric para encontrar y procesar todos los datos
Los datos son el sustento de toda empresa digital moderna. Los enfoques tradicionales para... gestión de datos Ofrecen una visión incompleta de los datos, lo que impide que se vea el panorama general y los expone a riesgos. Las organizaciones necesitan adoptar un enfoque más moderno para gestionar todo el patrimonio de datos. Ahora, más que nunca, es necesario combinar la virtualización y la estructura de datos para gestionar todos los datos posibles.
Y ahí es donde entran en juego los registros de datos: ayudando a las organizaciones. descubrir y gestionar datos en contexto: no solo en metadatos, sino también en otros artefactos de datos para la comprensión riesgo y regulación -como datos de personas y datos sensiblesLos profesionales de datos pueden entonces obtener el contexto completo del contenido que buscan y optimizar la acción, ya sea en gobernanza de datos, seguridad o privacidad.
Autor
