¿Cómo gestionar y controlar los datos de forma eficaz?
Cuando procesas o trabajas con grandes cantidades de datos, el término "gobernanza de datos" te resultará familiar. ¿Qué piensa sobre la gobernanza de datos? ¿Es la gobernanza de datos adecuada para usted? Cómo implementar. En pocas palabras, la gobernanza de datos es la política para manejar los datos: cómo se recopilan, verifican, almacenan, acceden, protegen y utilizan. La gobernanza de datos también incluye quién verá, utilizará y disfrutará de sus datos.
Con el avance de la era del big data, estos problemas se han vuelto cada vez más prominentes y cada vez más empresas dependen de la recopilación, gestión, almacenamiento y análisis de datos para lograr sus objetivos comerciales. Los datos se han convertido en una herramienta de lucro, un medio comercial y un secreto comercial para las empresas. Las violaciones de datos pueden dar lugar a disputas legales y hacer que los consumidores pierdan la confianza en el negocio principal de una empresa.
Si tienes la suerte de permitir que todos los departamentos de la empresa administren sus propios datos, entonces careces de una gestión de datos eficaz, o incluso todos los departamentos lo hacen por sí mismos. No se puede imaginar que todos los departamentos produzcan, almacenen y vendan productos a voluntad. El uso inadecuado de los datos, como el uso inadecuado del inventario, puede causar pérdidas importantes a una empresa. Por lo tanto, es necesario realizar una medición para garantizar la validez, seguridad y disponibilidad de los datos requeridos. De esto estamos hablando de "gobernanza de datos".
Una estrategia de gobierno de datos debe incluir el ciclo de vida completo de los datos. La estrategia debe incluir la recopilación, limpieza y gestión de datos. En este ciclo de vida, la gobernanza de datos debe centrarse en lo siguiente:
¿De dónde y cómo provienen los datos?
Este es el comienzo del ciclo de vida de los datos. La fuente de los datos determina la base de la estrategia de gobernanza de datos. Por ejemplo, el tamaño del conjunto de datos lo determina la fuente de datos. ¿Recopila datos de su mercado objetivo, usuarios existentes y redes sociales? ¿O utilizar un tercero para recopilar datos o analizar los datos que usted recopila? ¿Qué es el flujo de datos de entrada? La gobernanza de datos debe prestar atención a estas cuestiones y desarrollar políticas para gestionar la recopilación de datos, guiar a terceros para procesar los datos que recopilan o analizar los datos que usted recopila, y controlar la ruta y el ciclo de vida de los datos.
Inspección de datos
Normalmente, las fuentes de datos son muy grandes y diversas, lo que supone un dolor de cabeza para los gestores de datos. Distinguir el ruido de los datos de los datos importantes es sólo el comienzo. Si recopila datos de empresas afiliadas, debe asegurarse de que los datos sean confiables. Para esas decenas de miles, cientos de miles o incluso millones de datos relacionales complejos, no es práctico limpiar los datos manualmente a través de Excel. La consulta por lotes, el reemplazo, la corrección, el enriquecimiento y el almacenamiento de datos relacionales masivos y complejos requieren herramientas o sistemas profesionales de limpieza de datos. Construya metadatos, datos maestros, datos de transacciones, datos de referencia y estándares de datos en herramientas o sistemas de limpieza de datos, y combínelos con mecanismos de gestión y estándares técnicos como estructura organizacional, control de contenido y control de procesos para mejorar la eficiencia del trabajo de los administradores de datos. Por ejemplo, si necesita escribir manualmente un programa para recopilar metadatos, el sistema los obtendrá automáticamente; si necesita identificar o escribir código manualmente para verificar la calidad de los datos, el sistema identificará automáticamente los problemas con el; diccionario de datos para la gestión de documentos, el sistema le ayudará a gestionarlos en línea; basado en correo electrónico y procesos fuera de línea, este sistema le ayuda a automatizar en línea. Por supuesto, el sistema no es omnipotente y las herramientas de software de gestión de datos, como otras herramientas de software, no tienen poder mágico. Sin la participación del personal de gobierno de datos y el avance del gobierno de datos, no importa cuán perfecto sea el software, no podrá completar todo el proceso de gobierno de datos. Esta es la razón por la que los servicios de consultoría de gobernanza de datos siempre han tenido su mercado, y también es la razón por la que la mayoría de los proyectos nacionales de software de gobernanza de datos puros no logran los objetivos esperados.
La gobernanza de datos debe abordar los problemas de almacenamiento
El almacenamiento de datos está estrechamente relacionado con el tamaño del conjunto de datos. Los big data deben almacenarse en sistemas seguros y redundantes. A menudo se utiliza un sistema jerárquico para almacenar datos según la frecuencia de uso. De esta manera, los costosos sistemas en línea sirven los datos solicitados con frecuencia, mientras que los datos solicitados con menos frecuencia se almacenan en sistemas más baratos y menos disponibles. Por supuesto, si algunos datos confidenciales que se solicitan con menos frecuencia se almacenan en un sistema menos seguro, el riesgo aumentará considerablemente. Por lo tanto, una buena estrategia de gobierno de datos debe considerar todos los aspectos al formular una solución de almacenamiento de datos.
La gobernanza del dato debe establecer un sistema de gestión de accesos para encontrar el equilibrio entre necesidades y seguridad.
Borrar los permisos del visitante y acceder únicamente a los datos incluidos en sus correspondientes permisos. Solo las solicitudes legítimas pueden acceder a los datos, mientras que los datos confidenciales requieren permisos más altos y una verificación más estricta para acceder. Sólo disponible para usuarios con ciertos niveles de seguridad. Se deben establecer niveles de acceso tanto para los usuarios como para los propios datos. La estrecha interacción con RR.HH. y Adquisiciones es importante a la hora de gestionar cuentas, ya que permite que los empleados que abandonaron la empresa y los proveedores que dejaron de trabajar con ellos ya no tengan acceso oportuno. Abordar estos detalles y garantizar la propiedad y la rendición de cuentas de los datos es parte de una estrategia completa de gobernanza de datos.
Uso de datos/* * *Disfrute/Análisis
Cómo utilizar los datos es un contenido importante después de la gobernanza de datos. Los datos se pueden utilizar para la gestión de clientes, mejorar la experiencia del cliente, ofrecer publicidad dirigida, inicializar datos básicos para sistemas de aplicaciones de usuario, ayudar en la construcción de sistemas de aplicaciones y proporcionar análisis y datos de mercado para empresas afiliadas.
Debemos definir cuidadosamente qué datos pueden usarse para disfrute o marketing y protegerlos de ataques y filtraciones, ya que los datos deben usarse para fines puramente internos. Informe a los usuarios que todas las empresas que recopilan datos cumplirán con las normas de seguridad y protección de los datos. Garantizar el uso razonable y conforme de los datos también es una parte importante de la gobernanza de datos.
La recopilación, la verificación, el almacenamiento, el acceso y el uso son componentes necesarios de un plan de seguridad de datos.
La recopilación, la verificación, el almacenamiento, el acceso y el uso son componentes necesarios de un plan de seguridad de datos, y se debe implementar una estrategia integral para abordar estos y otros problemas de seguridad. Los programas de seguridad de datos deben ser eficaces y tener una alta disponibilidad, pero todas las partes del ciclo de vida de los datos son vulnerables a ataques y daños causados por descuidos. Debe identificar soluciones de seguridad de datos en la gobernanza de datos, incluido el control de acceso, datos en reposo, procesamiento de datos, cifrado después de la transmisión de datos, etc.
Gestión/Metadatos
Un ciclo de vida de datos está incompleto sin gestión. Por ejemplo, aplicar metadatos a un dato para su identificación y recuperación. Los metadatos incluyen la fuente de los datos, la fecha en que fueron recopilados o generados, el nivel de acceso a la información, la clasificación semántica y otra información necesaria para la empresa. La gobernanza de datos puede establecer un vocabulario de metadatos y definir el período de validez de los datos. Tenga en cuenta que los datos también caducan, después de lo cual solo podremos utilizarlos para el análisis de datos históricos.
En el proceso de creación de gobernanza de datos, puede haber cierta resistencia dentro de la empresa. Por ejemplo, algunas personas temen perder el acceso a sus datos, mientras que otras se muestran reacias a compartir datos con sus competidores. Una estrategia de gobernanza de datos debe abordar las cuestiones anteriores y hacerla aceptable para todas las partes. Las empresas acostumbradas a entornos aislados de datos tendrán dificultades para adaptarse a las nuevas estrategias de gobernanza de datos. Sin embargo, la dependencia actual de grandes conjuntos de datos y las preocupaciones de seguridad que conllevan hacen que sea necesario crear e implementar una política de datos para toda la empresa.
Los datos se están convirtiendo cada vez más en parte de la infraestructura empresarial y las decisiones se toman en un proceso paso a paso para manejar diversas situaciones específicas. Es una respuesta única, generalmente en respuesta a una pregunta específica. Por lo tanto, la forma en que una empresa maneja los datos cambiará debido a los diferentes departamentos e incluso a las diferentes situaciones dentro de los departamentos. Incluso si cada departamento tiene un plan de procesamiento de datos razonable, estos planes pueden entrar en conflicto entre sí y las empresas deben encontrar formas de coordinarse. Es difícil conocer los requisitos y necesidades del almacenamiento de datos. Si no lo hace bien, no podrá aprovechar el potencial de los datos para marketing y retención de clientes, y estará sujeto a responsabilidad legal si los datos se filtran.
Además, en las grandes empresas, varios departamentos competirán por los recursos de datos. Cada departamento solo se centra en su propia situación comercial y carece de una visión general. Es difícil llegar a un acuerdo sin mediación.
Por lo tanto, las empresas necesitan una organización similar a un comité de gobierno de datos, cuya responsabilidad sea hacer cumplir las políticas de datos existentes, explorar las necesidades no satisfechas y los posibles problemas de seguridad, y crear políticas de gobierno de datos para regular el uso de los datos recopilados. , gestionar, almacenar, acceder y utilizar políticas teniendo en cuenta las diferentes necesidades de cada departamento y puesto. Equilibre las necesidades conflictivas de diferentes departamentos, coordine los requisitos de seguridad y acceso y garantice las estrategias de gestión de datos más eficientes y seguras.
Establecer un comité de gobierno de datos
Responsable de evaluar las necesidades de todos los usuarios de datos y establecer una estrategia de gestión de datos en toda la empresa para satisfacer las necesidades de los usuarios internos, externos e incluso legales. necesidades. La membresía del comité debe incluir partes interesadas de todas las áreas del negocio para garantizar que se satisfagan bien las necesidades de todas las partes y que se reflejen todos los tipos de propiedad de datos. El comité también necesita expertos en seguridad de datos, y la seguridad de los datos también es una parte importante. Es importante comprender los objetivos de su comité de gobierno de datos. Por lo tanto, se deben considerar y explicar claramente las razones por las que una empresa necesita una estrategia de gobierno de datos.
Desarrollar un marco de gobernanza de datos
Este marco debe incluir las necesidades de datos internas, externas e incluso legales de la empresa. Las diversas partes del marco deben integrarse en un todo para cumplir con los requisitos de recolección, limpieza, almacenamiento, recuperación y seguridad. Para hacer esto, las empresas deben explicar claramente su estrategia de datos de un extremo a otro para diseñar un marco que satisfaga todas las necesidades y operaciones necesarias.
Juntar las piezas de forma planificada y apoyarse mutuamente tiene muchos beneficios, como realizar las necesidades de recuperación en un entorno altamente seguro. El cumplimiento también debe diseñarse específicamente como parte del marco para que se puedan rastrear e informar los problemas regulatorios. El marco también incluye registros diarios y otras medidas de seguridad que pueden proporcionar una alerta temprana de ataques. Validar los datos antes de usarlos también es parte del marco. La junta de gobernanza de datos debe comprender cada parte del marco, aclarar su propósito y cómo desempeña un papel a lo largo del ciclo de vida de los datos.
Estrategia de prueba de datos
Por lo general, una estrategia de datos debe probarse en un entorno empresarial de pequeña escala para descubrir las deficiencias en el marco, la estructura y la planificación de la estrategia de datos y realizar mejoras. Debe ajustarse antes de que pueda ponerse en uso oficial.
Las estrategias de gobernanza de datos deben evolucionar con los tiempos
A medida que las estrategias de gobernanza de datos se expanden a nuevas áreas de negocio, es absolutamente necesario ajustar la estrategia. Y, a medida que la tecnología evoluciona, las estrategias de datos deberían evolucionar con el panorama de seguridad, los métodos de análisis de datos y las herramientas de gestión de datos.
Determinar qué hace que una estrategia de datos sea exitosa.
Necesitamos establecer métricas claras para medir el éxito de la gobernanza de datos con el fin de medir el progreso.
Establecer objetivos de gestión de datos ayuda a identificar indicadores importantes de éxito, garantizando así que la estrategia de gobierno de datos esté dirigida a satisfacer las necesidades de la empresa.
No importa cuán grande o pequeña sea una empresa, todas enfrentan desafíos similares cuando se trata de utilizar datos. Cuanto más grande es la empresa, más datos hay, y cuantos más datos hay, mayor es la necesidad de una estrategia formal y eficaz de gobernanza de datos. Es posible que las empresas más pequeñas solo necesiten una política informal de gobernanza de datos, pero esto se limita a aquellas empresas que son pequeñas y tienen poca dependencia de los datos. Incluso los programas informales de gobernanza de datos deben considerar la recopilación, verificación, acceso y almacenamiento de datos de usuarios y empleados siempre que sea posible.
Cuando una empresa se expande y las necesidades de datos abarcan varios departamentos, cuando los sistemas y conjuntos de datos se vuelven demasiado grandes para ser controlados, cuando el desarrollo empresarial requiere estrategias a nivel empresarial o cuando surgen requisitos legales o regulatorios, A more Se debe desarrollar una estrategia formal de gobernanza de datos.