Hoy en día, para la mayoría de las empresas y organizaciones, los datos son uno de los activos estratégicos. Y con la expansión de las capacidades analíticas, el valor de los datos recopilados y acumulados por las empresas sigue creciendo constantemente. Se habla, a menudo, del crecimiento explosivo y exponencial en el volumen de datos corporativos generados. Se señala que el 90% de todos los datos se han creado en los últimos dos años.
El crecimiento del volumen de datos se acompaña de un aumento en su valor.
Los datos son generados y utilizados por sistemas de análisis de grandes datos, el Internet de las cosas (IoT), la inteligencia artificial, entre otros. Los datos recopilados son la base para mejorar la calidad del servicio al cliente, la toma de decisiones, el apoyo a las operaciones de las empresas, así como para diversas investigaciones y desarrollos.
El 90% de todos los datos se han creado en los últimos dos años.
Según pronósticos de IDC, el volumen de datos almacenados en el mundo se duplicará entre 2018 y 2023, y la capacidad total de los almacenes de datos alcanzará los 11,7 zettabytes, con más de tres cuartas partes del volumen total correspondiente a bases de datos empresariales. Es notable que, si en 2018 la capacidad total de los discos duros (HDD), que aún siguen siendo el medio principal de información, era de 869 exabytes, para 2023 esta cifra podría superar los 2,6 zettabytes.
Plataformas de gestión de datos: ¿para qué sirven y qué papel desempeñan?
No es sorprendente que las cuestiones de gestión de datos se estén convirtiendo en una prioridad para las empresas, impactando directamente en su funcionamiento. Para resolverlas, a veces es necesario superar dificultades como la heterogeneidad de sistemas, formatos de datos, métodos de almacenamiento y uso, y enfoques de gestión en condiciones de un 'zoológico' de soluciones que fueron implementadas en diferentes momentos.
El resultado de este enfoque no unificado es la fragmentación de los conjuntos de datos, almacenados y procesados en diferentes sistemas, así como diferentes procedimientos para garantizar la calidad de los datos. Estos problemas típicos aumentan los costos laborales y financieros al trabajar con datos, por ejemplo, al obtener estadísticas e informes o al tomar decisiones de gestión.
El modelo de negocio de gestión de datos debe ser personalizado, adaptado a las necesidades, objetivos y metas de la empresa. No existe un único sistema automatizado, una plataforma de gestión de datos que cubra todas las tareas. Sin embargo, los sistemas de gestión de datos modernos, integrales, flexibles y escalables, a menudo representan un software universal para la gestión y almacenamiento de datos. Incluyen las herramientas y servicios necesarios para una gestión eficiente de los datos.
Los desarrollos más recientes permiten a las empresas repensar la gestión de datos a nivel organizacional, obteniendo una visión clara de qué datos existen, qué políticas están relacionadas, dónde y cuánto tiempo se almacenan los datos, y finalmente, ofrecen la posibilidad de proporcionar la información necesaria a las personas adecuadas a tiempo. Estas son soluciones que amplían las capacidades de las empresas y permiten:
- Gestionar archivos, objetos, datos de aplicaciones, bases de datos, datos de entornos virtuales y en la nube, y acceder a datos de diferentes tipos.
- Mover datos con herramientas de orquestación y automatización a donde su almacenamiento sea más eficiente: a la infraestructura de almacenamiento primaria o secundaria, al centro de datos del proveedor o a la nube.
- Utilizar funciones integrales de protección de datos.
- Asegurar la integración de datos.
- Obtener análisis operativos a partir de datos.
Una plataforma de gestión de datos puede construirse sobre varios productos de software o ser un sistema unificado único. Una plataforma integral garantiza la gestión unificada de datos en toda la infraestructura de TI, incluyendo su respaldo, recuperación, archivado, gestión de instantáneas de hardware y generación de informes.
Tal plataforma permite implementar una estrategia multicloud, expandir el centro de datos hacia entornos en la nube, realizar migraciones rápidas a la nube, aprovechar las oportunidades de reemplazo de hardware e implementar las opciones más económicas de almacenamiento de datos.
Algunas soluciones tienen la capacidad de archivar datos automáticamente. Con la ayuda de la inteligencia artificial, pueden detectar que "algo ha salido mal" y tomar medidas correctivas automáticamente o notificar al administrador, así como identificar y prevenir ataques de diversos tipos. La automatización de servicios contribuye a la optimización de operaciones de TI, libera el personal de TI, minimiza errores debido al factor humano y reduce el tiempo de inactividad.
¿Qué características debe tener una moderna plataforma de gestión de datos y dónde se aplican estas soluciones en la práctica?
El enfoque de "una solución para todos" no funciona en el caso de las plataformas de gestión de datos. Cada empresa tiene sus propias necesidades de datos, que dependen del tipo de negocio, la experiencia y demás. Una plataforma universal debe, por un lado, permitir la configuración para trabajar con datos en una empresa específica y, por otro, ser independiente de la especificidad del sector aplicado, del campo de aplicación del producto basado en ella y su entorno informático.
Áreas prácticas de la gestión de datos (fuente; CMMI Institute).
Aquí hay algunas áreas prácticas de aplicación de plataformas de gestión de datos:
Componente
Ámbito de aplicación
Estrategia de gestión de datos
Objetivos y tareas de la gestión, cultura corporativa de gestión de datos, definición de requisitos para el ciclo de vida de los datos.
Gestión de datos
Gestión de datos y metadatos
Operaciones con datos
Normas y procedimientos para trabajar con fuentes de datos
Calidad de los datos
Aseguramiento de la calidad, marco de calidad de datos
Plataforma y arquitectura
Marco arquitectónico, plataformas e integración
Procesos de soporte
Evaluación y análisis, gestión de procesos, aseguramiento de la calidad, gestión de riesgos, gestión de configuraciones
Además, tales plataformas juegan un papel importante en el proceso de transformación de una organización en una empresa "gestionada por datos", que se puede dividir en varias etapas:
- Cambio en la gestión de datos en los sistemas existentes, implementación de un modelo de roles con separación de deberes y poderes. Control de calidad de los datos, verificación cruzada de datos entre sistemas, corrección de datos incorrectos.
- Configuración de procesos de extracción, recolección de datos, su transformación y carga. Adaptación de datos a un sistema único sin complicar el control de calidad de los datos ni alterar los procesos empresariales.
- Integración de datos. Automatización de procesos para entregar los datos correctos en el lugar y momento adecuados.
- Implementación de un control de calidad de datos completo. Determinación de los parámetros de control de calidad, desarrollo de una metodología para el uso de sistemas automáticos.
- Implementación de herramientas para gestionar los procesos de recolección de datos, su verificación, deduplicación y limpieza. Como resultado, se incrementa la calidad, fiabilidad y unificación de datos en todos los sistemas de la empresa.
Ventajas de las plataformas de gestión de datos
Las empresas que trabajan de manera efectiva con datos, en general, logran un mayor éxito en comparación con sus competidores, llevan productos y servicios al mercado más rápidamente, comprenden mejor las necesidades del público objetivo y pueden reaccionar rápidamente a los cambios en la demanda. Las plataformas de gestión de datos permiten la "limpieza" de datos, la obtención de información de calidad y relevante, la transformación de datos y la evaluación estratégica de los datos de la empresa.
Ejemplo de una plataforma universal para construir sistemas de gestión de datos corporativos: la rusa "Unidata", creada sobre la base de software de código abierto. Ofrece herramientas para crear modelos de datos y medios para ampliar la funcionalidad al integrarse en diversos entornos de TI y sistemas de información de terceros: desde la gestión de recursos materiales hasta el procesamiento seguro de grandes volúmenes de datos personales.
Arquitectura de la plataforma "Unidata" de la misma compañía.
Esta plataforma multifuncional garantiza la recolección centralizada de datos (inventario y contabilización de recursos), la estandarización de información (normalización y enriquecimiento), la gestión de información actual e histórica (control de versiones de registros, períodos de validez de los datos), la calidad de los datos y la elaboración de estadísticas. Se prevé la automatización de tareas como recolección, acumulación, limpieza, comparación, consolidación, control de calidad, distribución de datos, así como herramientas para la automatización del sistema de toma de decisiones.
Plataformas de gestión de datos (DPM) en publicidad y marketing
En publicidad y marketing, el término plataforma de gestión de datos DMP (Data Management Platform) tiene un significado más específico. Esta es una plataforma de software que, a partir de los datos recopilados, permite a las empresas definir segmentos de audiencia para orientar la publicidad a usuarios específicos y contextos de campañas publicitarias en línea. Este software es capaz de recopilar, procesar y almacenar cualquier tipo de datos de audiencia, así como de utilizarlos a través de los canales de medios habituales.
Según las previsiones de Market Research Future (MRFR), el mercado mundial de plataformas de gestión de datos (DMP) podría alcanzar los 3 mil millones de dólares para finales de 2023, con un crecimiento anual promedio del 15%, y para 2025 su volumen superará los 3,5 mil millones de dólares.
Sistema DMP:
- Permite recopilar y estructurar todos los tipos de datos de audiencia; analizar los datos existentes; transferir datos a cualquier espacio mediático para colocar publicidad dirigida.
- Ayuda a recopilar, organizar y activar datos de diversas fuentes y transformarlos en una forma útil.
- Organiza todos los datos en categorías basadas en objetivos comerciales y modelos de marketing. El sistema analiza los datos y genera segmentos de audiencia que representan con precisión la base de clientes a través de un amplio rango de canales, basándose en diversas características comunes.
- Permite aumentar la precisión del direccionamiento de publicidad en línea y establecer comunicaciones personalizadas con audiencias relevantes. Basado en DMP, también se pueden configurar cadenas de interacción con cada segmento objetivo, para que los usuarios reciban mensajes pertinentes en el momento y lugar adecuados.
El aumento de la participación del marketing digital influye significativamente en el crecimiento del mercado de plataformas de gestión de datos. Los sistemas DMP pueden unificar rápidamente datos de diversas fuentes y segmentar a los usuarios en varias categorías basadas en su modelo de comportamiento. Estas capacidades fomentan la demanda de DMP entre los mercadólogos.
El mercado mundial de plataformas de gestión de datos está compuesto por una serie de actores líderes, así como por varias empresas nuevas, incluyendo Lotame Solutions, KBM Group, Rocket Fuel, Krux Digital, Oracle, Neustar, SAS Institute, SAP, Adobe Systems, Cloudera, Turn, Informatica, entre otros.
Un ejemplo de una solución rusa es el producto de infraestructura lanzado por Mail.ru Group, que representa una plataforma única para la gestión y procesamiento de datos (Data Management Platform, DMP). Esta solución permite construir descripciones detalladas de los perfiles de segmentos de audiencia dentro de la plataforma, integrada con herramientas de marketing. El DMP une las soluciones y servicios de Mail.ru Group en el ámbito del marketing omnicanal y la gestión de audiencias. Los clientes podrán almacenar, procesar y estructurar sus propios datos despersonalizados, así como activarlos en comunicaciones publicitarias, aumentando la efectividad del negocio y del marketing.
Gestión de datos en entornos en la nube
Otra categoría de soluciones para la gestión de datos son las plataformas en la nube. En particular, el uso de soluciones modernas para la protección de datos en la gestión de datos en la nube permite evitar posibles problemas, desde amenazas de seguridad hasta problemas con la migración de datos y la reducción del rendimiento, así como abordar los retos de transformación digital que enfrenta la empresa. Por supuesto, las funciones de tales sistemas no se limitan a la protección de datos.
Las funciones de la plataforma de gestión de datos en la nube según Gartner incluyen: distribución de recursos, automatización y orquestación; gestión de solicitudes de servicio; gestión de alto nivel y control del cumplimiento de políticas; monitoreo y medición de parámetros; soporte para entornos multicloud; optimización y transparencia de costos; optimización de capacidades y recursos; migración a la nube y aseguramiento de la continuidad del negocio (DR); gestión del nivel de servicio; seguridad e identificación; automatización de actualizaciones de configuraciones.
La gestión de datos en entornos en la nube debe garantizar un alto nivel de disponibilidad de datos, control, automatización de la gestión de datos en centros de datos, en el perímetro de la red y en la nube.
La Gestión de Datos en la Nube (Cloud Data Management, CDM) es una plataforma que se utiliza para gestionar datos corporativos en diversos entornos en la nube, teniendo en cuenta enfoques privados, públicos, híbridos y multicloud.
Un ejemplo de esta solución es la Plataforma de Gestión de Datos en la Nube de Veeam. Según afirman los desarrolladores del sistema, ayuda a las organizaciones a cambiar su enfoque en la gestión de datos, proporcionando una gestión de datos automatizada e inteligente y su disponibilidad en cualquier aplicación o infraestructura en la nube.
La gestión de datos en la nube en Veeam se considera una parte integral de la gestión de datos inteligente, que garantiza su disponibilidad para el negocio desde cualquier ubicación.
La plataforma en la nube Veeam Cloud Data Management Platform permite modernizar las copias de seguridad y deshacerse de los sistemas obsoletos, garantizando una implementación acelerada de la nube híbrida y la migración de datos, la automatización de la seguridad de los datos y el cumplimiento normativo.
Veeam Cloud Data Management Platform es "una plataforma moderna para la gestión de datos que admite cualquier nube".
Como se puede ver, las plataformas modernas de gestión de datos representan una clase bastante amplia y diversa de soluciones. Lo que las une, quizás, es su enfoque en trabajar de manera efectiva con los datos corporativos y convertir a la empresa u organización en una empresa moderna, impulsada por los datos (data-driven enterprise).
Las plataformas de gestión de datos son una evolución necesaria de la gestión tradicional de datos. Cada vez más organizaciones están trasladando sus datos a la nube, y en el creciente número de configuraciones locales y en la nube surgen nuevos problemas que deben abordarse precisamente desde la perspectiva de la gestión de datos. La gestión de datos en la nube es un enfoque renovado, una nueva paradigma que amplía las funciones de gestión de datos para apoyar nuevas plataformas, aplicaciones y casos de uso.
Además, según el informe de investigación Veeam Cloud Data Management Report de 2019, las empresas planean integrar más profundamente las tecnologías en la nube, tecnologías de nube híbrida, análisis de grandes datos, inteligencia artificial e Internet de las cosas. Se espera que la implementación de estas iniciativas digitales genere beneficios significativos para las empresas.
Las empresas están adoptando rápidamente las tecnologías de plataformas de datos y están dispuestas a utilizar la nube para ejecutar cargas de trabajo analíticas. Sin embargo, muchas se enfrentan a desafíos al intentar utilizar todos sus datos para lograr mejores resultados comerciales, según los analistas de 451 Research. Las últimas plataformas de gestión de datos ayudarán a las empresas a navegar por los complejos procesos de trabajo con datos en múltiples nubes, utilizando herramientas de gestión de datos y realizando análisis, sin importar dónde se encuentren esos datos.
Dado que buscamos estar a la vanguardia y atender las necesidades de nuestros clientes (tanto actuales como potenciales), queremos preguntar a la comunidad de Habr, ¿les gustaría ver a Veeam en nuestro ? Ответить можно в опросе ниже.
Solo los usuarios registrados pueden participar en la encuesta. , por favor.
Oferta conjunta con Veeam en el mercado
62,5%Sí, es una buena idea5
37,5%Creo que no despegará3
Votaron 8 usuarios. 4 usuarios se abstuvieron.
Fuente: habr.com
