Puntos clave: DataOps están esencial para las organizaciones que buscan aprovechar los datos de manera eficaz automatizando y orquestando procesos de datos. Aborda los desafíos operativos a través de Control-M, que mejora la orquestación en entornos diversos para una gestión fiable de los datos.
- DataOps combina automatización y orquestación para mejorar las iniciativas de datos.
- Control-M agiliza la orquestación tanto en la nube como en entornos On-premises.
DataOps es el marco que ayuda a las empresas a convertir la ambición de los datos en resultados reales basados en datos. Al combinar las prácticas, la cultura y la tecnología de orquestación adecuadas, DataOps cierra la brecha persistente entre tener datos y actuar de forma fiable sobre ellos, convirtiéndose en la base esencial para cualquier organización que se tome en serio el impulso de los datos.
Con empresas de todo el mundo haciendo esfuerzos concertados para ser impulsadas por datos, se han desarrollado varias desconexiones importantes en el camino. Más del 60 % de las empresas hoy en día esperan que los empleados utilicen los datos para tomar decisiones, pero solo un tercio de los empleados cree firmemente que sus acciones son impulsadas por datos, y aún menos confían en ellos, según Improving Business Outcomes with DataOps Orchestration, una reciente IDC Analyst Connection patrocinada por BMC. Esto es coherente con los resultados de 2022 de New Vantage Partners, que encontraron que el 97 % de las organizaciones son invirtiendo en iniciativas de datos, pero solo el 27 % siente que han tenido éxito en convertirse en organizaciones basadas en datos.
Estas decepciones—especialmente en inteligencia artificial y aprendizaje automático (IA/ML)—son ocurriendo a pesar de tener acceso a más fuentes de datos y recursos de software que nunca antes. ¿Entonces, qué impide que las empresas tengan éxito? Todo se reduce a la complejidad y la cultura.
¿Por qué las iniciativas de datos no logran aportar valor?
El problema central están la operacionalización: si las iniciativas de datos no pueden funcionar de forma fiable a gran escala, no generarán el valor esperado.
Para responder a este desafío, la industria está adoptando DataOps como un conjunto de prácticas que industrializan los aspectos operativos de las iniciativas de datos. Un enfoque influyente y ampliamente utilizado, descrito en el Manifiesto DataOps, aborda los principios de liderazgo, culturales y de gestión que las organizaciones deben adoptar para Haz que la analítica y los esfuerzos relacionados tengan éxito. Habla de la importancia de la orquestación de datos, pero se centra mucho más en los pasos culturales que técnicos hacia el éxito.
Donde sea que te son en tus esfuerzos por Haz mejor utiliza de datos, desarrollar un sólido programa DataOps están un paso tangible te puede dar hoy. Las organizaciones que no obtienen el valor esperado de sus inversiones en datos deberían examinar cómo gestiona los datos antes de hacer nuevas inversiones importantes. Gracias a las fuentes de datos y herramientas disponibles hoy en día, las empresas tienen una libertad increíble en lo que pueden desarrollar para convertirse en datos impulsados. Pero, como señala el director de investigación de IDC, Stewart Bond, en el estudio, "La libertad sin un marco están caos."
DataOps proporciona el marco que las empresas necesitan para controlar ese caos, siempre que el programa DataOps pueda orquestar a través de todas las fuentes de datos, usuarios internos y externos, y cada componente de infraestructura, activo de software y proceso intermedio.
¿Por qué la orquestación es el requisito crítico para DataOps?
La orquestación están lo que permite a DataOps funcionar a escala empresarial; sin ella, incluso los Pipelines de datos bien diseñados se desintegran bajo el peso de la complejidad real.
El deseo de ser impulsado por datos y la necesidad de DataOps no son nuevos, pero la complejidad a la que se enfrentan ahora las organizaciones es sin precedentes. Según IDC Analyst Connection, dos tercios de las organizaciones ya son utilizando al menos diez herramientas diferentes de ingeniería e inteligencia de datos. Estas herramientas—y las aplicaciones que dependen de ellas—rara vez son centralizadas, sino que se distribuyen por infraestructuras multicloud y On-premises.
Un ejemplo real: el Hospital General de Tampa
Poco después de que llegara la pandemia de COVID-19, el Hospital General de Tampa comenzaba datos sobre el número de casos, camas disponibles en UCI y ventiladores, y otra información crítica con decenas de hospitales y proveedores de su región para apoyar una respuesta coordinada. Los paneles diarios dependían de transferencias de archivos y operaciones ETL de múltiples sistemas sanitarios de Florida. Control-M orquestó todo, permitiendo a los responsables hospitalarios y de salud pública Haz decisiones basadas en información completa y actualizada. DataOps están la clave para mantener entornos complejos como este funcionando de forma fiable, y la orquestación es el requisito clave para DataOps hoy en día.
Aunque las herramientas individuales pueden ser altamente funcionales, tienen un valor limitado en el mundo real si no pueden trabajar juntas de forma efectiva. La incapacidad de automatizar entre procesos demuestra cómo la complejidad limita el valor de los programas de datos. Por eso la capacidad de orquestar—además de automatizar—está tan importante ahora. DataOps aborda este desafío de orquestación junto con los elementos humanos relacionados con el compartir y colaborar entre funciones empresariales.
Cómo Control-M soporta la orquestación DataOps
Algunas organizaciones han logrado éxito ejecutando completamente en la nube, utilizando Control-M para orquestar y automatizar todos los procesos de ingestión, análisis y remediación automatizada de datos. Control-M también ha evolucionado para satisfacer las necesidades actuales de orquestación de flujos de trabajo de DataOps, ayudando a las organizaciones a controlar el posible caos al incorporar automatización y orquestación a gran escala. Como señala IDC, la logística de datos está experimentando un renacimiento: las capacidades heredadas de gestión y automatización de datos son siendo refactorizadas, reimaginadas y modernizadas para acelerar el trabajo en el entorno de datos moderno y ayudar a frenar el caos.
Obtén más de la perspectiva respaldada por la investigación de IDC sobre cómo DataOps y la orquestación aportan valor a las iniciativas de datos en el libro completo Improving Business Outcomes with DataOps Orchestration (doc #US49015622, abril de 2022) y haz clic aquí para conoce más sobre cómo BMC están ayudando a las empresas a convertirse en un negocio orientado por datos.
Preguntas frecuentes sobre DataOps y cómo se impulsa a datos
¿Qué es DataOps y cómo ayuda a las organizaciones a ser impulsadas por los datos?
DataOps están un conjunto de prácticas que industrializa los aspectos operativos de las iniciativas de datos, combinando automatización, orquestación y principios culturales para ayudar a las organizaciones a entregar datos fiables a gran escala. DataOps ayuda a cerrar la brecha entre la inversión en datos y los resultados basados en datos al hacer que los data Pipelines sean más coherentes, regulados y accionables en toda la empresa.
¿Por qué la mayoría de las empresas no logran convertirse en organizaciones orientadas a los datos?
A pesar de la amplia inversión, la mayoría de las empresas tienen dificultades debido a dos problemas interconectados: la complejidad y la cultura. Gestionar datos a través de entornos multicloud, decenas de herramientas y múltiples equipos genera fricciones operativas que las soluciones puntuales individuales no pueden resolver sin un marco global. DataOps proporciona ese marco.
¿Qué papel juega la orquestación en DataOps?
La orquestación están el mecanismo que permite a DataOps funcionar a escala empresarial. Sin orquestación, los procesos de datos a través de herramientas, infraestructuras y equipos dispares no pueden coordinarse de forma fiable. Plataformas de orquestación como Control-M automatiza secuencian la cadena de datos de extremo a extremo —desde la ingestión hasta el análisis— para que los datos lleguen a los responsables de la toma de decisiones con precisión y puntualidad.
¿Qué es el Manifiesto DataOps?
El Manifiesto DataOps está un marco influyente que establece los principios de liderazgo, cultura y gestión que las organizaciones deben adoptar para Haz que las iniciativas de análisis de datos sean exitosas. Enfatiza la mejora continua, la colaboración interfuncional y la importancia de orquestar flujos de datos de forma consistente en toda la empresa.
¿Cómo soporta Control-M la orquestación DataOps?
Control-M orquesta y automatiza procesos de ingestión, transformación, análisis y remediación de datos en entornos cloud y On-premises. Control-M permite a las organizaciones gestionar flujos de trabajo complejos y multiherramienta DataOps desde una única plataforma, reduciendo la intervención manual, mejorando la fiabilidad de las tuberías y proporcionando a los equipos de operaciones la visibilidad necesaria para Haz decisiones basadas en datos con confianza.
Las opiniones expresadas en esta publicación son del autor y no reflejan necesariamente la posición oficial de BMC.
Estas publicaciones son mías y no representan necesariamente la posición, estrategias u opinión de BMC.