Huawei rompe la base de datos distribuida y la tecnología de almacenamiento para abrir la "alta barrera y el largo camino" de la transformación digital
En 2019, entraremos en un período crítico de transformación digital. El llamado "período de resolución de problemas" es la etapa de Transformación Digital 2.0, que requiere abordar los problemas de la migración a la nube y la transformación digital de las operaciones comerciales clave de las empresas. Un informe de la empresa de investigación de mercado IDC señaló: Desde que IDC propuso la transformación digital en 2014, se ha observado que las empresas han invertido mucha mano de obra y recursos materiales en la transformación digital, pero los resultados no son ideales. Algunas empresas han logrado mantenerse a la altura. A la vanguardia de la tendencia, algunas empresas se están moviendo hacia arriba y otras solo pueden avanzar pasivamente en la ola.
Para las empresas, la transformación digital es un camino difícil. IDC cree que en la etapa actual, lo que las empresas necesitan resolver con urgencia es la mejora de las capacidades digitales, que incluyen: una integración profunda con las capacidades de procesamiento y minería de datos y las capacidades de operación y gestión de tecnología de TI; Especialmente las capacidades de procesamiento y minería de datos, debido a que la transformación digital promueve la transformación de las empresas de centradas en procesos a centradas en datos, la capacidad de procesar y extraer datos masivos, heterogéneos y de múltiples tipos es el requisito previo para liberar el valor de los datos, y toda la vida de los datos El control y la gobernanza periódicos son la garantía para liberar el valor de los datos. A medida que la transformación digital introduce una gran cantidad de nuevas tecnologías, la complejidad de la TI aumenta. Las capacidades de gestión y operación técnica de la TI empresarial son la clave para mejorar la "productividad de la TI" empresarial.
Para abordar el "gran camino" de la transformación digital, necesitamos una plataforma digital con tres características principales: integración, inteligencia y herencia. Esta es la visión presentada en el documento técnico "Abrazar el cambio y superar el futuro: las plataformas digitales interrumpen la transformación digital empresarial", lanzado conjuntamente por Huawei e IDC en marzo de 2019. La integración se refiere principalmente a la combinación de tecnologías tradicionales y tecnologías innovadoras; la inteligencia se refiere principalmente a la inteligencia de la plataforma y la herencia de capacidades inteligentes se refiere principalmente a la arquitectura creada por conceptos como desacoplamiento, reutilización de funciones y configurabilidad. Estas tres perspectivas principales son la nueva generación de tecnología distribuida a nivel empresarial.
El 15 de mayo de 2019, Huawei lanzó la primera base de datos distribuida inteligente de nueva generación de la industria que admite la arquitectura ARM, GaussDB y el almacenamiento distribuido FusionStorage 8.0 como una nueva generación de infraestructura de datos, Huawei explica las capacidades de. Convergencia, una plataforma digital con tres características principales: inteligencia y herencia. Wang Tao, director general y presidente de estrategia y marketing de TIC de Huawei, dijo en la conferencia de prensa que cientos de industrias están acelerando el proceso de inteligencia y cada vez más empresas se han dado cuenta de que la infraestructura de datos es la clave para el éxito de la inteligencia. Huawei está redefiniendo la infraestructura de datos en torno a los tres campos de informática, almacenamiento y procesamiento de datos para acelerar el paso hacia la era inteligente.
Detrás de conceptos como nube e Internet industrial que hoy se discuten se esconde la llegada de una nueva era, que es la gran migración de la arquitectura. La tecnología tradicional de nivel empresarial se utiliza en aplicaciones únicas y entornos independientes para garantizar alta confiabilidad, alta disponibilidad y alta estabilidad del almacenamiento de datos, llamadas y otras operaciones, especialmente para cumplir con ACID (atomicidad, consistencia, aislamiento y aislamiento). requisitos de procesamiento de transacciones a nivel financiero (durabilidad) para proporcionar soporte de gestión de datos para operaciones comerciales clave de la empresa. A medida que la tecnología empresarial migra a la arquitectura de la nube, la tecnología de bases de datos también enfrenta una transformación.
En 2018, las bases de datos distribuidas basadas en tecnología de computación en la nube se han convertido en un tema candente en la industria. Para entenderlo simplemente, la tecnología de computación en la nube reemplaza el entorno "independiente" con un entorno informático distribuido compuesto por clústeres de servidores X86. Las tareas informáticas que originalmente realizaban varias minicomputadoras deben distribuirse en cientos o incluso miles de servidores X86 y también pueden operarse en centros de datos. Los desafíos son imaginables. En particular, los servicios de nivel financiero, como los pagos en línea, no pueden cometer errores cuando la red está desconectada o tener problemas con la conexión de la red, ni la experiencia del usuario puede verse afectada por velocidades de respuesta lentas.
En agosto de 2018, la Asociación de Pagos y Compensación de China y la Academia de Tecnología de la Información y las Comunicaciones de China celebraron conjuntamente el "Seminario de bases de datos de transacciones distribuidas financieras" para discutir la transformación distribuida de la base de datos central con los fabricantes y usuarios de la industria. y también publicó el documento técnico "Base de datos de transacciones distribuidas financieras". El avance de la base de datos de transacciones financieras distribuidas proporciona soporte industrial para que las bases de datos distribuidas ingresen a los sistemas comerciales clave de las empresas.
Como proveedor de soluciones de TIC empresariales, Huawei comenzó a desarrollar un almacén de datos para el análisis de big data ya en 2012. Basado en el motor SQL de base de datos relacional tradicional y una fuerte consistencia de transacciones, Huawei ha llevado a cabo computación distribuida y paralela. La transformación tomó 6 años. para construir una base de datos distribuida para análisis de datos masivos a nivel de petabytes.
Además del almacén de datos OLAP, Huawei ha cooperado con usuarios de la industria para desarrollar bases de datos de transacciones distribuidas para OLTP. En 2017, Huawei y China Merchants Bank establecieron conjuntamente un laboratorio conjunto de innovación de bases de datos distribuidas para desarrollar un núcleo de alto rendimiento a nivel empresarial, respaldar completamente las transacciones distribuidas, cumplir con los estrictos requisitos de coherencia de datos de la industria financiera y tener una capacidad de procesamiento de transacciones en una sola máquina. de hasta 100 transacciones por minuto. Base de datos distribuida OLTP de diez mil niveles.
Los nuevos productos de base de datos GaussDB lanzados esta vez incluyen: base de datos OLTP de procesamiento de transacciones en línea, base de datos OLAP de procesamiento analítico en línea y base de datos HTAP de procesamiento de análisis y transacciones híbridas. La base de datos GaussDB de Huawei integra la tecnología de IA en el diseño, desarrollo, verificación, ajuste, operación y mantenimiento de la base de datos, etc., y puede realizar autoajuste, autodiagnóstico, autocuración y autooperación y mantenimiento basados en IA, lo que hace que base de datos más eficiente e inteligente, liderando el desarrollo de la arquitectura de base de datos.
Yendo un paso más allá, la base de datos de la serie GaussDB lanzada esta vez es la primera base de datos distribuida de la industria que admite chips ARM. Huawei promueve el rápido desarrollo de la arquitectura informática desde una arquitectura informática única dominada por la GPU X86 a una arquitectura informática heterogénea dominada por la NPU X86 GPU ARM64. Basado en la arquitectura X86, Huawei introdujo capacidades de gestión de inteligencia artificial y aceleración inteligente, y fue el primero en lanzar el servidor inteligente FusionServer Pro basado en ARM64; creó el servidor de computación inteligente TaiShan Atlas más poderoso de la industria basado en el chip Ascend; la primera plataforma de inteligencia artificial de colaboración entre dispositivos y nube del sector. GaussDB puede aprovechar al máximo e integrar varias combinaciones heterogéneas de potencia informática, como ARM, X86, GPU y NPU, para mejorar en gran medida el rendimiento de la base de datos.
Wang Tao enfatizó que, como la primera base de datos nativa de IA del mundo, GaussDB tiene dos avances revolucionarios importantes: primero, por primera vez, la tecnología de inteligencia artificial se introduce en el proceso del ciclo de vida completo de la base de datos para lograr Autooperación, mantenimiento y autogestión, autoajuste y autodiagnóstico de averías. En escenarios de comercio, análisis y carga mixta, basado en la teoría de optimización, el primer algoritmo de autoajuste de aprendizaje por refuerzo profundo mejora el rendimiento promedio de la industria en un 60%. En segundo lugar, admite computación heterogénea, aprovecha al máximo la potencia informática diversa de X86/ARM/GPU/NPU y maximiza el rendimiento de la base de datos Huawei GaussDB ocupa el primer lugar en el conjunto de pruebas estándar autorizado TPC-DS. GaussDB también admite implementación local, nube privada, nube pública y otros escenarios.
En los entornos informáticos distribuidos representados por la computación en la nube, además de requerir bases de datos distribuidas, las soluciones de gestión de datos requieren la separación de la informática y el almacenamiento para ampliar y reducir mejor la capacidad y satisfacer diversas necesidades de almacenamiento de datos. la arquitectura principal del diseño de bases de datos distribuidas. La arquitectura de nube distribuida es compatible con los requisitos de diseño arquitectónico, como la informática, la separación del almacenamiento y la multiinquilino.
GaussDB ha creado una base de datos distribuida altamente disponible, confiable y estable desde el nivel de la base de datos. FusionStorage 8.0 lanzado esta vez es una arquitectura de almacenamiento distribuido que implementa de manera innovadora un sistema que admite bloques, archivos y objetos. , Protocolo HDFS, un conjunto de almacenamiento admite 4 tipos de capacidades de almacenamiento, adecuados para cargas mixtas en todos los escenarios comerciales y, en última instancia, hace posible "un centro de datos, un conjunto de almacenamiento".
El "Informe de seguimiento trimestral del mercado de sistemas de almacenamiento definido por software (SDS) y almacenamiento hiperconvergente (HCI) de China, cuarto trimestre de 2018" publicado por IDC muestra que en 2018, el mercado de almacenamiento definido por software alcanzó un crecimiento interanual del 54,9%. La participación del almacenamiento definido por software en el mercado general de almacenamiento de China ha aumentado constantemente, alcanzando una participación de mercado de 22,1 respectivamente.
Huawei ha sido reconocida en industrias como la gubernamental, la radio y la televisión y las telecomunicaciones por sus soluciones de archivos, ocupando el primer lugar en el mercado de almacenamiento definido por software de China en 2018.
FusionStorage 8.0 se acelera con el procesador Kunpeng 920 basado en ARM de Huawei, que aumenta las IOPS en 20. Combinado con la red sin pérdidas AI Fabric de Huawei, la latencia se reduce aún más en 15. Basado en los años de acumulación de chips y algoritmos de Huawei en los campos de computación, redes y almacenamiento, FusionStorage 8.0 logró un rendimiento de un solo nodo de 168.000 IOPS y una latencia de menos de 1 ms en la prueba de rendimiento SPC-1, lo que lo convierte en un nuevo elección para alojar aplicaciones empresariales clave.
Además, a través de la capacitación en la nube de Huawei Cloud y los chips de IA locales, FusionStorage 8.0 integra la gestión inteligente durante todo el ciclo de vida del uso empresarial, como la planificación de los recursos de almacenamiento antes de que el negocio entre en línea y la predicción de riesgos durante el uso. .Juicio y localización de fallas, lo que mejora en gran medida la eficiencia del almacenamiento y ayuda a los clientes de la industria a enfrentar los nuevos desafíos de datos en la era inteligente.
Wang Tao enfatizó en la conferencia de prensa que FusionStorage 8.0, una nueva generación de almacenamiento distribuido inteligente, ha mejorado significativamente la eficiencia de las dos dimensiones de "Almacenamiento para IA" y "IA en almacenamiento" al redefinir el almacenamiento. arquitectura, liderando el camino en inteligencia de almacenamiento. En primer lugar, "Almacenamiento para IA" hace que el análisis de IA sea más eficiente al integrar * compartir. En segundo lugar, "AI in Storage" toma la iniciativa en la integración de la IA en la gestión del ciclo de vida completo del almacenamiento, realizando operaciones y mantenimiento inteligentes desde aspectos como la planificación de recursos, el suministro de servicios, el ajuste del sistema, la predicción de riesgos y la localización de fallas.
Liaoning Mobile utiliza Huawei FusionStorage. Como mayor operador de comunicaciones móviles de la provincia de Liaoning, Liaoning Mobile ha estado explorando la aplicación de soluciones de almacenamiento avanzadas en sus propios sistemas de TI. Debido al rápido desarrollo de 5G, las aplicaciones de bases de datos clave de Liaoning Mobile también se están desarrollando hacia la nube, y el almacenamiento distribuido también debe cumplir con sus requisitos de confiabilidad y alto rendimiento. Después de un análisis en profundidad de las necesidades de Liaoning Mobile, Huawei primero desarrolló y probó un servicio piloto de almacenamiento distribuido en el borde a pequeña escala. Después de realizar una gran cantidad de experimentos y pruebas, el rendimiento y la confiabilidad cumplieron con las expectativas y finalmente se decidió. para migrar todos los servicios a FusionStorage. Al adoptar características como instantáneas grabables activo-activo y DIF de extremo a extremo, esta solución completó con éxito la migración de facturación, análisis de negocios, B2B y otros sistemas del almacenamiento antiguo a FusionStorage, lo que ayudó a que la arquitectura de almacenamiento de Liaoning Mobile ingrese a una nueva etapa histórica.
Vale la pena mencionar que la base de datos distribuida de Huawei está profundamente integrada con el almacenamiento distribuido de Huawei y las operaciones de la base de datos se transfieren a los nodos de almacenamiento, lo que mejora enormemente el rendimiento de la base de datos distribuida. Al aprovechar las nuevas tecnologías de red e inteligencia artificial, Huawei ayuda a los usuarios a mejorar el rendimiento del centro de datos, mejorar la escalabilidad de las aplicaciones de red y optimizarlas automáticamente.
Además de lanzar una nueva generación de innovadoras tecnologías de almacenamiento y bases de datos distribuidas, Huawei también está trabajando activamente con clientes y socios en los campos de bases de datos y almacenamiento desde aplicaciones industriales, herramientas de plataforma, organizaciones de estándares y comunidades. Construiremos un ecosistema industrial abierto, cooperativo y beneficioso para todos. A nivel de aplicaciones industriales, Huawei tiene una cooperación a largo plazo con desarrolladores de software independientes como iSoftStone, China Information, Donghua Software, Yihualu, UF Government y AsiaInfo International; a nivel de plataforma y herramienta, Huawei tiene una cooperación a largo plazo con Tableau; , Fanruan, ARM, Veritas y otros socios innovan conjuntamente; a nivel de organización y comunidad de estándares, Huawei está profundamente involucrado en la construcción de organizaciones y comunidades como OpenSDS, China Artificial Intelligence Industry Alliance, OCP, OpenStack y CNCF Foundation.
En resumen, el lanzamiento de la línea completa de productos de almacenamiento distribuido y bases de datos distribuidas de Huawei es el último logro de la plataforma digital de Huawei con tres características principales: convergencia, inteligencia y herencia.
La combinación de la base de datos distribuida y el almacenamiento distribuido de Huawei puede eliminar los silos de datos en varios sistemas comerciales de la empresa, crear capacidades de modelado, análisis y extracción de valor de datos para escenarios industriales, y agregar, integrar y analizar datos heterogéneos de múltiples fuentes para formar una Datos completos unificados y base de datos para realizar la extracción e intercambio de valor de datos. La inteligencia basada en IA puede gestionar eficientemente la infraestructura, potenciar el desarrollo y la iteración de aplicaciones industriales y ayudar de manera integral a las empresas a superar los "grandes obstáculos" de la migración de aplicaciones clave a la nube. (Texto/Ningchuan)