¿Cuáles son las tecnologías clave para big data? ¿Cuáles son las tecnologías clave para el procesamiento de big data?
Las tecnologías clave para el procesamiento de big data generalmente incluyen: recopilación de big data, preprocesamiento de big data, almacenamiento y gestión de big data, análisis y minería de big data, presentación y aplicación de big data (recuperación de big data, visualización de big data, Aplicaciones de big data, seguridad de big data, etc.).
1. Tecnología de recopilación de big data
Los datos se refieren a varios tipos de datos masivos estructurados y semiestructurados (o débilmente estructurados) y no estructurados que son la base del modelo de servicio de conocimiento de big data. .
2. Tecnología de preprocesamiento de big data
Principalmente operaciones completas como análisis, extracción y limpieza de datos recibidos. 1) Extracción: debido a que los datos adquiridos pueden tener múltiples estructuras y tipos, el proceso de extracción de datos puede ayudarnos a transformar estos datos complejos en una configuración única o fácil de procesar para lograr un análisis y procesamiento rápidos. 2) Limpieza: no todos los big data son valiosos. Algunos datos no son lo que nos importan, mientras que otros son elementos de interferencia completamente incorrectos. Por lo tanto, los datos deben filtrarse y "eliminarse el ruido" para extraer los datos válidos.
3. Tecnología de gestión y almacenamiento de big data
El almacenamiento y la gestión de big data requieren el uso de memoria para almacenar los datos recopilados, establecer una base de datos correspondiente y gestionarlos y llamarlos. Centrarse en resolver tecnologías complejas de gestión y procesamiento de big data estructurados, semiestructurados y no estructurados. Resuelve principalmente varias cuestiones clave, como el almacenamiento, la representación, el procesamiento, la confiabilidad y la transmisión efectiva de big data.
4. Análisis de big data y tecnología de minería.
Tecnología de análisis de big data. Mejorar las tecnologías de minería de datos y aprendizaje automático existentes; desarrollar nuevas tecnologías de minería de datos, como la minería de redes de datos, la minería de grupos específicos y la minería de gráficos; romper con las tecnologías de fusión de big data, como la conexión de datos basada en objetos y la conexión de similitud; , Tecnologías de minería de big data orientadas a dominios de red, como el análisis de comportamiento y el análisis semántico emocional.
6. Tecnología de aplicación y presentación de big data
La tecnología de big data puede extraer la información y el conocimiento ocultos en datos masivos, proporcionar una base para las actividades sociales y económicas humanas, mejorando así la La eficiencia operativa en diversos campos ha mejorado enormemente la intensificación de toda la economía social. En nuestro país, el big data se utilizará principalmente en las siguientes tres grandes áreas: inteligencia empresarial, toma de decisiones gubernamentales y servicios públicos.
Por ejemplo: tecnología de inteligencia empresarial, tecnología de toma de decisiones gubernamentales, tecnología de minería y procesamiento de información de datos de telecomunicaciones, tecnología de minería y procesamiento de información de datos de redes eléctricas, tecnología de análisis de información meteorológica, tecnología de monitoreo ambiental, sistema de aplicación de nube policial (monitoreo de carreteras, monitoreo de video, monitoreo de redes, transporte inteligente, fraude contra las telecomunicaciones, comando y despacho y otros sistemas de información de seguridad pública) Esta respuesta está compilada en base a la información de la biblioteca de Baidu. Para obtener el texto original, consulte "Tecnologías clave de Big Data"
.