¿Cuáles son las principales características de la era del big data?
El big data tiene cuatro características, a saber: volumen, variedad, velocidad y valor. Generalmente lo llamamos 4V.
1. Mucho. La primera característica de big data es "grande". En la era Map3, un Map3 pequeño de nivel MB podría satisfacer las necesidades de muchas personas. Sin embargo, con el paso del tiempo, la unidad de almacenamiento ha cambiado de GB a TB, e incluso a TB. niveles actuales de PB y EB.
Con el rápido desarrollo de la tecnología de la información, los datos han comenzado a crecer explosivamente. Las redes sociales (Weibo, Twitter, Facebook), las redes móviles, diversas herramientas inteligentes, herramientas de servicios, etc. se han convertido en fuentes de datos. Los casi 400 millones de miembros de Taobao generan aproximadamente 20 TB de datos de transacciones de productos básicos cada día; los aproximadamente mil millones de usuarios de Facebook generan más de 300 TB de datos de registro cada día.
Se necesitan con urgencia algoritmos inteligentes, potentes plataformas de procesamiento de datos y nuevas tecnologías de procesamiento de datos para contar, analizar, predecir y procesar datos de gran escala en tiempo real.
2． Diverso. Una amplia gama de fuentes de datos determina la diversidad de formas de big data. Cualquier forma de datos puede ser útil actualmente, el más utilizado es el sistema de recomendación, como Taobao, NetEase Cloud Music, Toutiao, etc. Estas plataformas analizarán los datos de registro de los usuarios para recomendar más cosas que les gusten.
Los datos de registro son datos claramente estructurados. También hay algunos datos que no están claramente estructurados, como imágenes, audios, videos, etc. Estos datos tienen relaciones causales débiles y requieren anotaciones manuales.
3. alta velocidad. Los big data se generan muy rápidamente y se transmiten principalmente a través de Internet. Todos en la vida son inseparables de Internet, lo que significa que las personas proporcionan una gran cantidad de información a big data todos los días.
Y estos datos deben procesarse de manera oportuna, porque es muy antieconómico gastar mucho capital para almacenar datos históricos que tienen un pequeño impacto para una plataforma, los datos guardados solo pueden ser. En los últimos días o un mes, no importa qué tan lejos estén los datos, deben limpiarse a tiempo, de lo contrario el costo será demasiado alto.
En base a esta situación, big data tiene requisitos muy estrictos en cuanto a velocidad de procesamiento. Se utiliza una gran cantidad de recursos en el servidor para procesar y calcular datos, y muchas plataformas necesitan realizar análisis en tiempo real. Los datos se generan todo el tiempo y quien sea más rápido tendrá ventaja.
4. Ésta es también la característica principal del big data. La proporción de datos valiosos entre los datos generados en el mundo real es muy pequeña.
En comparación con los datos pequeños tradicionales, el mayor valor de los grandes datos es extraer datos valiosos para la predicción y el análisis de tendencias y patrones futuros a partir de una gran cantidad de datos irrelevantes de varios tipos y mediante un análisis en profundidad. utilizando métodos de aprendizaje automático, métodos de inteligencia artificial o métodos de minería de datos.
Descubrir nuevas leyes y nuevos conocimientos y aplicarlos en diversos campos, como la agricultura, las finanzas y la atención médica, para, en última instancia, lograr los efectos de mejorar la gobernanza social, aumentar la eficiencia de la producción y promover la investigación científica.