¿Qué tipo de puertas abrirán los big data?
Como base importante para la vida humana, el big data ha abierto una nueva puerta. Más importante aún, a través de la puerta abierta por los big data, lo que la gente ve no son sólo los datos en sí, sino una nueva civilización humana basada en big data.
En los últimos 20 años, la ola del big data nos ha golpeado. Algunas personas dicen que los big data son como un océano sin fin. Las olas del mar son tan altas como las olas, y las olas son tan profundas como el fondo. Al mismo tiempo, desde el clásico caso de "cerveza y pañales" del gigante minorista internacional Walmart hasta la medicina de precisión, la importancia de los macrodatos en la vida y el trabajo de las personas se ha vuelto cada vez más prominente. Frente a una nueva puerta abierta por el big data, no podemos evitar pensar profundamente: ¿Qué tipo de puerta será ésta? ¿A qué clase de mundo nos llevará?
¿El big data está convirtiendo el mundo en datos?
Según la definición habitual, big data se considera conjuntos de datos que no pueden adquirirse, almacenarse, gestionarse ni analizarse mediante herramientas de software de bases de datos tradicionales. Esta es la definición técnica de big data, pero obviamente no involucra el contenido más importante en lo más profundo de la ola de big data.
El punto más importante en la definición de tecnología big data es la gran escala. Sin embargo, la esencia clave del big data no es principalmente su gran escala, sino que es completamente diferente de los datos pequeños como datos de muestra. Normalmente, la adquisición de datos muestrales siempre se fija de antemano, con un objetivo claro o incluso único. Por un lado, este tipo de muestreo preestablecido puede lograr mejor el objetivo preestablecido antes del muestreo, por otro lado, como dijo Aristóteles, al seleccionar una determinada posibilidad, también borra innumerables otras posibilidades.
Otro atributo más importante del big data es la dimensionalidad total. Normalmente cuando tomamos fotografías, elegimos un ángulo. Una vez que se toma el ángulo, los datos quedan fijos. Frente a una buena foto plana, es imposible observarla desde otro ángulo. Los big data, por el contrario, conservan casi todas sus dimensiones. Frente al big data, podemos mirarlo desde diferentes ángulos. Por supuesto, de hecho, ningún big data es verdaderamente "completo", al igual que nada en el mundo es perfecto, pero en términos de las necesidades humanas, sus dimensiones pueden considerarse "completas". Como datos de muestra, los datos pequeños están "incompletos". Así como Nietzsche dijo que los conceptos abstractos son "muestras secas", la similitud entre datos de muestra y conceptos abstractos ha sido "desactivada". Big data son datos en vivo (datos dinámicos) y datos completos. Por lo tanto, "todos los datos" es una perspectiva filosófica para comprender los big data. Desde esta perspectiva, podemos ver un contenido más rico: big data no solo es en escala, sino también en dimensión, todos los datos que satisfacen las necesidades del uso humano.
¿Qué significa la esencia del big data, especialmente sus datos completos?
Basado en big data, materialización y materialización forman un ciclo. El lema central del big data es cuantificar el mundo. Cuantificar el mundo es la base para crear el mundo. Esto se debe a que la materialización es en realidad materialización. La materialización es un concepto más amplio y es completamente diferente de la materialización que también puede aparecer sobre la base de pequeños datos. De manera similar, la materialización de datos es esencialmente materialización de información. El ciclo formado por la materialización de la información y la informatización de las cosas ha llevado a la humanidad a una era de creación. La creación basada en big data es diferente de proyectos como la construcción de carreteras y puentes. Con el desarrollo de la tecnología digital, las actividades creativas y sus productos están cada vez más estrechamente relacionados con la forma de supervivencia de los seres humanos.
Se trata de un nuevo concepto importante, la información. Hay más de cien definiciones de información. Entre ellos, la definición de Weiner, el fundador de la cibernética, es la más intrigante. En opinión de Wiener, "la información es información, no es materia ni energía". Esta definición puede parecer una tautología, pero tiene sentido. Explique que la información es un recurso diferente de la energía material, pero que tiene un estatus paralelo con la energía material. La información no sólo no es ni materia ni energía, sino que también tiene algunas propiedades importantes que la materia y la energía no poseen. Por ejemplo, el coste de copiar material y energía aumenta proporcionalmente, mientras que el coste marginal de copiar información disminuye cuantas más cosas puedas compartir, menos podrás, mientras que cuanta más información puedas disfrutar, más podrás; Estos importantes atributos de la información no muestran su importancia cuando se utilizan como datos pequeños como datos de muestra, pero parecen extraordinarios sobre la base de big data con atributos de datos completos. Sobre la base de big data, la información no puede tener un impacto extremadamente importante en el desarrollo de la civilización humana.
Hoy en día, el big data, como base importante de la vida humana, ha abierto una nueva puerta. Más importante aún, a través de la puerta abierta por los big data, lo que la gente ve no son sólo los datos en sí, sino una nueva civilización humana basada en big data.
En cuanto a las características del big data, la más mencionada es “42v”.
Las características del big data se resumieron por primera vez en "3v". Hace unos años, la gente creía que "3v" no era suficiente para describir las características de big data, y se propuso la descripción de "4v". Hasta ahora, la característica de big data más mencionada es "42v". Pero para las características del big data, actualmente es este "4v", es decir, una gran cantidad de "volumen", "verdad" diversa, "velocidad" y valor de alta velocidad".
"Cantidad" "Generalmente entendida como un gran número. Big data primero significa una gran cantidad de datos. En la era de los datos pequeños, los datos se crean principalmente manualmente, mientras que en la era de los grandes datos, los datos se generan mediante la interacción de máquinas. , Redes y personas. La gran cantidad es la característica básica de Big Data, pero a menudo se confunde con Big Data. De hecho, esta característica expresa la integridad de la escala de Big Data.
Como se mencionó anteriormente, la "grandeza" de los big data no es un concepto puramente cuantitativo. La clave de esta "grandeza" es el todo. El tamaño de los datos de la muestra también puede ser muy grande, pero no tiene la naturaleza de big data. La "grandeza" de los big data es en realidad un concepto cualitativo.
“Realidad” generalmente se entiende como diversidad. Esto incluye la diversidad de fuentes y tipos de big data, así como la diversidad de estructuras de datos. Pero "real" no puede entenderse simplemente como la diversidad de fuentes y tipos de datos, ni puede implicar únicamente datos estructurados, semiestructurados y no estructurados. Debido a la diversidad y complejidad de las estructuras de datos, esta característica del big data también significa la apertura de las estructuras de datos. Los datos estructurados, semiestructurados y no estructurados expresan no sólo el estado estructurado de los datos, sino también la estructura abierta de big data. Por ejemplo, los big data son diferentes de la naturaleza. La naturaleza puede satisfacer nuestras necesidades de supervivencia, pero es muy poco lo que podemos hacer frente a ella. Los grandes datos son diferentes. En la minería de big data basada en las necesidades humanas, la estructura de datos está abierta en el espacio infinito de los datos, las necesidades humanas y su desarrollo, y los humanos crean sus propias necesidades en este espacio infinito.
Generalmente se entiende por "velocidad" alta velocidad. No solo se refiere a la velocidad de procesamiento de datos del equipo técnico, sino que, lo que es más importante, se refiere al flujo de datos en tiempo real que depende de la velocidad de procesamiento de datos. Los datos de muestra se congelan después del muestreo, mientras que big data puede obtener la información requerida en tiempo real. Para big data, la información está viva y fluye con el tiempo. Por esta razón, la velocidad es particularmente importante para la transmisión de datos en tiempo real. Los flujos de datos de alta velocidad pueden sincronizarse mejor en el tiempo con procesos reales y, por lo tanto, están más estrechamente relacionados con la supervivencia humana. No sólo eso, sólo los datos de alta velocidad pueden brindarnos posibilidades ilimitadas. En el pasado, debido a limitaciones de velocidad, los datos que obtuvimos a menudo no estaban en contacto con el contenido que queríamos reflejar. Sin embargo, el flujo de datos de alta velocidad ha hecho que nuestros métodos para captar objetos sean cada vez más perfectos. De hecho, la integridad del big data incluye la dimensión crucial del flujo de datos.
“Valor” se utiliza para describir el valor de big data. Esta “V” se refiere a la característica más importante del big data. En general, se cree que la densidad de valor de big data es baja y que la minería de datos es "extraer oro en la arena". De hecho, la importancia de las características de valor de los big data es evidente, pero los big data también son muy complejos. El valor de los big data depende de si pueden captar la relación entre la combinación de relaciones relevantes reveladas detrás de los datos y las necesidades humanas y su desarrollo. Debido a que está conectado con las necesidades y el desarrollo de las personas, y debido a la apertura de la estructura de datos, el valor de big data ya no es simplemente un reflejo de la relación entre big data y las necesidades de comodidad de las personas, sino que está estrechamente relacionado con la capacidad de las personas para entender. En el caso de los big data, que también son una estructura abierta, algunas personas piensan que son un tesoro escondido y otros pueden considerarlos como un montón de basura y sin sentido; El valor y la importancia de los macrodatos dependen en gran medida de la comprensión que las personas tengan de la relación entre los grandes datos y las necesidades y el desarrollo humanos, y de la visión de las personas. En última instancia, todavía depende de su comprensión y comprensión de las necesidades y el desarrollo humanos. Y este es obviamente un tema filosófico típico. Con el desarrollo de big data, no sólo la filosofía y otras disciplinas se integrarán cada vez más, sino que también marcará el comienzo de una era de desarrollo integrado de la filosofía y la ciencia, la sociedad y la vida.
Aplicaciones de big data: ¿basura sin sentido o un tesoro de valor incalculable?
Como se mencionó anteriormente, si big data es basura o un tesoro depende de la aplicación de big data. En otras palabras, dado que todo el mundo piensa que los big data son algo bueno y útil, ¿cómo aplicarlos?
En la actualidad, la aplicación de big data sigue siendo un tema de frontera importante a nivel internacional. La correlación y la causalidad en big data son cuestiones importantes en las aplicaciones y análisis de big data. Los macrodatos resaltan el gran encanto de la correlación, pero al mismo tiempo también plantean un serio desafío al concepto tradicional de causalidad.
La historia de "cerveza y pañales" del minorista multinacional Walmart es un caso clásico de aplicación de big data del que la gente está hablando. Sobre la base de big data, Walmart utilizó el "método de la cesta de la compra" para analizar el comportamiento de compra de los consumidores y descubrió que algunos clientes masculinos tienden a comprar varias botellas de cerveza al mismo tiempo cuando compran pañales para bebés. Resulta que cuando las familias estadounidenses tienen hijos, la madre suele cuidar al niño en casa mientras el padre va de compras. A la hora de comprar pañales, los padres jóvenes y ocupados suelen llevarse unas cuantas botellas de cerveza, que resulta a la vez refrescante y festiva. Como resultado, Wal-Mart lanzó una promoción que combinaba cerveza y pañales, atrayendo a más clientes con tales necesidades a comprar en Wal-Mart, aumentando considerablemente las ventas de pañales y cerveza.
La aplicación exitosa de la correlación de big data en industrias similares hace que la gente naturalmente plantee la pregunta de si profundizar en la relación causa-efecto. Algunas opiniones extremas incluso creen que los macrodatos tratan de "qué" y no de "por qué" pueden hablar por sí mismos, por lo que, mientras sean relevantes, no deberían ser causales. Mientras no se trate de causalidad, obviamente hay entusiasmo por la asombrosa utilidad de las correlaciones de big data. Pero, de hecho, big data no solo domina la correlación, sino que también domina la causalidad como base.
"Tartas de huevo y linternas" es un ejemplo típico. Al igual que en el caso de la "cerveza y los pañales", los grandes datos de Wal-Mart muestran que muchas personas compraban tartas de huevo mientras compraban linternas. Por lo tanto, basándose en la correlación entre los clientes que compran tartas de huevo y linternas al mismo tiempo, colóquelos juntos en los estantes para aumentar las ventas. Pero si conoce la relación de causa y efecto detrás de esto, los resultados de ventas relacionados obviamente serán mejores. La razón es que se descubrió que la relación de causa y efecto entre las personas que compran linternas y tartas de huevo al mismo tiempo involucraba a los huracanes de América del Norte. Esto se debe a que la gente necesita tener linternas y comida listas antes de que llegue un huracán.
Sin embargo, los huracanes en América del Norte son tormentas estacionales. Si sólo conociéramos la correlación pero no la causalidad, podríamos seguir colocando linternas y tartas de huevo en el mismo estante. Conociendo la relación de causa y efecto detrás de esto, puedes juntar las tartas de huevo y las linternas antes de que llegue el huracán, o puedes establecer un lugar especial para los suministros para huracanes.
Se puede observar que la idea de que existe correlación pero no relación causal es fácilmente refutable. De hecho, la cuestión más crítica no es qué es más importante, correlación o causalidad, sino cómo entender la relación entre correlación y causalidad.
La investigación sobre este tema implica la recaracterización del concepto tradicional de causalidad. La visión tradicional de causa y efecto sólo refleja los fenómenos obvios de causa y efecto en la vida diaria y la física clásica. Por un lado, la trazabilidad a menudo conduce a problemas con las causas finales y, por otro lado, los modelos simples en los que los fenómenos como causas conducen a fenómenos como efectos tienen contradicciones lógicas inherentes obvias. Un modelo causal de este tipo no solo puede comprender la correlación de big data, sino también establecer la asociación entre la correlación de big data y la causalidad. Sólo considerando la causa como el proceso de interacción de los factores y el resultado como el resultado del proceso de interacción de los factores podemos ampliar nuestra comprensión de la causalidad y aplicarla a la comprensión de la correlación y la causalidad de los big data. El nuevo modelo causal así establecido tiene una rica estructura, no sólo en los vínculos donde la interacción entre factores se ha completado y en curso, sino también en los vínculos donde los factores aún no han entrado en la interacción. Esto presenta el tiempo pasado, el tiempo progresivo y el tiempo futuro del modelo causal. Esto no sólo ayuda a las personas a comprender la relación causa-efecto de la solidificación, sino que también abre un amplio espacio para que las personas creen el futuro.
De esto no sólo podemos ver que la correlación en realidad tiene su base causal, sino que también podemos obtener una comprensión unificada de la correlación y la causalidad. En el nuevo modelo causal, la correlación puede entenderse como derivación causal, incluida la relación entre factores y resultados, la relación entre resultados y resultados, y la relación entre factores y factores particularmente importantes. Debido a que estos factores y consecuencias también son potenciales, también podemos ver las raíces causales de las correlaciones de big data y muchos contenidos interesantes e importantes, incluida la comprensión de algunos casos de correlación extraños. Debido a que la relación entre factores constituye un espacio infinitamente amplio de posibilidades en relación con los resultados potenciales, las correlaciones resultantes son muy ricas en contenido. En el espacio infinito de factores potenciales, de acuerdo con necesidades específicas, al permitir que factores específicos entren en un proceso de interacción específico de una manera específica, podemos crear lo que necesitamos. Evidentemente, esta nueva relación causal se acerca más a la sociedad real.
El big data generará una nueva civilización de la información y afectará a la reconstrucción del poder mundial.
Si las formas anteriores de civilización se consideran civilización material y energética, entonces cuando la sociedad humana se desarrolle hacia la era del big data, marcará el comienzo de una civilización de la información que será diferente de la civilización material y energética. La formación y el desarrollo de la civilización de la información deben basarse en big data. La civilización de la información, como forma de civilización paralela a la civilización material y a la civilización energética, es una civilización del disfrute basada en la esencia de la información. Sólo sobre la base de big data se puede aprovechar plenamente la esencia de la información. Además, el desarrollo de la civilización de la información es un proceso simétrico de información pública basado en big data.
Esto requiere que, por un lado, para promover el desarrollo de la civilización de la información, se elimine en la medida de lo posible la asimetría de la información en el dominio público; En el impulso del desarrollo de la civilización de la información, las patentes de innovación deben protegerse tanto como sea posible. Más protección, que sólo es posible basándose en big data. La civilización de la información, como civilización humana, es una civilización servil basada en mecanismos de información. En la era de la civilización de la información, los humanos controlan cada vez más la energía material a través de la información y, mediante ajustes estructurales, los materiales han pasado de ser una sustancia que no es tan valiosa para los humanos a una sustancia que no puede satisfacer las necesidades humanas y se ha convertido en una forma que satisface mejor las necesidades humanas. necesidades humanas, transformando la energía de una forma que es difícil de utilizar a una forma que es más fácil de obtener y utilizar. Por lo tanto, las actividades humanas tienen más que ver con el procesamiento directo de información, que con las actividades tradicionales que se ocupan principalmente de materia y energía. Y estos deben completarse sobre la base de big data. Sin big data, incluso si la información es importante, sólo puede estar en una posición de dependencia.
La civilización de la información es una etapa avanzada del desarrollo de la civilización humana, y también es una civilización humana basada en la creación de información. Son los big data, y sólo los big data, los que pueden proporcionar el espacio de información necesario para esta civilización creada. Hasta cierto punto, la creación de información es la actividad más humana. Sólo en la era de la información basada en big data la historia humana podrá entrar verdaderamente en la órbita de la civilización humana. No sólo el control de la energía material podrá alcanzar el nivel en el que toda la sociedad e incluso toda la humanidad puedan darse cuenta de que "las cosas sirven a las personas", de modo que los humanos. las actividades pueden transformarse de la descripción a la cognición, la transformación a la cognición creativa; y la liberación integral de la creatividad requerida por la era creativa también significa que la sociedad se ha desarrollado hasta tal punto que la naturaleza humana ha alcanzado una civilización liberadora cada vez más elevada en la dimensión social. Se puede ver que la distinción entre civilización de la información y civilización material no se basa esencialmente en la distinción entre métodos de producción social, sino en la división de la civilización humana basada en la existencia humana. Esto significa que los macrodatos se convertirán cada vez más en una base importante para la supervivencia humana, y también significa que las personas existirán cada vez más en forma de información.
Las personas existen cada vez más en forma de información, lo que indica que la puerta a la civilización de la información abierta por el big data también liberará una serie de nuevas cuestiones importantes. Estos temas importantes involucran tanto la vida personal como el desarrollo social.
La primera es la ecología de la información. A medida que las personas existen cada vez más en forma de información, la ecología de la información se ha convertido naturalmente en una cuestión básica cada vez más importante.
Para los humanos, la ecología natural o una ecología material-energética más fundamental es crucial, y la ecología de la información no sólo es crucial, sino también "del corazón", y la ecología de la información está más cerca del corazón de las personas. Por lo tanto, sobre la base de la ecología natural, la ecología de la información atraerá cada vez más la atención de las personas y se convertirá en un tema relacionado con el desarrollo humano en la era de la civilización de la información. Al igual que en la era de la civilización material y energética, la ecología natural es una cuestión relacionada con la supervivencia humana.
El segundo es el significado de la existencia humana. Sin energía material no hay información, y la existencia de energía material es la base. Sin embargo, en la era de la civilización de la información, si una persona todavía existe principalmente en forma de materia y energía, y todavía toma el disfrute sensorial basado en la materia y la energía como la principal fuente del significado de la vida, en una palabra, todavía permanece principalmente en forma de materia y energía, entonces es probable que tarde o temprano encuentre su camino entre la multitud sin sentido. En la era de la civilización de la información, las actividades humanas son principalmente actividades de información. Sólo aquellos que existen principalmente en forma de información y cuya actividad principal son las actividades creativas pueden ingresar al campo de la producción significativa. En este sentido, la civilización de la información significa esa división: gente relativamente sin sentido y gente productiva. Es probable que ésta sea una tendencia inevitable en el desarrollo de la era de la civilización de la información. Por supuesto, la sociedad humana también debería pensar en cómo evitar el surgimiento de nuevas injusticias sociales.
El tercero es el desarrollo del país. De la historia del desarrollo de la sociedad humana podemos ver un hecho importante: el verdadero ascenso de un gran país suele conducir a una nueva civilización. La llegada de la era de la civilización de la información irá inevitablemente acompañada del surgimiento de nuevas potencias, ya sean potencias reales o potencias potenciales. En el siglo XXI, si China quiere desarrollarse pacíficamente y convertirse en una potencia mundial, necesita liderar la civilización de la información. Quizás la civilización de la información ya no pueda ser dominada por un solo país como el mundo en la era de la civilización tradicional, pero ningún país puede realmente convertirse en una gran potencia a menos que entre en las filas de los principales países de la civilización de la información. El ascenso y caída de un país no sólo está relacionado con la supervivencia y el desarrollo de los individuos, sino que también constituye un ciclo de interdependencia y desarrollo coordinado.
La competencia en el siglo XXI será la competencia de la información. La competencia en la era de los grandes datos será una competencia liderada por la civilización de la información, lo que significa que en la era de los grandes datos, China liderará la civilización de la información como una verdadera gran potencia, o sólo ascenderá hasta convertirse en una gran potencia en el nivel de civilización material y energética. Este es también un contenido importante que más nos preocupa en la puerta a la civilización de la información abierta por los big data.