Vamos ahora con las V con las que se definen de dimensiones fundamentales de lo que se entiende por Big Data:
- Volumen: es el tránsito de escalas de Megabytes y Gigabytes hacia Terabytes, Petabytes y Exabytes. El almacenamiento deja de medirse en archivos aislados para gestionarse en clústeres y data lakes distribuidos.
- Velocidad: se trata del ritmo vertiginoso al que los datos son creados, transmitidos y consumidos. Exige un procesamiento que evoluciona desde el clásico procesamiento por lotes (batch processing) hacia la analítica en tiempo real o en flujo (stream processing).
- Variedad: es la convivencia de datos estructurados (tablas SQL), semiestructurados (JSON, XML) y no estructurados (imágenes, audio, video, texto libre), eliminando la dependencia de esquemas preconcebidos antes de la ingesta.
- Veracidad: se trata de la incertidumbre y el "ruido" inherentes a los datos recopilados masivamente. Implica procesos rigurosos de limpieza, validación y normalización para garantizar la fiabilidad del análisis.
- Valor: es el propósito final del paradigma, que consiste en transformar inmensos volúmenes de datos brutos en conocimiento accionable, patrones latentes o modelos predictivos.
Este modelo descriptivo fue establecido por el analista Doug Laney en 2001, primero las tres V iniciales y luego las otras dos. Otros elementos se han ido incoporando pero estos siguen siendo los básicos.
Por otro lado, el crecimiento de la Big Data ha implicado en los últimos años una tansformación de la arquitectura computacional. Para sostener esta evolución, la informática debió rediseñar sus fundamentos técnicos.
Primero, pasar de la escala vertical a la escala horizontal. En lugar de equipar un solo servidor con más potencia (escalabilidad vertical), la Big Data utiliza clústeres de máquinas convencionales conectadas en red que trabajan en paralelo (escalabilidad horizontal).
Luego, el procesamiento distribuido. Surgen marcos de trabajo (frameworks) diseñados para dividir el cómputo y el almacenamiento entre múltiples nodos de forma tolerante a fallos (mecanismos como MapReduce, almacenamiento HDFS o motores de procesamiento en memoria).
Finalmente. el paso del Schema-on-Write al Schema-on-Read. En las bases de datos relacionales tradicionales, la estructura (esquema) debía definirse antes de guardar los datos (Schema-on-Write). En Big Data, los datos se almacenan en su estado bruto (Data Lakes) y la estructura se interpreta al momento de consultarlos o analizarlos (Schema-on-Read).
Esta Big Data actúa como el combustible primario del desarrollo contemporáneo del Machine Learning y la inteligencia artificial. La disponibilidad de volúmenes masivos de datos desestructurados permitió trascender los enfoques analíticos descriptivos tradicionales hacia la analítica predictiva, con modelos estadísticos avanzadas que identifican tendencias y anticipan eventos futuros; la analítica prescriptiva, algoritmos que sugieren rutas de acción optimizadas en tiempo real; y entrenamiento de modelos fundacionales, donde el procesamiento de petabytes de texto y gráficos para la creación de embeddings vectoriales y redes neuronales profundas.
Lo más notable de este progreso es que hemos pasado ahora a un nuevo nivel, que se ha comenzado a definir recientemente, que es la Huge Data. El concepto de Huge Data (a menudo abordado en la literatura especializada y en la estrategia tecnológica avanzada como la siguiente frontera tras el Big Data clásico) representa un salto tanto cuantitativo como cualitativo en la gestión, arquitectura y significado de la información digital. De esto seguiremos hablando en la entrada a continuación.

















