Los dark data son una parte integral del universo del big data, representando un volumen considerable de información que, a pesar de ser recolectada, no se analiza ni se utiliza en la toma de decisiones. Estos datos no estructurados y no etiquetados se almacenan frecuentemente por obligaciones legales o en previsión de un posible análisis futuro que pueda aportar valor a la empresa. Sin embargo, según estimaciones de IBM, el 80% de los datos recogidos en estrategias de big data no se explotan adecuadamente, y el 60% de la información pierde su relevancia casi inmediatamente tras su captura.
Tipología de los dark data
La clasificación de los dark data puede entenderse a través de tres categorías principales:
| Categoría | Descripción |
|---|---|
| Datos no recopilados | Información que no se está capturando y por tanto, no se almacena. |
| Datos de difícil acceso | Datos recopilados pero con barreras de acceso que dificultan su uso. |
| Datos no gestionados | Datos disponibles y recopilados pero que aún no se han procesado adecuadamente. |
El motivo por el cual se acumulan estos datos sin un propósito claro es la incertidumbre sobre su valor potencial. Las empresas, ante la duda, optan por conservarlos en lugar de arriesgarse a eliminar información que podría ser útil en el futuro. La solución a este dilema pasa por clasificar y categorizar el dark data para determinar si merece la pena su análisis. Empresas como Abast, Datumize y BBVA ofrecen servicios especializados para gestionar estos datos, lo que implica un coste adicional que puede justificarse por el valor de la información extraída.
Demanda de especialistas en big data
El Centro Tecnológico de Cataluña (Eurocat) señala que el sector del big data y el análisis de datos es uno de los que más ha crecido en el ámbito de las Tecnologías de la Información. Se estima que para 2020 habrá una demanda de 8 millones de profesionales en este campo, una cifra que podría no satisfacerse debido a la escasez de personal cualificado. Ante esta necesidad, instituciones educativas como MASTER-MADRID han desarrollado programas como el Máster en Business Intelligence y el Máster en Análisis de Datos, con metodologías que simulan un entorno laboral real para una formación práctica y efectiva.
Fuentes de referencia
- BBVA Open Mind
- Zeus Vision
En conclusión, los dark data representan un desafío y una oportunidad para las organizaciones que buscan optimizar su gestión de la información. La clave está en identificar, clasificar y, cuando sea pertinente, analizar estos datos para convertirlos en un activo valioso. La creciente demanda de expertos en big data y análisis de datos subraya la importancia de una formación especializada que prepare a los profesionales para enfrentar estos retos y aprovechar las oportunidades que surgen de la correcta interpretación de los datos oscuros.
El futuro del big data está intrínsecamente ligado a la capacidad de las empresas para iluminar los dark data, transformándolos en insights que impulsen la toma de decisiones estratégicas. La inversión en herramientas y talento especializado no solo es necesaria, sino que se perfila como un elemento diferenciador para las organizaciones que deseen mantenerse competitivas en la era de la información.