Las tecnologías de big data están evolucionando rápidamente y están conectadas a cinco tendencias, incluyendo aplicaciones prácticas de aprendizaje automático y recursos informáticos baratos y abundantes.
Desde hace tiempo he dicho que todos los datos eventualmente se convertirán en big data, y las plataformas de big data se convertirán en nuestra plataforma de procesamiento de datos de próxima generación. Hemos llegado a un punto en la evolución del big data donde ahora es algo común, y si tu organización no está inmersa en descubrir cómo implementar tecnologías de big data, es posible que te estés quedando sin tiempo.
De hecho, el mundo del big data continúa cambiando rápidamente, como pude observar recientemente en la Conferencia de Datos de Strata en Nueva York. Mientras estuve allí, me reuní con más de una docena de proveedores clave en sesiones y en el piso de exhibición. En general, las personas que asisten a conferencias como esta son cada vez menos aquellos geeks ligeramente extravagantes e idealistas enfocados en la investigación de código abierto, y son más profesionales del mundo real del big data y el aprendizaje automático que buscan resolver problemas reales de negocios en entornos de producción empresarial.
Dado ese ambiente básico, aquí están mis cinco conclusiones principales de Strata sobre las tendencias del big data que están impulsando la evolución del big data:
- Datos estructurados: El big data ya no se trata solo de datos no estructurados o semi-estructurados. Muchos de los proveedores prominentes, liderados por los principales proveedores de plataformas como Hortonworks, MapR y Cloudera, ahora hablan de implementaciones de big data como almacenes de datos empresariales completos (EDWs, por sus siglas en inglés). La idea pasiva y a menudo pantanosa del lago de datos parece un poco pasada de moda, mientras que hay mucha energía enfocada en proporcionar inteligencia empresarial práctica y en tiempo real a un amplio grupo corporativo de consumidores de BI. Noté que un gran número de los competidores de aceleración basados en big data están aplicando análisis bajo demanda contra volúmenes tremendos, tanto históricos como en tiempo real estilo IoT, de datos estructurados. Claramente, hay una guerra en marcha por la inversión en BI corporativo y EDW. Dado lo que he visto, apuesto a que las plataformas de big data superarán y superarán inevitablemente a los EDW monolíticos y propietarios legados.
- Sistema convergente de acción: Esto lleva a la observación de que la evolución del big data incluye implementaciones que albergan cada vez más la huella de datos completa de una empresa, datos estructurados y no estructurados juntos. Anteriormente hemos señalado que muchos enfoques analíticos avanzados pueden agregar un valor tremendo cuando combinan muchos conjuntos de datos corporativos anteriormente dispares de diferentes tipos. Ahora, muchas de las discusiones anteriores sobre almacenes de datos/BI también extienden los servicios de BI para incluir y converger en fuentes de datos no estructurados y semi-estructurados. No está del todo claro si las plataformas de big data están listas para considerarse sistemas maestros de registro para todos los datos transaccionales en todas las circunstancias. Sin embargo, diría que están listas para ser verdaderos sistemas convergentes de acción en la evolución del big data, reemplazando silos de procesamiento de datos desarticulados y dispares con una plataforma única y mucho más poderosa para análisis operativos y toma de decisiones en tiempo real.
- Aprendizaje automático pragmático: A medida que más y más empresas implementan sistemas de big data en producción real, los asistentes a las conferencias de big data parecen estar más enfocados en los negocios, más serios y más pragmáticos. Me sorprendió gratamente ver que casi no hubo afirmaciones exageradas sobre la inteligencia artificial en Strata, pero sí mucho material práctico sobre el aprendizaje automático efectivo.
En resumen, la evolución de las tecnologías de big data está impulsada por la necesidad de manejar grandes volúmenes de datos estructurados y no estructurados, la convergencia de sistemas de acción y la aplicación pragmática del aprendizaje automático. Estas tendencias están transformando la forma en que las empresas procesan y utilizan los datos para tomar decisiones empresariales más informadas y en tiempo real.
¿Está tu organización preparada para aprovechar al máximo las tecnologías de big data y adaptarse a esta evolución rápida? Si no es así, es posible que te quedes atrás en un mundo cada vez más impulsado por los datos.
