Big data vs Inteligencia de negocios /Data warehouse

Muchos clientes se preguntan confundidos por estos términos por lo que tratare de no utilizar términos muy técnicos e usar muchos ejemplos.

Business Intelligence surge 90s , el cual pretende solucionar el problema en la toma de decisiones, de información generalmente estructurada. Se entiende por estructurada a toda información dentro de una empresa que está en un repositorio de Base de datos, o un xml o un archivo, en palabras simples “filas y columnas”. Cerca de los 2010 ya se escucha de hablar de Big Data (orientado a BI) pero debido a la cantidad de información pero esta se refería todavía a información estructurada, la cual vio la necesidad de solucionar el problema con otras soluciones, como por ejemplo las BD’s columnares que eran Bds específicos para Datawarehouse, que permiten comprimir la información y manejar grandes volúmenes de datos (Sybase , Vertica) , pero todavía no se utilizaba tanto el termino de Big Data.

¿Entonces dónde surge el Big Data?

Surge cuando las compañías como Amazon, Google, Facebook , Yahoo y otros que ellos crecían no solo en datos estructurados si no en información de videos, texto en redes sociales , lo cual obligo a desarrollar otras herramientas o frameworks , que luego fueron liberadas como dominio público (Hadoop), aquí es que surge con más fuerza lo que es BIG DATA y las empresas empezaron adoptar estas nuevas herramientas que estaban más dirigidas a poder manejar grandes volúmenes de datos pero a la vez información no necesariamente estructurada. Los requerimientos de negocio ya requerirían responder otras preguntas que se alojaban en fuentes no convencionales.

Como se ve en el gráfico, aparte de las fuentes convenciales surgen nuevas fuentes que requieren otro tipo de herramientas.

Ejemplo de las preguntas de clientes:

Tengo montado mi plataforma Business Intelligence, Datawarehouse, herramientas ETL(Extracción, transformación y carga) , herramientas de explotación y analítica puedo reemplazar mi antigua plataforma con las nuevas herramientas de BIG DATA ?

Mi empresa está en la necesidad de integrar los diferentes sistemas ERP y CRM , BPM y otros sistemas internos, tengo mucha información, se nos dificulta generar los reportes, me conviene adquirir una solución Big Data sin necesidad de implementar un Data warehouse y BI ?

La respuesta a estas preguntas no es absoluta, requiere poder hacer muchas más preguntas de negocio al cliente para poder entender sus necesidades específicas, y darle la mejor alternativa a sus problemas, la gran diferencia está en el enfoque usado.

Hay mucha información al respecto en internet, para poder ser consultada, pero voy darles ejemplos sobre esto.

Ejemplo (Intentare ser genérico para las diferentes industrias):

Problema: Cliente tiene la necesidad de analizar sus clientes como con X promoción lanzada, control y seguimiento (casi en tiempo real)

Enfoque Business Intelligence.

Se debe cruzar información de las diferentes fuentes CRM y ERP en un Data warehouse, ver la evolución de ventas comparadas con meses anteriores, por ciudad, departamento, márgenes, o costos comparados, analizar y cruzar información de los registros realizados en los sistemas de call center . Utilizando data mining con información histórica, se puede predecir un posible comportamiento de compra en el producto, anticipándose a posibles problemas.

Enfoque BIG DATA.

Generalmente utiliza información no estructurada o semi estructurada, es decir información como redes sociales, para poder analizarla y saber que piensa el cliente “Análisis sentimental”, o se puede ir a la información que está en sus call center, grabaciones(audio) de las llamadas hechas, reclamos u otros , para poder encontrar patrones respecto a la promoción etc.

Conclusión.

Big Data tendrá mucho más potencial para poder analizar información no estructurada y manejar mucha más información (Peta Bytes y Zeta Bytes) , pero a la vez debe terminar igual en una herramienta de Inteligencia de Negocios/ Datawarehouse para que los clientes finales vean lo que está detrás de esta caja negra, a la vez no podrá remplazar a lo creado en un datawarehouse, por lo tanto : Big data y Business intelligence son complementarias

Interesante link adicional: http://www.b-eye-network.com/view/17017