Archivo de la etiqueta: big data

¿Como orientar mi empresa al dato?

La orientación al dato es uno de los pilares clave de la transformación digital. Las empresas que asumen este principio quieren que la veracidad y objetividad sean las que soporten sus decisiones y para lograrlo incorporan la cultura del dato como una parte integral de su modelo de negocio. Para lograrlo, todos los procesos de la empresa tienen que generar datos útiles que han de ser puesto en valor.

¿Significa esto suspender el papel de la intuición y el olfato en las decisiones empresariales? Para nada, la intuición y el olfato necesitan de un buen combustible para funcionar y ese es la información de calidad. Por otro lado la intuición no es infalible y si podemos disponer de información de calidad que nos permita determinar en qué medida nuestro instinto es certero, estaremos mucho más seguros. Sólo así seremos capaces de confirmar, mejorar y ampliar esa intuición y es aquí donde entra en juego el papel del dato de calidad.  

La orientación de una empresa al dato se basa en cuatro pilares fundamentales: generación, captura, procesamiento y análisis. En sí mismos estos cuatro aspectos encierran el ciclo de gestión del dato.

La generación y captura de datos

El punto de partida es la generación de datos, esta tiene que ser un objetivo deliberado y buscado activamente. Una empresa de transporte puede generar muchísimos datos provenientes de los viajes que realizan sus vehículos o simplemente no generarlos. Por ejemplo, en países donde los camiones no están obligados a utilizar tacometros, los desplazamientos de camiones no generan datos sobre velocidades, paradas, etc. Si no añadimos un dispositivo GPS tampoco tendremos datos sobre geolocalización. Nuestro objetivo por tanto debe de ser que todos los procesos de la empresa generen un torrente de datos continúo sobre aspectos interesantes del negocio.

Para obtener un modelo útil de generación de datos debemos de plantearnos muchas preguntas y profundizar en el análisis de nuestro modelo de negocio. No se trata de generar datos al tumtum sino de tener una trazabilidad del desarrollo continúo de los procesos. También es muy interesante incorporar fuentes de datos externas que combinadas con las propias puedan ofrecernos una visión analítica mucho más completa y rica de la realidad de nuestro negocio y de cómo este se relaciona con su entorno.

Todo ese flujo de datos tiene que ser recogido de manera centralizada en un repositorio. Debido a la naturaleza heterogénea de los mismos, el tipo de infraestructura más recomendable  sea un data lake pero existen múltiples alternativas. Lo importante es tener una política clara de gestión del dato, que nos permita tener una buena trazabilidad y evitar duplicidades y datos inservibles.

Organizando y explotando los datos

Los datos per se carecen de valor, no son más que puras anotaciones, su valor aparece cuando podemos asociarlos a hechos, conceptos e incluso otros datos. Durante la fase de procesamiento de los datos debemos de transferirlos a un repositorio final donde se encontrarán correctamente identificados, organizados y relacionados con el resto de datos de la empresa, ya que este será la base que nos permita su explotación rentable

A la hora de analizarlos debemos tener en cuenta los dos enfoques principales: los análisis estructurados y los análisis exploratorios. En los primeros identificamos kpi’s o indicadores que se obtienen mediante combinaciones y análisis predefinidos basados en nuestro conocimiento del negocio o en las prácticas de gestión asumidas por la empresa. Ejemplos de esto pueden ser la rentabilidad, el ROI, la tasa de devoluciones y otra variables que nos permiten obtener una valoración del desempeño de nuestra empresa en múltiples aspectos.

El análisis exploratorio se realiza mediante sofisticadas técnicas de análitica avanzada. En este tipo de análisis los modelos predefinidos se dejan a un lado y es el análisis estadístico de los datos el que nos permite detectar hallar modelos de relación, que nos permite identificar causas de problemas complejos.  También nos permite descubrir correlaciones y patrones ocultos que afloran hechos relevantes acerca de nuestro negocio que podemos utilizar para resolver problemas o generar ventajas competitivas.

Este es un análisis muy resumido y la aplicación de estas premisas de forma completa supone un reto para cualquier empresa, pero espero que sea de utilidad para todas las personas que quieran saber algo más acerca de este tema.  

¿Cómo incorporar el Big Data y la analítica avanzada a mi empresa?

 

Las técnicas de analítica avanzada y de Big Data están revolucionando la forma en la que las empresas explotan la información. Lo que en principio era una tecnología complicada y costosa es ya accesible a un número creciente de empresas. En 2017 hemos alcanzado un umbral en el que muchas empresas de mediano tamaño que operan en mercados más tradicionales como la industria, distribución y alimentación o consumo, están comenzando a usar estas tecnologías para aplicaciones que van desde el marketing, el mantenimiento de activos, optimización de actividades logísticas o planificación y optimización de recursos.

El problema más común es que a día de hoy la mayoría de las empresas tienen una infraestructura sólida de gestión de la información con un ecosistema bien asentado de aplicaciones que suelen orbitar en torno a un ERP. A esto suele ir unido un sistema de reporting/inteligencia que muchas veces está asentado sobre Datawarehouse y procesos ETL. El llegar a este punto, que todavía no han alcanzado muchas empresas, requiere de años duro trabajo y esfuerzo que implican a casi todos los departamentos de la empresa además de la inversión de importantes cantidades de dinero.

No es extraño que muchos CIO´s cuando oyen hablar de una nueva tecnología disruptiva se muestren cuanto menos cautos. Una parte importante de su trabajo, que no es nada sencilla, es mantener todo el ecosistema informático de la empresa a flote, esto nunca es tarea fácil. El CIO avezado sabe que añadir una nueva incógnita a la ecuación puede acabar haciendo que todo el edificio se desmorone.

Lo primero que hay que tener claro es que el Big Data y la analítica avanzada nunca va a sustituir a las aplicaciones de gestión y a los sistemas tradicionales de reporting. Estas soluciones son una capa añadida que nos permite ampliar nuestras capacidades. Los sistemas de reporting tradicionales nos ofrecen capacidades de analítica descriptiva pero rara vez son capaces de ofrecernos capacidades predictivas o descriptivas es ahí donde está el verdadero valor de las soluciones de Big Data

Un enfoque progresivo

La mejor forma de comenzar a incorporar estas tecnologías en su empresa es adoptar un enfoque progresivo, que no requiera ni de grandes inversiones ni de un gran consumo de recursos. Lo que menos interesa a una empresa con un ecosistema estable y que tiene que mantener la persiana abierta es sumergirse en un proyecto de gran calado que consuma los recursos de IT y que ralentice la marcha del resto de proyectos.

Por eso desde Golive lo que sugerimos es centrarse en un problema específico que queramos resolver. Todas las empresas tienen uno: conseguir unas previsiones de ventas más realistas, optimizar los niveles de stock, hacer una segmentación de clientes más precisa, etc..

A partir de aquí lo más inteligente es tomar una muestra de datos y realizar una prueba de concepto en un entorno cloud. Esto nos permitirá desplegar una solución a medida de las necesidades de nuestra empresa en muy poco tiempo y con una inversión muy ajustada, totalmente escalable, sin barreras de entrada ni salida.

Más adelante, si la cosa funciona, podemos ir ampliando nuestra solución de Big Data y analítica avanzada conforme vayamos rentabilizando la inversión y aumentando su alcance. Teniendo la posibilidad en cualquier momento de migrar a una solución on-premise en nuestro propio CPD.

Si quiere conocer más información sobre nuestros planteamientos en Big Data haga click en el siguiente enlace

¿Cómo puede ayudar el Big Data a mi empresa?

bTodos los días aparecen gran cantidad de artículos sobre Big Data; que si menganito lo está haciendo, que si Fulano ya lo ha hecho, que si el Big Data salvara el mundo… Cómo casi siempre en cuestiones cruciales se echa en falta una explicación clara y sencilla sobre las ventajas que aporta esa tecnología en concreto. Y decimos bien sobre las ventajas, antes incluso sobre qué es o como funciona. En un mundo como el nuestro, con tantas opciones e información es más importante saber qué es lo que una tecnología puede aportarnos antes de meternos en detalles sobre su esencia o funcionamiento.

A continuación, detallo algunas de las principales ventajas que el Big Data puede aportar a tu empresa:

 

Conexión con la realidad: Incorporando, analizando y relacionando múltiples fuentes de datos que están más allá de la limitada información de carácter económico financiero, que se maneja en las empresas, abrimos un canal de conexión que nos permite evaluar cómo se relacionan las distintas partes que componen la realidad con mayúsculas de nuestra empresa.

Hasta ahora cualquier análisis que pudiéramos realizar se basaba en la información contenida en nuestros sistemas de gestión, casi siempre transaccionales. Estos registran cadenas de eventos o procesos, que comienzan cuando un cliente nos hace un pedido y terminar cuando se le entrega un producto o un servicio. Casi todo lo que ocurre antes y después y sobre todo fuera de los circuitos administrativos de nuestra empresa permanece inaccesible y por tanto imposible de analizar y sobre todo de relacionar con aspectos clave de nuestra empresa como el comportamiento de las ventas. Lamentablemente dado que las empresas no son entes aislados, sino que operan en un entorno, gran parte las cuestiones cruciales a tener en cuenta se encuentra fuera de esta limitada esfera.

Con las soluciones de Big Data podemos crear un puente entre en la empresa y el mundo, mediante un sistema de análisis que recoja en tiempo prácticamente real todo tipo de datos de fuentes dispares e integrarlas con la información de nuestros sistemas, teniendo un pulso continuo sobre nuestro entorno.

Capacidad de respuesta: Incorporando de forma automática y en tiempo real grandes flujos de información relevante, podemos detectar problemas y amenazas mucho antes de que estas afecten al balance de nuestra empresa, lo mismo podemos decir de las oportunidades.

Un sistema de Big Data bien articulado ha de ser capaz de ir rastreando todo ese flujo de datos en busca de correlaciones y hechos significativos que nos permitan anticiparnos a los cambios que suceden en nuestro entorno y a los potenciales problemas que se puedan originar dentro de nuestra empresa.

Interacción: Al integrar más información proveniente de terceros en nuestros sistemas, tenemos la oportunidad de establecer unos marcos de interacción mucho más dinámicos y fluidos, generando mensajes y acciones que den respuesta a hechos concretos.

Este aspecto es especialmente útil para las actividades de marketing y ventas ya que nos permite crear canales de comunicación directos con nuestros clientes potenciales y actuales. Con un mejor seguimiento de todas las acciones de marketing e iniciativas comerciales que realicemos. Una de las grandes fallas del marketing es la incapacidad real y efectiva de medir la eficacia de las campañas acometidas. Con las soluciones de Big Data esta brecha consigue estrecharse de forma significativa.

Comprensión: Integrando todas las fuentes de relevantes en un único repositorio de datos junto con toda la información contenida en nuestros sistemas de negocio tenemos por fin la capacidad de entender el funcionamiento de nuestra empresa y establecer consecuencias causales, determinar flujos de acontecimientos y en definitiva entender mejor como nuestra empresa responde a los cambios en nuestros entorno y como nuestras acciones son capaces de generar cambios en nuestros clientes, proveedores y en nuestro público en general.

Fidelización de clientes: Este último punto es una consecuencia casi inevitable de un correcto desarrollo de los puntos anteriores. Recopilando información de forma continua acerca de nuestros clientes y su entorno, utilizándola para comprenderlos mejor y dar una respuesta más rápida y efectiva a sus necesidades, estamos en una posición inmejorable para establecer con ellos un relación más duradera y fructífera para ambas partes.

Es un axioma conocido en el mundo de la empresa que casi siempre se invierten importantes cantidades de recursos en incorporar clientes potenciales sin desarrollar adecuadamente nuestra cartera actual.  Con las soluciones de Big Data contamos las herramientas necesarias para corregir este defecto.

Creación de ventajas competitivas: Si algo distingue el Big Data del BI tradicional es sus capacidades de analítica avanzada. Con una adecuada configuración y dirección, el sistema explora todo el torrente datos buscando patrones y correlaciones, que permiten aflorar realidades ocultas difícilmente detectables de otra forma.

En otras palabras, nos permite ir más allá de donde llega nuestra intuición, mostrándonos aspectos relevantes de nuestro negocio, que podemos aprovechar para generar ventajas competitivas.

Al ser el Big Data un mundo tan vasto y con tantas aplicaciones he optado por ser lo más genérico posible, ofreciendo un conjunto de ventajas globales que puede obtener cualquier empresa y que por fuerza deberían de traducirse en casos de uso concretos para cada caso. No obstante, si interesado en conocer de forma más que ventajas concretas puede generar para tu empresa, estaré encantando de hablar contigo.

Espero que el artículo te haya resultado interesante. Un saludo.

Visualización de la eficacia de las acciones de marketing (II): mapas combinados

 

¿Cómo debería de ser el mapa de guerra de una empresa? En las guerras antiguas se utilizaban figuras parecidas a las de ajedrez para representar la disposición sobre el terreno de los distintos ejércitos y unidades. Éstas podían variar en tamaño y forma para indicar el número de efectivos y los distintos tipos de unidades: arqueros, caballería, infantería, etc… Esto daba muy buenos resultados a la hora de visualizar una correlación de fuerzas en una confrontación. A pesar de no ofrecer representaciones exactas, ya que, a la hora de visualizar información, el detalle en exceso es nocivo al distraernos fácilmente de las cuestiones esenciales.

No cabe duda de las ventajas que tiene utilizar un mapa para describir una situación de batalla frente a un informe hablado o escrito. Por un lado, con un simple vistazo nuestra mente puede tener una comprensión clara e instantánea de la situación. En cambio, un informe hablado o escrito de batalla, requiere de una atención continua y prolongada durante la exposición, la cual ha de ser completa, ya que es mucho peor una descripción a medias que una ausencia de la misma. Cuanto más nos apoyamos en el lenguaje, especialmente en los textos, más se ralentiza nuestra capacidad de comprensión.

La guerra comercial es más difícil de representar. Para empezar, los ejércitos tradicionales luchan por el dominio y control de los espacios físicos. Por otro los mercados casi siempre están ligados a territorios, pero a veces el aspecto geográfico es irrelevante.  Muchas veces la guerra se libra en otros espacios más abstractos como el digital o el mental. Esto no quieren decir que estos “otros espacios” no puedan ser cartografiados. Simplemente tenemos que ser mucho más imaginativos. No obstante, siempre que sea posible es mejor ceñirse a elementos visuales conocidos ya que requieren de menos explicación.

 

El poder de las restricciones

El principal problema a la hora de utilizar mapas para representar información es la saturación. Es muy fácil llenar un mapa con elementos visuales hasta convertirlo en algo prácticamente indescifrable. En este caso queremos representar la relación entre dos elementos clave acciones y ventas agrupables temporalmente por días, semanas, meses y años. En la mayor parte de los casos cuando se utilizan mapas se suelen tirar de iconos o puntos para representar la cantidad de un determinado atributo en una localización concreta.  Este tipo de elementos es ideal para la representación de datos tales como las cifras de ventas e una determinada ciudad, región o puesto de venta.

A la hora de mostrar la intensidad de las acciones realizadas la utilización de mapas de calor es el mejor de los métodos posibles y prácticamente el único que permite una combinación con la representación icónica antes mencionada.

¿Qué tipo de análisis podemos ejecutar a partir de esta representación visual? Lo lógico es que las zonas con una mayor intensidad de acciones, deberían de corresponderse con las mayores ventas.  Básicamente podremos identificar dos anomalías básicas zonas con una alta intensidad de acciones y bajo nivel de ventas y zonas con un alto nivel de ventas y baja intensidad en acciones. En el primer caso tendríamos que ver porque no están funcionando nuestras acciones de marketing y en el segundo tendríamos que detectar porque las ventas se están comportando bien a pesar de la baja intensidad de las acciones, ya que probablemente podamos identificar algún factor clave que podamos convertir en una ventaja competitiva.

Big Data: el futuro del marketing

 

El final de una era

Durante décadas la medida de la eficacia de las acciones de marketing y el testeo de ideas se ha basado en técnicas de muestreo. la recogida de datos de audiencia, pruebas de mercado, focus groups y sondeos demoscópicos, todas estas técnicas se basan en la extrapolación de los resultados obtenidos sobre pequeñas muestras que se creen representativas de una población mayor.

Como me explico un profesor, tomar una muestra es como probar una cucharada del guiso que estamos preparando. Si lo que probamos está bueno, entonces podremos asumir que el resto del cocido está bueno. Esto, a veces, es mucho suponer. La parte de arriba puede estar buena mientras que la de abajo puede estar agarrada. Inconveniente que por otro lado es perfectamente conocido por los cocineros del negocio. Los más expertos son capaces  incluso de meter la cuchara en la parte que más gustará al cliente.

Hasta que no llegaban las ventas, nunca se contaba con una medida real de efectividad.  La aparición del mundo online ha cambiado este paradigma. Ahora podemos medir de forma directa y en tiempo real la respuesta a nuestras acciones. Para muchas empresas totalmente inmersas en la economía digital esta es su única forma de trabajar.

El resto nos encontramos en una especie de limbo. En el que por un lado disponemos de los datos aportados por los sistemas de gestión transaccionales como los  ERP y CRM , combinados con el nuevo torrente de información online y las técnicas tradicionales de medición de acciones de marketing basadas en muestreos.

Todo esto se traduce en una gran cantidad de datos tanto estructurados como no estructurados que necesitan ser puestos en conjunto para obtener una visión clara del negocio  y el entorno. Por si fuera poco, existe además hoy la posibilidad de incorporar numerosas fuentes de datos tanto externas como internas que no se rigen por los parámetros económico-financieros tradicionales y no están expresadas en unidades monetarias o cantidades de producto o kilos de materias primas. Estos datos reflejan hechos y realidades que pueden ser determinantes para nuestra empresa y que complementan la visión aportada por las fuentes clásicas.

 El Big Data un nuevo enfoque

La pregunta más obvia ante este nuevo panorama es: ¿Cómo podemos sacar partido a todo este torrente de información? A día de hoy la mejor respuesta posible es incorporar los enfoques de Big Data.

Estos se apoyan en dos pilares, uno tecnológico que crear una  infraestructura capaz de recoger, ordenar y procesar ese torrente de nueva información, y la otra la analítica que incorporando técnicas de análisis avanzado nos permite abordar toda esa complejidad.

Lo parte más interesante para los profesionales del marketing es la metodología utilizada para el análisis. Los sistemas de reporting tradicionales se han basado en la búsqueda de un dato en concreto o en el contraste de hipótesis preestablecidas, dando respuesta a preguntas como: ¿Cuál es la rentabilidad de este producto? ¿Ha sido efectiva esta campaña de comunicación? ¿Afecta la variable X a las ventas de mi producto?

Los verdaderos sistemas de analítica avanzada no parten de preguntas previas tan acotadas, sino que se dedican a construir modelos matemáticos con un número creciente de variables de actuación  para encontrar correlaciones que pongan de manifiesto hechos hasta ahora desconocidos. Esto nos permite comprender aspectos y cuestiones que nunca habríamos sido capaces ni siquiera de plantear. Detrás de este enfoque se esconde el secreto que ha permitido a algunos gigantes de internet llegar hasta donde están.

Con el desarrollo de la tecnología, know how y la reducción de costes, este enfoque se ha vuelto no solamente atractivo sino también asequible para un número cada vez mayor de empresas. El auge de las plataformas cloud ha reducido el coste de acceso a este tipo de soluciones, permitiendo crear pequeños prototipos fácilmente escalables que reducen las barreras de entrada y los tiempos de despliegue. En resumen, el futuro del marketing está  en el Big Data pasando de técnicas de muestreo a técnicas de rastreo sobre datos reales y efectivos.

Big Data: de Google a su empresa


El Big Data, es un nuevo enfoque en gestión de datos, surgido por las necesidades de las grandes compañías de Internet de lidiar con grandes volúmenes de datos. Cuando comprendieron que los sistemas tradicionales de almacenamiento y análisis de información, no eran capaces de dar respuesta a la gran cantidad de datos a gestionar, se vieron obligados a desarrollar nuevas tecnologías.

Es difícil establecer cuando nació el Big Data. Los primeros en marcar a la res,  fueron O´Reilly Media allá por 2005 y que el lanzamiento de Hadoop en 2006 marcó un hito en cuanto a tecnologías orientadas al almacenamiento y análisis flexible de datos, pero la cuestión siempre ha estado en el aire.

La aportación de Google

En el año 2000, los ingenieros de Google se dieron cuenta que ningún software disponible en el mercado sería capaz de ayudarles a afrontar el enorme reto que tenían entre manos: indexar y organizar toda la información contenida en una Internet en crecimiento constante. Entonces, desarrollaron una nueva infraestructura de almacenamiento de datos, basada en dos sistemas: uno de gestión de archivos y otro de proceso de datos que permitía separar el trabajo entre diversos servidores de gran tamaño que trabajaban de forma paralela. Esta arquitectura fue la base que utilizó Doug Cutting para crear Hadoop.

En 2009 los ingenieros de Google publicaron un artículo en la revista Science en la que explicaron cómo fueron capaces de predecir la propagación de la gripe invernal en Estados Unidos, no sólo a nivel nacional, sino incluso en regiones específicas.  Lo hicieron cruzando más de 50 millones términos de búsqueda con y los datos de propagación de la gripe entre 2003 y 2008.

Su enfoque fue rompedor. En vez de comprobar si los usuarios buscaban unos términos en concreto, procesaron un total de 450 millones de modelos matemáticos para lograr encontrar 45 términos de búsqueda que integrados en un único modelo presentaban una correlación fuerte con los datos de propagación de la enfermedad, permitiendo predecir en tiempo real el desarrollo de la gripe. Con ello habían encontrado la forma ideal de explotar grandes volúmenes de información.

La evolución del Big Data hacia la empresa tradicional

De ahí en adelante un puñado de empresas, principalmente gigantes de internet como Google, Facebook y otras, cuyo modelo de negocio estaba asociado a una explotación intensiva de la información, hicieron del Big Data una parte esencial de su negocio. La gran mayoría de empresas tradicionales permanecían ajenas a esta revolución, pero por poco tiempo.  Poco a poco algunos sectores como el financiero (Banca Online, Trading), la distribución (Amazon y demás), comenzaban a afrontar escenarios realmente complejos de gestión de la información.

Gracias a los sistemas tradicionales de BI (Data Warehouses, ETL´s, etc..), las empresas tradicionales han sido capaces de contar con una visión única de empresa integrando la información procedente de múltiples sistemas y aplicaciones de negocio, pero muchas se encuentran en un momento en el que esto empieza a no ser suficiente.

La apertura de los mercados y la intensificación de competencia obliga a una integración cada vez más estrecha de la cadena de suministros y la cadena de valor. El comercio online, no solamente entre empresas y cliente final sino también en los mercados b2b, ha acentuado estas necesidades de integración, al aportar unos volúmenes de información cada vez más mayores. Las necesidades de gestión de la información son mucho más complejas que las que teníamos años atrás, en los que una empresa con su ERP tradicional y unas pocas herramientas de ofimática para usuarios era capaz de satisfacer sus necesidades de forma razonable.

 

El inevitable encuentro entre empresas tradicionales y Big Data

El alza de los grandes proveedores de servicios de Internet ha sido a costa de la erosión e incluso desaparición de grandes sectores de la economía tradicional. Al igual que los fabricantes de carromatos sucumbieron ante el auge de los Daimler y Ford, las páginas amarillas y guías telefónicas, han sido barridas por eficacia de los servicios de búsqueda ofrecidos por Google. ¿Cuándo fue la última vez que consultó una guía telefónica?

Amazon, que comenzó con un portal de internet en el que se podían comprar los libros de escasa tirada y que difícilmente encontraríamos en las estanterías de una librería local, se ha convertido en una especie de bazar universal que está transformando el negocio de la venta detallista. Ha supuesto el fin de muchos comercios tradicionales, pero a su vez ha sabido transformarse en una plataforma que actúa como escaparate en el espacio digital para miles de pequeñas empresas y particulares que ofrecen sus productos a través de esta web.

La lista de ejemplos podría ser mucho más larga, pero al final todo se resumen en compañías que han sabido aprovechar el potencial que nos ofrecen tecnologías como el Big Data para crear y desarrollar modelos de negocios que generan más valor para los clientes.

En definitiva, nada nuevo bajo el sol, los peces grandes son los primeros que han comenzado a sacar partido a una nueva revolución tecnológica que por otro lado a convertido a algún pez chico en tiburón (Facebook, Amazon, Google), pero conforme la tecnología se ha ido asentando y los costes de acceso y explotación se han ido reduciendo, el Big Data se empieza a convertir en una necesidad para no convertirnos en pez muerto.