Cómo piensa
un analista de datos

Alguien decidió qué aparece en tu pantalla esta mañana. Vamos a ver cómo se toma esa decisión: sin código y sin fórmulas.

Bajen para empezar. Para presentar: avanza, regresa.

Perfiles de Netflix colocados según qué tanto ven comedia y qué tanto ven suspenso horas de comedia al mes horas de suspenso al mes ustedes gente que ve parecido a ustedes otro grupo, otros gustos perfil 40318 vio 31 horas seguidas, sin pausa nadie ve 31 horas sin parar se quedó la tele prendida cambia la tabla no cambia el método
alguien pregunta «¿qué le muestro?» lo que ya existe la tabla millones de filas herramientas SQL hoja estad. BI el hallazgo una frase se decide

Abran Netflix un momento.

Esa primera pantalla que les aparece no es la misma que le aparece a su mamá, ni a su vecino. Alguien decidió qué poner ahí, para cada uno de ustedes, esta mañana.

Hoy vamos a ver cómo se toma esa decisión.

MIRA
Seguir viendo
Capítulo 4
Temporada 2
Documental
Película
Serie
Porque viste comedia
Comedia
Comedia
Comedia
Stand-up
Comedia

Antes de empezar, quiero quitarles un miedo.

Nada de lo que vamos a ver hoy pasa de contar, promediar y comparar. No hay fórmulas raras y no voy a mostrarles código.

+
contar
÷
promediar
>
comparar

Si alguna vez eligieron algo mirando precios, ya hicieron la parte difícil de esto.

todo lo que hace falta saber

+
contar
÷
promediar
>
comparar

Nada de cálculo, nada de álgebra, nada de código.

Les hago una pregunta.

Si yo fuera Netflix y quisiera adivinar qué les va a gustar esta noche, ¿qué creen que me serviría más saber de ustedes?

Piénsenlo un segundo antes de que sigamos.

opción A · lo que declararon

perfiledadciudad
104128Lima
227728Lima

Mismos datos. ¿Ven lo mismo?

 ¿cuál sirve?

opción B · lo que hicieron

perfilcomediasuspenso
104112 h1 h
22772 h9 h

Aquí sí se nota la diferencia.

Lo que hacen importa más que quiénes son.

Así que empecemos por ahí. Voy a poner a cada persona en un cuadro según dos cosas nada más: cuántas horas de comedia ve al mes, y cuántas de suspenso.

Ese punto azul son ustedes. Nada más con dos números, ya tienen un lugar.

lo que hay guardado

perfilcomediasuspenso
104112 h1 h
22772 h9 h
381411 h2 h
42901 h8 h
dos columnas

lo que se ve

Cada persona es un punto. Con dos números por perfil ya se puede poner a cada quien en un lugar del cuadro.
Ustedes son el punto azul.

Ahora miren quién les queda cerca.

Estas personas no los conocen. Viven en otro país, tienen otra edad, otro trabajo. Pero ven casi lo mismo que ustedes, casi las mismas horas.

Netflix no necesita saber quiénes son. Le basta con saber a quién se parecen.

Y aquí está el otro grupo.

Fíjense: nadie dibujó esa separación, aparece sola. Ustedes ya pueden señalar dónde termina un grupo y empieza el otro.

Si alguien de ese otro grupo terminó una serie anoche y le encantó, esa serie hoy le sale a los de su grupo. No a ustedes.

Eso que acaban de hacer tiene nombre.

Miraron unos datos, encontraron dos grupos y trazaron la línea entre ellos. Eso es análisis de datos. No hubo truco.

El resto del oficio son herramientas para hacer lo mismo cuando ya no se puede ver a simple vista. Y ese momento llega rápido.

Lo que ve el otro grupo esta noche
Suspenso
Thriller
Misterio
Crimen
Suspenso
Lo que ven ustedes
Comedia
Comedia
Stand-up
Comedia
Romance

Porque en realidad se ve así.

Netflix tiene más de 300 millones de cuentas. Aquí está la misma pregunta de hace un minuto. Díganme ahora dónde está la línea.

No es que a ustedes les falte capacidad. Es que a simple vista esto ya no se puede.

Y además los datos vienen sucios.

Miren este perfil: 31 horas seguidas sin pausa. Eso no es alguien viendo televisión, es una tele que se quedó prendida.

Si yo cuento eso como si fuera una persona viendo, mis números quedan mal. Parte del trabajo es darse cuenta antes.

Aquí entran las herramientas.

Se las voy a presentar por lo que nos dan, no por cómo se escriben. Piquen la que quieran:

Cada una resuelve un problema distinto del camino.

lo que recibe

Escojan una herramienta para ver qué entra y qué sale.

lo que devuelve

Y así queda el camino completo.

Una pregunta que le importa a alguien. Datos que ya existían. Una herramienta para poder verlos. Y una decisión que cambia algo.

Eso es el trabajo. Todo lo demás son detalles.

pregunta
alguien necesita decidir algo
datos
ya existían, nadie los había juntado
herramienta
para poder verlos cuando son muchos
decisión
cambia lo que ve la gente

Ahora quiero que cambiemos la tabla.

Porque esto es lo que de verdad me interesa que se lleven hoy: el método que acabamos de recorrer no cambia. Lo único que cambia es qué hay en las columnas.

Busquen la suya.

¿Y en tu profesión?

Psicología

¿Cómo le ponemos número a qué tan ansioso está alguien? Un test no mide la ansiedad: mide respuestas que se le parecen.

Es lo mismo que hicimos con las horas de comedia. Nadie midió el gusto de nadie: medimos lo que la gente hace y de ahí dedujimos el resto.

preguntadatosherramientadecisión

Salud y enfermería

¿Qué paciente se nos complica esta noche? Presión, pulso, temperatura, y una raya que separa «vigilar» de «ya».

Es la misma raya que ustedes trazaron entre los dos grupos. Solo que los ejes ahora dicen presión y pulso.

preguntadatosherramientadecisión
Una terapeuta toma notas durante una sesión
PsicologíaAnotar lo que se observa ya es convertirlo en dato
Un médico observa un estudio en la pantalla
SaludLeer una pantalla para decidir qué hacer con un paciente

lo que devuelve

Y también aquí.

Ingeniería

¿Cuándo se nos va a romper la máquina? Los sensores avisan antes, si alguien está mirando.

Son las 31 horas seguidas. En sensores el dato faltante llega como −200, un número imposible que se mete en el promedio si no lo cachamos.

preguntadatosherramientadecisión

Negocio, marketing, ventas

¿Qué clientes están por irse? Retener siempre cuesta menos que conseguir uno nuevo.

Es lo de Netflix al revés. En vez de adivinar qué les va a gustar, adivinamos quién ya se cansó.

preguntadatosherramientadecisión
Un operario trabaja frente a un tablero de control
IngenieríaLos sensores avisan antes, si alguien está mirando

lo que devuelve

«¿Y esto para qué sirve?»

Es la pregunta justa, y se las voy a contestar con dos casos publicados, con nombre y cifras. No son ejemplos que me inventé.

En los dos, lo único que cambió fue mirar los datos que ya existían.

El caso que más me gusta.

A un grupo de pacientes con depresión les dieron los medicamentos de siempre. Al otro grupo, los mismos medicamentos. La única diferencia fue que al segundo grupo le aplicaban un cuestionario en cada sesión y ajustaban el tratamiento con esas respuestas.

El doble de ajustes, y mucho más temprano. Eso fue todo.

Psicología

lo que se mide

pacienteal inicioa las 4 sem.
A-1022421
A-1182614
A-1332220
se compara

lo que se descubre

Dos de estos tres no están mejorando.El cuestionario en cada sesión lo muestra a las cuatro semanas, no a los seis meses.
Y ESTO CAMBIÓ La recuperación pasó de 28.8% a 73.8%
Los medicamentos fueron los mismos en los dos grupos. Lo único que cambió fue medir en cada sesión y ajustar el tratamiento con esos datos.
Estudio con 120 pacientes, American Journal of Psychiatry, 2015

Y este salva vidas.

Los signos vitales ya se anotaban. Siempre se anotaron. Lo nuevo fue juntarlos y buscar el patrón que aparece horas antes de que alguien se complique.

Nadie compró una máquina nueva. Miraron mejor lo que ya tenían.

Salud y enfermería

lo que se mide

pacientepresiónpulsotemp.
48219011838.1
48221307636.6
48238412638.4
se vigila

lo que se descubre

Dos de estos van a empeorar esta noche.No es una corazonada: son las señales que aparecen horas antes de que se complique.
Y ESTO CAMBIÓ La mortalidad bajó de 13.9% a 8.8%
En cuatro hospitales, con 6,681 pacientes. Los enfermeros revisaban cada dos horas a quien el sistema marcaba.
Critical Care Medicine, 2022

Lo mismo, con el viento.

Una granja de turbinas no puede prometer energía si no sabe cuánta va a producir. Con el clima y el historial, se estima con 36 horas de anticipación.

La turbina es la misma. Lo que cambió fue saber qué va a pasar.

Ingeniería

lo que se mide

horavientoenergía
06:0014 km/h38
07:0022 km/h61
08:0019 km/h52
se predice

lo que se descubre

Cuánta energía va a haber pasado mañana. Con el clima y lo que pasó otras veces, se estima la producción con 36 horas de anticipación.
Y ESTO CAMBIÓ Subió 20% el valor de esa energía
Sobre un parque eólico grande. Saber cuánta energía habrá permite comprometerla con un día de anticipación, y eso vale más que venderla sobre la marcha.
Google, 2019

Y lo mismo con los clientes.

Alguien que deja de usar un servicio casi nunca avisa. Pero en los datos se ve semanas antes: entra menos, tarda más en volver.

Es el recomendador del principio, al revés.

Negocio y ventas

lo que se mide

clienteusos/meshace
C-4410182 días
C-4411326 días
C-4412211 día
se agrupa

lo que se descubre

El de en medio ya se fue, aunque siga pagando. Dejó de usarlo hace casi un mes. La baja formal llega después.
Y ESTO CAMBIÓ Netflix estima más de mil millones al año
Es el mismo sistema de recomendación del principio, pero al revés: en vez de adivinar qué te va a gustar, detecta a quién está por irse. Retener sale más barato que salir a buscar uno nuevo.
Escrito por gente de Netflix, 2015. La idea de que retener cuesta unas cinco veces menos que captar viene de Harvard Business Review, 1990.

Una última cosa, y los dejo.

Van a oír «analista» y «científico de datos» como si uno fuera mejor. El analista responde qué pasó; el científico estima qué va a pasar. El segundo hace todo lo del primero, más predicción.

Por eso se empieza por analista: no es la versión chiquita, es la base sobre la que va lo demás.

Y todo lo que vimos hoy (los grupos, la línea, el dato sucio) ya lo hicieron ustedes en quince minutos, sin escribir una sola línea de código.

Dos personas ven la televisión de noche en un sillón
Y todo empezó aquíAlguien decidió qué les iba a aparecer esta noche
Una terapeuta toma notas durante una sesión
PsicologíaAnotar lo que se observa ya es convertirlo en dato
Un médico observa un estudio en la pantalla
SaludLeer una pantalla para decidir qué hacer con un paciente
Un operario trabaja frente a un tablero de control
IngenieríaLos sensores avisan antes, si alguien está mirando

lo que recibe

Escojan una herramienta para ver qué entra y qué sale.

lo que devuelve

De dónde salió cada cosa

Si quieren revisar por su cuenta, aquí están las fuentes y unos datos abiertos para practicar.

Netflix · Relación con inversionistas
De aquí sale el número de cuentas. Netflix publica sus cifras cada trimestre.

Abrir la fuente

Netflix Research · Recomendaciones
El equipo de Netflix explica cómo funciona el sistema que arma su pantalla de inicio. En inglés, pero con ejemplos visuales.

Abrir la fuente

Medir en cada sesión, en depresión
De aquí sale el 28.8% contra 73.8%. Estudio con 120 pacientes, con los mismos medicamentos en los dos grupos. American Journal of Psychiatry, 2015.

Abrir la fuente

Alerta temprana en hospitales
De aquí sale la mortalidad de 13.9% a 8.8%, con 6,681 pacientes en cuatro hospitales. Critical Care Medicine, 2022. Ojo: compara dos años seguidos, no es un sorteo al azar entre pacientes.

Abrir la fuente

El sistema de recomendación de Netflix
Escrito por gente de Netflix. De aquí sale que influye en cerca del 80% de las horas vistas, y que ellos estiman que les ahorra más de mil millones de dólares al año.

Abrir la fuente

UCI · Heart Disease
Salud. 303 pacientes y 14 columnas, cabe en una hoja de cálculo. Para practicar la raya entre «vigilar» y «ya».

Abrir la fuente

Our World in Data · Satisfacción con la vida
Psicología. Escala de 0 a 10 por país y año, con todos los países de la región. Filtren el suyo.

Abrir la fuente

UCI · Air Quality
Ingeniería. 9.358 lecturas de sensores. Los datos faltantes vienen como −200: ahí está el ejercicio del que hablamos.

Abrir la fuente

UCI · Bank Marketing
Negocio. Quién contrata y quién no. Ojo con la columna duration: predice casi perfecto, pero solo se sabe después de llamar.

Abrir la fuente