En el análisis de datos, especialmente cuando trabajamos con conjuntos de datos tabulares, es común que lo primero que queramos hacer sea “entender el terreno”: obtener una visión rápida de los patrones, la distribución y las características principales de las variables. A este proceso lo llamamos estadísticas resumidas (summary statistics), y constituye uno de los pilares del análisis exploratorio de datos (EDA, Exploratory Data Analysis).
Estas estadísticas nos permiten responder preguntas básicas como:
¿Qué tan centrados o dispersos están los datos?
¿Existen valores extremos o atípicos?
¿Cómo se distribuyen los valores?
¿Qué categorías son más frecuentes?
Estas herramientas —medias, dispersiones, cuartiles, gráficos y agrupaciones— nos permiten:
Preparar los datos para análisis más complejos.
Detectar errores o valores extremos.
Comprender patrones iniciales.
Análisis Univariado: Explorando una Variable a la Vez
El análisis univariado se enfoca en describir y entender una sola variable por vez. Es la forma más directa de comenzar el EDA y nos permite observar tendencias, detectar anomalías y entender el comportamiento general de los datos.
Podemos dividirlo en dos grandes tipos:
Variables cuantitativas (numéricas)
Variables categóricas (de tipo texto o etiquetas)
Veamos cómo se resumen y visualizan cada una.
Variables Cuantitativas
Medidas de Tendencia Central
Las medidas de tendencia central buscan representar el valor “típico” o central de un conjunto de datos.
Media (promedio): la suma de todos los valores dividida por el número de observaciones. Es útil, pero sensible a valores atípicos.
Mediana: el valor que divide al conjunto en dos partes iguales. Menos afectada por outliers, representa mejor distribuciones sesgadas.
Moda: el valor más frecuente. Muy útil en datos categóricos o multimodales.
Media recortada: elimina un porcentaje de los valores más altos y bajos antes de calcular la media.
Los percentiles indican el porcentaje de observaciones por debajo de un valor dado. Por ejemplo, el percentil 80 = 130 significa que el 80% de los valores son menores que 130.
np.percentile(df['column'], 80)
Los cuartiles dividen los datos en cuatro partes iguales:
Q1 (25%), Q2 (50% = mediana), Q3 (75%)
El rango intercuartílico (IQR) se calcula como:
IQR = Q3 - Q1
y representa la dispersión central, resistente a outliers.
Visualización: Histogramas y Boxplots
Visualizar los datos es esencial para complementar las estadísticas numéricas.
Histograma: muestra la frecuencia de valores en intervalos (bins).
sns.histplot(df['column'])
Boxplot (diagrama de caja): representa la mediana, los cuartiles y los valores atípicos.
sns.boxplot(df['column'])
Estos gráficos ayudan a detectar sesgos, simetrías y valores extremos de un vistazo.
Variables Categóricas
Cuando analizamos variables no numéricas (como “país”, “color” o “tipo de producto”), las estadísticas cambian.
Frecuencias y Proporciones
La herramienta básica es el conteo de valores:
df['column'].value_counts()
Y para ver proporciones:
df['column'].value_counts(normalize=True)
Estas proporciones nos ayudan a entender la distribución de categorías, especialmente cuando hay clases dominantes o poco representadas.
Visualización
Gráficos de barras: ideales para mostrar frecuencias.
sns.countplot(x='column', data=df)
Gráficos circulares (pie charts): útiles para proporciones, aunque menos precisos.
Agrupación y Agregación de Datos
En análisis exploratorios más profundos, necesitamos obtener estadísticas por grupo. Por ejemplo: ¿Cuál es el precio promedio por tipo de carrocería?
La función groupby() de pandas permite dividir, aplicar y combinar fácilmente:
df.groupby('body-style')['price'].mean()
También podemos aplicar múltiples funciones de agregación:
Este enfoque es esencial para crear tablas resumen, indicadores por categoría y comparativas entre grupos.
Variables Categóricas Ordinales
Algunas categorías tienen un orden lógico (por ejemplo: “bajo”, “medio”, “alto”). En estos casos, podemos convertirlas en variables de tipo category ordenadas para analizarlas numéricamente:
En el diseño de arquitecturas de Machine Learning, la calidad de las predicciones de un modelo no depende únicamente de la complejidad del algoritmo matemático seleccionado, sino de la forma geométrica de los datos que le suministramos.
Muchos algoritmos fundamentales (como la Regresión Lineal, la Regresión Logística o las Redes Neuronales) asumen de manera implícita que las variables numéricas de entrada siguen una Distribución Normal (o Gaussiana). Sin embargo, en el mundo real, los datos de negocio suelen ser imperfectos y presentan sesgo o asimetría (skewness), acumulando la mayoría de sus registros en un extremo y extendiendo una larga cola en el sentido opuesto.
En este artículo analítico, abordaremos en exclusiva las técnicas de ingeniería de características cuyo objetivo principal es reducir la asimetría de una distribución para aproximarla a una campana de Gauss.
¿Qué son los datos sesgados?
Cuando un dataset presenta asimetría, la media, la mediana y la moda se separan, provocando que los modelos estadísticos tengan dificultades para aprender los patrones de forma equitativa. El escenario más común en analítica de negocio es la asimetría positiva (o sesgo a la derecha), donde la distribución presenta una cola alargada hacia los valores extremadamente altos. En una distribución normal, la media, la mediana y la moda coinciden, y la curva tiene forma de campana. Matemáticamente, se puede representar como:
Sin embargo, muchos conjuntos de datos reales, como ingresos, precios o número de visitas, presentan sesgo (skewness): una asimetría en la distribución.
Si la cola se extiende hacia la derecha, decimos que está sesgada positivamente.
Si se extiende hacia la izquierda, está sesgada negativamente.
Por ejemplo, los ingresos de una población suelen estar sesgados a la derecha, porque hay muchas personas con ingresos bajos y pocas con ingresos muy altos.
Reducir el sesgo mejora:
La precisión del modelo.
La interpretabilidad de los resultados.
La estabilidad numérica en el entrenamiento.
Principales técnicas de transformación de datos
A continuación, analizaremos las funciones matemáticas aplicadas en Data Science para comprimir las colas de las distribuciones y redistribuir los datos de forma simétrica.
Es la técnica más extendida y utilizada en la industria. Consiste en aplicar el logaritmo natural a la variable predictora.
$$y = \log(x)$$
Indicada para: Casos de asimetría positiva fuerte y distribuciones con colas extremadamente largas hacia la derecha.
Casos de uso típicos: Variables socioeconómicas o de comportamiento digital como ingresos, ventas acumuladas o tráfico web, donde unos pocos usuarios o registros presentan valores astronómicos en comparación con la media.
Limitación: Matemáticamente no está definida para valores menores o iguales a cero. Si existen ceros, suele aplicarse \(\log(x + 1)\) como variante técnica.
Una alternativa de compresión geométrica moderada.
$$y = \sqrt{x}$$
Indicada para: Escenarios donde la asimetría positiva es moderada. Al ser menos agresiva que la función logarítmica, no deforma de manera tan drástica las distancias relativas.
Ventaja: Acepta directamente el valor cero en el dominio de la variable, haciéndola ideal para conteos.
Transformación de Raíz Cúbica
Una herramienta matemática versátil para la manipulación de espectros numéricos amplios.
$$y = \sqrt[3]{x}$$
Indicada para: Distribuciones que contienen valores positivos, negativos y ceros simultáneamente, siempre que la asimetría no sea extrema. Al conservar el signo del input original, se permite estabilizar la varianza sin perder la naturaleza bidireccional del dato.
Transformación Recíproca
Una de las funciones de transmutación más agresivas en el arsenal estadístico.
$$y = \frac{1}{x}$$
Indicada para: Distribuciones con una asimetría extremadamente severa y presencia de outliers de gran magnitud. Esta operación invierte el orden de magnitud, transformando los valores extremadamente grandes en valores cercanos a cero, logrando una compresión radical de la cola derecha.
Transformaciones Avanzadas y Automatizadas
En lugar de probar manualmente qué función matemática se adapta mejor a cada columna del dataset, la ciencia de datos moderna utiliza optimizadores algorítmicos que buscan el parámetro de transformación idóneo de manera automatizada.
Es un método estadístico avanzado que parametriza la transformación mediante un valor de potencia llamado Lambda (\(\lambda\)). El algoritmo busca el \(\lambda\) óptimo que minimiza la asimetría de la variable resultante.
Gran Limitación: Funciona única y exclusivamente con valores estrictamente positivos. Si la columna contiene un solo cero o un número negativo, el sistema fallará.
Transformación Yeo-Johnson
Considerada la evolución moderna del método Box-Cox. Modifica las ecuaciones para estabilizar las varianzas permitiendo que la potencia \(\lambda\) se calcule de forma segura sobre cualquier naturaleza numérica.
Ventajas de Producción: Es compatible con valores negativos y ceros. Debido a esta flexibilidad analítica, es una de las técnicas automatizadas más integradas en los pipelines de Machine Learning industriales (como los transformadores nativos de Scikit-Learn).
Comparación de Transformaciones para Datos Sesgados
Transformación
Intensidad
Admite Ceros
Admite Negativos
Logarítmica
Alta
No
No
Raíz Cuadrada
Media
Sí
No
Raíz Cúbica
Baja
Sí
Sí
Box-Cox
Alta
No
No
Yeo-Johnson
Alta
Sí
Sí
Buenas prácticas
Visualiza siempre tus datos antes y después de transformar.
Mide la asimetría \( (\text{skewness})\) antes y después.
No transformes por costumbre: hazlo solo si hay una razón estadística o del modelo.
Guarda los parámetros de transformación si vas a aplicarlos en datos futuros (por ejemplo, en deploy de modelos).
Considera también el escalado posterior (normalización o estandarización).
Uno de los problemas más comunes en cualquier análisis de datos es la presencia de valores faltantes. No importa si trabajas con datos de clientes, de sensores, o de ventas: los huecos están ahí, casi siempre. Y si no los manejas bien, cualquier análisis que hagas puede llevarte a conclusiones incorrectas o sesgadas.
Pero no te preocupes. Hay estrategias simples y efectivas para detectar, entender y manejar los datos faltantes de manera profesional. En este artículo aprenderás cómo hacerlo paso a paso.
¿Qué son los datos faltantes?
Decimos que hay datos faltantes cuando una variable no tiene valor para una observación determinada. En la práctica, suelen aparecer como NULL, NaN, #N/A o simplemente celdas vacías.
Por ejemplo, imagina que trabajas con los datos de ventas de varias tiendas de ropa y te encuentras con esto:
StoreID
ProductID
ProductColor
Price
A
1
Red
20
B
3
Blue
18
C
1
NULL
20
C
2
NULL
25
Aquí, las tiendas del grupo C no informaron el color del producto. Si no corriges este problema, cualquier análisis sobre los colores más vendidos será inexacto.
Por qué es importante gestionar los datos faltantes
Tener valores ausentes no solo significa un dataset incompleto. También puede distorsionar tus conclusiones. Por ejemplo, si intentas calcular la media de precios o la correlación entre variables sin tratarlos, obtendrás resultados falsos o sin sentido.
Desde el punto de vista estadístico, manejar los datos faltantes aumenta el poder estadístico (la capacidad de detectar patrones reales en los datos) y reduce el riesgo de errores de interpretación.
En resumen:
Mejora la precisión del análisis.
Evita conclusiones engañosas.
Permite conservar el tamaño de la muestra y su representatividad.
Por qué faltan los datos
Existen varias causas típicas:
Errores o causas sistemáticas: El dato nunca se registró. Puede deberse a un descuido humano o a un fallo técnico.
Privacidad o consentimiento: A veces los usuarios optan por no proporcionar ciertos datos, como su correo electrónico o edad.
Pérdida o corrupción de información: Errores de conexión, fallos en la base de datos o interrupciones durante la carga de información pueden causar huecos.
Tipos de datos faltantes
No todos los datos faltantes son iguales. En ciencia de datos se clasifican en cuatro tipos:
Estructuralmente faltantes (Expected Missing): Es normal que falten: por ejemplo, si alguien responde “no tengo asma”, es lógico que los campos sobre inhaladores estén vacíos.
MCAR (Missing Completely at Random): Faltan al azar, sin ningún patrón. Es el caso ideal, aunque poco frecuente.
MAR (Missing at Random): Faltan por alguna razón, pero dentro de ciertos grupos. Ejemplo: personas con un IMC alto tienden a no reportar su peso.
MNAR (Missing Not at Random): Faltan por una razón directamente relacionada con el valor faltante. Por ejemplo, si los pacientes con presión arterial muy alta evitan hacerse la medición.
Cómo identificar los datos faltantes
Explora pequeñas muestras de datos: Visualiza las primeras o últimas filas para ver si hay celdas vacías.
Usa funciones de resumen: En Python, data.isnull().sum() te mostrará cuántos valores faltan por columna.
Compara recuentos: Si una columna tiene menos registros válidos que otras, probablemente tenga valores ausentes.
Estrategias para manejar los datos faltantes
1. Eliminación (borrar los datos faltantes)
A veces la mejor solución es simplemente eliminar filas o columnas con datos faltantes. Pero cuidado: no siempre es seguro.
Cuándo eliminar
Cuando los datos faltantes son pocos (menos del 5% del total).
Cuando los valores faltan al azar (MCAR o MAR).
Cuando los datos faltantes no afectan directamente al análisis principal.
Cuándo no eliminar
Si perderías demasiadas observaciones (más del 20%).
Si los datos faltan por una razón estructural o sistemática.
Tipos de eliminación
Eliminación por lista: Borra toda la fila con cualquier dato faltante.
data.dropna(inplace=True)
Eliminación por pares: Solo elimina las filas que afecten a las variables que estás analizando.
Usa el valor anterior para completar el actual (útil en series temporales).
data['Value'].ffill(inplace=True)
Interpolación
Calcula un valor intermedio entre los datos vecinos:
data['Temperature'].interpolate(inplace=True)
Modelos predictivos
Utiliza algoritmos de Machine Learning (como regresión lineal o KNN) para estimar los valores faltantes en base a otras variables.
Caso especial: datos faltantes en series temporales
Cuando los datos se registran en el tiempo (como precios bursátiles o sensores IoT), los huecos pueden rellenarse con métodos temporales, como:
LOCF (Last Observation Carried Forward)
Interpolación lineal
Suavizado exponencial
Por ejemplo:
Timestamp
Value
08:01
12
08:02
13
08:03
Falta
08:04
16
Podemos reemplazar el valor faltante (08:03) con el anterior (13) o con un promedio (14.5).
Recomendaciones finales
Entiende el contexto de tus datos. No todos los huecos significan error.
Documenta tus decisiones. Explica por qué imputaste, eliminaste o dejaste un valor vacío.
Evalúa el impacto. Comprueba cómo cambian tus resultados antes y después del tratamiento.
En resumen
Estrategia
Cuándo usarla
Riesgo
Eliminación por lista
Pocos valores faltantes
Pérdida de datos
Eliminación por pares
Solo faltan algunas variables
Mínimo
Imputación media/mediana
Datos numéricos simples
Sesgo posible
LOCF o Interpolación
Series temporales
Puede suavizar en exceso
Modelos predictivos
Datos complejos o correlacionados
Mayor esfuerzo computacional
Manejar los datos faltantes no se trata solo de “rellenar huecos”, sino de preservar la integridad del análisis. Un buen tratamiento puede marcar la diferencia entre un modelo fiable y uno que toma decisiones erróneas. En análisis de datos, la ausencia también habla: cada valor faltante tiene una historia detrás, y entenderla es parte del trabajo de un buen analista.
Uno de los pasos fundamentales del Análisis Exploratorio de Datos (EDA) es el Data Wrangling. La transformación de datos es un conjunto de técnicas utilizadas para convertir datos de un formato o estructura a otro, con el fin de hacerlos más útiles, consistentes y listos para el análisis.
En el proceso de preparación de datos, ciertas tareas suelen realizarse en un orden específico para maximizar la eficiencia y efectividad del flujo de trabajo. Un flujo de trabajo típico de limpieza y preparación de datos seria:
Key restructuring (reestructuración de claves)
Data validation (validación de datos)
Data cleaning (limpieza de datos)
Data deduplication (deduplicación de datos)
Data derivation (derivación de datos)
Format revisioning (revisión de formato)
Data aggregation (agregación de datos)
Data filtering (filtrado de datos)
Data joining (unión de datos)
Data integration (integración de datos)
Este flujo de trabajo es iterativo y puede requerir ajustes según las necesidades específicas del proyecto y la naturaleza de los datos. Además, algunos pasos pueden superponerse o requerir revisiones cuando surgen nuevos datos o cambios en los requisitos del análisis.
La razón principal para transformar los datos es obtener una representación más útil y compatible con otros conjuntos de datos. Además, la transformación adecuada favorece la interoperabilidad dentro de un sistema al seguir una estructura y formato común.
Key Restructuring
En el ámbito de la ciencia de datos, “Key Restructuring” se refiere a la reorganización o transformación de las claves en un conjunto de datos. Las “claves” suelen ser identificadores únicos o combinaciones de campos que sirven para relacionar registros entre sí.
if df['key_column'].is_unique:print("Las claves son únicas.")else: df.drop_duplicates(subset=['key_column'], inplace=True)
Reindexación Basada en Claves
df.set_index('key_column', inplace=True)
Data Validation
La validación de datos consiste en verificar si los datos cumplen con un conjunto de reglas o normas antes de ser procesados o analizados. Es una etapa crítica, ya que trabajar con datos erróneos o mal formateados puede llevar a conclusiones incorrectas y resultados poco confiables.
La validación debe ser continua, adaptándose a las reglas del negocio y al tipo de análisis o modelo que se esté desarrollando.
Data Cleaning
La limpieza de datos busca detectar y corregir (o eliminar) registros corruptos, incompletos o inconsistentes, tratando valores faltantes y estandarizando formatos.
Tareas comunes:
Detectar valores faltantes
df.isnull()
Eliminar valores faltantes
df.dropna()
Rellenar valores faltantes
df.fillna(method='ffill')
Conversión de tipos
df.astype({'col1': 'int32'})
Normalización de texto
df['col'] = df['col'].str.strip().str.lower()
Manejo de outliers Filtrar o imputar valores extremos según percentiles o desviaciones estándar.
Una limpieza adecuada es la base para cualquier análisis o modelado confiable.
Data Deduplication
La deduplicación de datos busca identificar y eliminar registros repetidos dentro de un conjunto de datos. Esto mejora la precisión y evita sesgos en el análisis.
Métodos en Pandas:
df.drop_duplicates()df.duplicated()
Se puede usar el argumento subset para definir columnas específicas y keep para decidir qué duplicado conservar. Antes de eliminar duplicados, conviene analizar su origen y asegurarse de no eliminar información valiosa.
Data Derivation
La derivación de datos consiste en crear nuevas variables o columnas a partir de datos existentes.
Un informe de análisis de datos no es un artículo académico, ensayo ni informe de laboratorio. Es una conversación organizada con tu cliente o colaborador, con vida interna (memo extendido) y externa (para supervisores).
Características Clave
Fácil de ojear → Audiencias diferentes encuentran lo que necesitan rápido.
Redacción invisible → El lector recuerda el contenido, no el estilo.
Evita:
Prosa florída o demasiado casual.
Errores gramaticales.
Contexto inadecuado.
Enfocarse en proceso (salvo en apéndice).
Detalles técnicos innecesarios en el cuerpo.
Estructura Básica
Sección
Contenido esencial
Introducción
Resumen del estudio, datos, contexto, grandes preguntas, conclusiones clave y esquema del informe.
Cuerpo
Análisis principal con evidencia (tablas/gráficos).
Conclusión/Discusión
Repite preguntas + conclusiones. Añade observaciones y preguntas futuras.
Regla: Cuerpo → lo justo para convencer. Apéndice → todo lo necesario para validar.
Introducción: El Gancho Perfecto
Debe incluir (en este orden):
Resumen del estudio y datos.
Contexto o problema.
Grandes preguntas + conclusiones clave.
Esquema del informe.
Conclusión: Cierra con Impacto
Repite preguntas y respuestas.
Añade observaciones nuevas.
Propón preguntas futuras o próximos pasos.
Checklist Final antes de Entregar
[ ] ¿Es fácil ojear para ejecutivos?
[ ] ¿Tiene agenda clara para el cliente?
[ ] ¿Apéndice valida todo para el supervisor?
[ ] ¿Redacción limpia y sin distracciones?
[ ] ¿1–2 visuales por pregunta?
[ ] ¿Referencias cruzadas entre Cuerpo y Apéndice?
Conclusión: Un buen informe de datos no impresiona por su longitud. Impresiona porque tu cliente lo entiende, tu jefe lo aprueba y tu ejecutivo lo usa para decidir.
Estructura simple. Audiencia clara. Contenido que habla. Eso es todo.
La audiencia de un documento técnico es el lector o lectores previstos. Para los redactores técnicos, esta es la consideración clave al planificar, redactar y revisar. Se trata de adaptar la escritura a las necesidades, intereses y antecedentes del lector.
El principio es simple: habla para que te entiendan. No expliques cohetes a un niño de seis años. Parece obvio, pero la falta de análisis de audiencia es la raíz de la mayoría de los problemas en documentos técnicos, especialmente en instrucciones.
Herramientas Prácticas
Planificador de audiencias: Responde preguntas detalladas y envíatelo por email (opcional: a tu instructor).
Planificador de situaciones: Define el contexto en que tu audiencia usa el documento.
Tipos de Audiencias
Tipo
Descripción
Expertos
Conocen teoría y producto al detalle. Diseñan, prueban. Títulos avanzados. Desafío: comunicarse con técnicos y ejecutivos.
Técnicos
Construyen, operan, mantienen, reparan. Conocimiento práctico y técnico.
Ejecutivos
Toman decisiones comerciales, legales, políticas. Poco conocimiento técnico. Deciden si producir, implementar, financiar.
No especialistas
Mínimo conocimiento técnico. Interés práctico o curiosidad. Ej: votar en elecciones, aprender sin motivo específico.
Ejemplo: Guía de software en Windows → ¿incluyes basics de Windows?
No: Frustra al usuario.
Sí: Aumenta páginas y costo. → Equilibra según el tamaño del segmento que lo necesita.
Necesidades e intereses
¿Qué esperan del documento?
Ej: Manual de smartphone → pasos claros.
Informe de calentamiento global para inmobiliarios → ¿qué quieren (y no quieren) leer?
Diferentes culturas
Formatos de fecha, hora, moneda varían.
Evita humor local (“dar un jonrón”). → Recursos:
Capítulo 6: Escritura para lectores internacionales (Texas A&M).
Lista de guías de estilo en Wikipedia.
Otras características demográficas
Edad, género, residencia, preferencias políticas, etc.
Complicaciones Comunes
Audiencias mixtas: Técnicos + ejecutivos →
Opción 1: Todo comprensible para todos (difícil).
Opción 2: Secciones por audiencia + títulos claros para navegar.
Variabilidad amplia: En una misma categoría →
Escribir al mínimo común denominador → documento tedioso.
Solución:
Apuntar a la mayoría.
Info extra en apéndices o referencias cruzadas.
Ejemplo de Descripción de Audiencia (para curso)
Nota al instructor: Instrucciones para usuarios que optimizan cálculos en Excel con macros. Saben ingresar datos, usan Office Suite, están cómodos con Windows y aritmética básica para verificar errores.
Adaptación Práctica: 16 Controles para Conectar con tu Audiencia
(Enfocados en no especialistas, pero aplicables a todos)
Añade info clave → pasos, antecedentes, definiciones.
Omite lo innecesario → evita confusión.
Ajusta nivel técnico → no hables a expertos si tu lector es técnico.
Incluye ejemplos → analogías potentes.
Adapta ejemplos → caseros para no expertos, técnicos para especialistas.
En un análisis estadístico, normalmente se comienza considerando las características de la población sobre la cual se quieren hacer inferencias. De manera similar, cuando comienzas a escribir un informe sobre un análisis, generalmente comienzas considerando las características de la audiencia con la que deseas comunicarte.
Debes pensar en el quién, qué, por qué, dónde, cuándo y cómo de las personas clave que leerán tu informe.
¿Quién leerá tu informe?
La audiencia a menudo se define por el rol que desempeña el lector en relación con el informe:
Tomadores de decisiones: Usarán el informe para actuar.
Partes interesadas: Aprenderán nueva información.
Revisores: Lo criticarán en base a lo que ya saben.
Interesados generales: Buscan contexto o inspiración.
Algunos informes son leídos por una sola persona, pero la mayoría por muchas. Pueden existir niveles de participación: primarios, secundarios y terciarios.
Consejo clave:
No puedes complacer a todos. Concéntrate primero en las personas más importantes para recibir tu mensaje, y en segundo lugar en el grupo más amplio.
¿Qué saben tus lectores?
Una vez definido a quién te diriges, comprende sus características. La más importante para un redactor técnico es su nivel de comprensión del tema y de las técnicas estadísticas.
Puedes ajustar cómo presentas la información estadística. Aquí tienes un mapa de audiencias comunes:
Tipo de lector
Características
Recomendaciones
Matefobias
Temen a los números, pero escuchan conceptos
Evita jerga, fórmulas y porcentajes. Usa “aproximadamente la mitad” en lugar de “48.7%”.
Pasantes
Entienden poco y tienen bajo interés
No te preocupes: no leerán más allá del resumen. Hazlo conciso y resalta el hallazgo clave.
Turistas
Entienden algo y están interesados
Sé amable. Usa jerga solo si la defines. Prefiere gráficos simples (barras, circulares). Redondea valores.
Perros calientes
Creen saber más de lo que saben
Usa jerga y fórmulas, pero explícalas claramente. Guíalos para evitar conclusiones erróneas.
Asociados
Otros analistas con jerga básica
Todo vale si lo explicas bien.
Colegas
Expertos en el tema y técnicas
Todo vale. Sé técnico, preciso y directo.
Estas características te orientan sobre la extensión, tono y estilo del informe.
¿Por qué leerán tu informe?
Sé honesto:
¿Por qué alguien estaría interesado en leer tu informe?
Pregúntate:
¿Qué harán con tus hallazgos?
¿Se informarán? ¿Tomarán decisiones? ¿Actuarán?
¿Es algo crítico para ellos o solo un trámite?
El nivel de interés define cuánto esfuerzo debes invertir en hacerlo claro, atractivo y accionable.
¿Dónde se leerá tu informe?
Considera el alcance y contexto:
¿Es para un grupo interno (organización) o público general?
¿Va dirigido a la alta dirección (de arriba hacia abajo) o a equipos operativos (de abajo hacia arriba)?
¿Hay preocupaciones de seguridad o confidencialidad?
Esto afecta el lenguaje, el nivel de detalle y las medidas de protección (contraseñas, marcas de agua, etc.).
¿Cuándo lo necesitan?
El tiempo es un factor crítico:
¿Cuándo debe estar listo?
¿Quién lo revisará y cuánto tardará?
¿Los plazos son flexibles o inamovibles?
¿Tienes tiempo para:
Pensar el mensaje?
Hacer análisis adicionales?
Editar y pulir?
Regla de oro (que todos rompemos, pero no deberíamos):Nunca envíes un borrador para revisión que no sea tu obra maestra completa y editada.
¿Cómo debe presentarse el informe?
Finalmente, piensa en cómo maximizar el impacto para tu audiencia. Aquí van cinco consideraciones clave:
¿Entregarás datos, scripts, código o resultados adicionales?
¿Crearás una presentación?
¿Se usarán tus gráficos en tribunales o eventos públicos?
5. Accesibilidad
¿Debes cumplir con la Sección 508 (EE.UU.) para accesibilidad?
¿Tus gráficos son legibles para personas con daltonismo?
¿Usas títulos claros, tablas bien etiquetadas, alt text en imágenes?
Conclusión:
No necesitas responder todas estas preguntas en detalle. Muchas solo requieren unos segundos de reflexión. Pero si analizas estas dimensiones —quién, qué, por qué, dónde, cuándo y cómo— tendrás una idea mucho más clara de para quién escribes Y cómo debes escribirlo
El backsolving es un método para resolver sistemas de ecuaciones lineales una vez que ya hemos reducido el sistema a forma triangular superior mediante eliminación gaussiana (o cualquier otra técnica de factorización como LU).
Trabajamos el mismo problema del articulo anterior:
Queremos resolver los precios \( (p) \) de cada producto. En este caso utilizaremos eliminación gaussiana y luego sustitución hacia atrás — eso es, reducir el sistema a triangular superior y luego encontrar las incógnitas empezando por la última.
Eliminación gaussiana (reducción hacia triangular superior)
Escribimos el sistema en sus ecuaciones explícitas (producto fila por columna):
Sustituyendo el valor numérico de \(p_3\) (o directamente resolviendo con las fracciones) se obtiene \(p_2=3\).
Finalmente sustituimos \(p_2\) y \(p_3\) en la primera ecuación para obtener (p_1), que da (p_1=2).
Conclusión del método manual (eliminación + sustitución):
$$\mathbf p = \begin{pmatrix}2 \\ 3 \\ 5\end{pmatrix}$$
¿Qué significa calcular la inversa \(M^{-1}\) y cómo se obtiene con matriz aumentada?
Otra forma más “directa” (y que explica el porqué de la eliminación) es calcular la inversa de \(M\). Si \(M\) es invertible entonces
$$\mathbf p = M^{-1}\mathbf c$$
Para encontrar \(M^{-1}\) se construye la matriz aumentada \([,M \mid I,]\) y se aplican operaciones elementales por filas hasta transformar el lado izquierdo en la identidad; entonces el lado derecho habrá quedado como \(M^{-1}\).
Verificaciones numéricas y redondeo
En la práctica, cuando calculas \(M^{-1}M\) en ordenador verás que los elementos fuera de la diagonal no son exactamente cero sino números muy pequeños (por ejemplo \(-5\times 10^{-17})\). Eso es error numérico de punto flotante. Si redondeas (por ejemplo a 10 decimales) obtendrás la matriz identidad exacta en la presentación.
Resumen conceptual
Eliminación gaussiana: reduce el sistema a triangular superior (eliminación hacia adelante) y luego despeja las variables (sustitución hacia atrás).
Inversa por matriz aumentada: hacer operaciones elementales sobre \([M\mid I]\) hasta convertir \(M\) en \(I\); lo que quede a la derecha será \(M^{-1}\).
Comprobación: puedes verificar que \(M^{-1}\mathbf c = \mathbf p\) y \(M^{-1}M = I\) (hasta errores numéricos muy pequeños).
Código Python
import numpy as np# Definición de la matriz y vectores (el sistema del ejemplo)M = np.array([[3, 6, 2], [10, 3, 8], [1, 7, 5]], dtype=float)c = np.array([34, 69, 48], dtype=float)# 1) Resolver el sistema M p = cp = np.linalg.solve(M, c)print("Solución (np.linalg.solve):", p)# 2) Calcular la inversa de MM_inv = np.linalg.inv(M)print("\nInversa M^{-1}:\n", M_inv)# 3) Verificar que M^{-1} * c = pp_from_inv = M_inv @ cprint("\nM^{-1} @ c =", p_from_inv)# 4) Verificar que M_inv @ M ≈ I (mostramos la matriz y una versión redondeada)I_approx = M_inv @ Mprint("\nM^{-1} @ M (aprox):\n", I_approx)print("\nM^{-1} @ M (redondeado a 10 decimales):\n", np.round(I_approx, 10))
M_inv @ c debe coincidir con p (igual numéricamente, dentro de tolerancias de punto flotante).
M_inv @ M será numéricamente la identidad; si ves valores muy pequeños fuera de la diagonal, es normal: redondea para comprobar que esos valores son efectivamente cero dentro de la precisión de la máquina.
Resumen
La eliminación y la inversa son dos caras de la misma moneda: la primera resuelve un sistema concreto, la segunda construye la “función inversa” que, aplicada a cualquier vector de costes, devolvería los precios.
En aplicaciones (ciencia de datos, econometría, ingeniería), normalmente no calculamos la inversa si solo queremos resolver un sistema: usamos solve (algoritmos de factorización) por razones de estabilidad numérica y eficiencia. Sin embargo, obtener la inversa es útil para entender conceptualmente la transformada inversa y para comprobaciones.
Es el punto de partida que lleva directamente a la forma matricial de los sistemas lineales. El mismo sistema de ecuaciones de las frutas puede escribirse y resolverse en forma matricial. En la ciencia de datos los datasets son matrices, y resolver sistemas lineales ayuda a encontrar relaciones entre variables.
Partimos del sistema:
$$\begin{cases} 2x + 3y = 30 \\ x + y = 12 \end{cases}$$
En formato matricial:
$$\begin{bmatrix} 2 & 3 \\ 1 & 1 \end{bmatrix} \begin{bmatrix} x \\ y \end{bmatrix} = \begin{bmatrix} 30 \\ 12 \end{bmatrix}$$
Significado de las partes:
Partes
Significado
$$\begin{bmatrix} 2 & 3 \\ 1 & 1 \end{bmatrix}$$
Matriz de coeficientes: contiene los números que multiplican a las variables (los precios de las frutas).
$$\begin{bmatrix} x \\ y \end{bmatrix}$$
Vector de incógnitas: las variables que queremos encontrar (número de manzanas y naranjas).
$$\begin{bmatrix} 30 \\ 12 \end{bmatrix}$$
Vector de resultados: los valores en el lado derecho (total de dinero y total de frutas).
La forma vectorial compacta del sistema matricial se expresa como:
$$A\vec{x} = \vec{b}$$
Donde:
\(A\) –> es la matriz de coeficientes
\(\vec{x}\) –> es el vector de incógnitas
\(\vec{b}\) –> es el vector de términos independientes
En ciencia de datos y machine learning esta forma es fundamental porque:
Permite expresar relaciones entre miles de variables en una sola ecuación.
Es la base de la regresión lineal, la reducción de dimensionalidad, y el entrenamiento de modelos.
Toda la manipulación se hace con álgebra matricial, que es más eficiente computacionalmente.
Resolviendo problemas reales.
En artículos anteriores vimos operaciones sobre vectores y matrices desde la perspectiva matemática. Vamos a ver cómo esas mismas operaciones pueden resolver problemas reales, como descubrir cuánto cuesta cada producto de un supermercado.
Escenario
Volvemos a nuestro supermercado de frutas. Imaginemos que tenemos tres personas: Bob, Alice y Tim, que han ido al supermercado y compraron manzanas, naranjas y peras. Podemos representar sus compras en una matriz \(M\):
Matriz de coeficientes: contiene los números que multiplican a las variables (las cantidades de las frutas).
Vector de incógnitas: las variables que queremos encontrar (precio de las frutas).
Vector de resultados: los valores en el lado derecho (total de dinero gastado).
Cómo transformar el sistema para poder resolverlo
Hasta ahora has visto qué es un sistema de ecuaciones y cómo representarlo en forma matricial. Pero hay un problema práctico: tal como están escritas, las ecuaciones no siempre resultan fáciles de resolver.
En otros articulos hablamos de las caracteristicas del un sistema, como la singularidad. Aqui veremos como transformar el sistema sin cambiar su significado, haciendo mas simple su solucion.
Transformar sin perder información
Existe una serie de operaciones que podemos aplicar a las ecuaciones sin alterar sus soluciones:
Intercambiar ecuaciones
Multiplicar o dividir una ecuación por un número distinto de cero
Sumar o restar ecuaciones entre sí
Estas operaciones son la base del Algoritmo de eliminación de Gauss. Su objetivo es reorganizar el sistema en una forma mucho más sencilla de interpretar.
Ejemplo conceptual del proceso
Partimos de un sistema cualquiera y aplicamos operaciones de fila para:
Elegir un elemento clave (pivote)
Convertir en cero todo lo que hay debajo
Repetir el proceso en las siguientes filas
El resultado es una matriz en la que la estructura del sistema se vuelve transparente.
Es como resolver un sistema de ecuaciones común por eliminación, pero aplicado directamente a los números de una matriz (llamada matriz de coeficientes). El objetivo es limpiar la matriz para que las respuestas sean evidentes.
Forma escalonada por filas (row echelon form).
Se consigue eliminando la información redundante y aislando la información útil. Cada paso reduce el sistema a algo más simple, manteniendo exactamente las mismas soluciones.
Una matriz está en esta forma cuando:
Cada fila empieza más a la derecha que la anterior
Debajo de cada elemento clave (pivote) hay ceros
Las filas sin información (todos ceros) quedan al final
Es útil porque te deja el sistema listo para “sustitución hacia atrás”.
Forma escalonada reducida: la solución directa
Si continúas el proceso un paso más, llegas a la forma escalonada reducida (reduced row echelon form) Aquí ocurre algo muy potente, en su columna solo hay ceros (arriba y abajo)
Aquí la solución es directa, cada fila te dice el valor de cada variable.
¿Qué pasa si el sistema es “Singular”?
A veces, al hacer la eliminación gaussiana, una fila completa se convierte en ceros \( 0 = 0 \)). Esto significa que:
El sistema es singular (las ecuaciones eran dependientes o redundantes).
En la matriz, verás un 0 en la diagonal principal en lugar de un 1.
Esto indica que el sistema puede tener infinitas soluciones o ninguna.
Método de eliminación gaussiana
La eliminación gaussiana (o reducción de filas) es el proceso de manipular una matriz mediante operaciones matemáticas simples para simplificarla y resolver sistemas de ecuaciones.
Queremos eliminar las variables \( p_1 \) de las filas 2 y 3.
Buscamos eliminar las \(p_1\), lo primero es restar la fila 1 con la fila 2. Para esto hacemos una normalización de la fila dos, buscando que se elimine la variable. En notación de matrices se expone como:
$$ F_2 \leftarrow F_2 – 10F_1 $$
Lo que quiere decir es que la nueva fila \( F_2 \) será el resultado de la resta de la fila \( F_2 \) y la fila \( F_1 \) multiplicada por 10. Esto hace que se elimine \(p_1\) en la operación \(10p_1 – 10p_1\).
La segunda eliminación de la variable es creando una nueva fila 3 producto de la resta entre las filas \( F_3 \) y la \( F_1 \) multiplicando esta por 3.
Método de Gauss-Jordan: llevar el sistema hasta la matriz identidad
Una vez hemos aplicado la sustitución hacia atrás y ya conocemos los valores de las variables, puede surgir una pregunta lógica: ¿Y si en lugar de calcular las variables “a mano”, dejamos la matriz ya resuelta automáticamente? Aquí es donde entra el método de Gauss-Jordan.
¿Qué aporta Gauss-Jordan?
El método de Gauss (el que hemos usado) termina en una matriz escalonada, y a partir de ahí necesitamos hacer sustitución hacia atrás. El método de Gauss-Jordan va un paso más allá. Sigue aplicando operaciones hasta convertir la matriz en la matriz identidad
💡 En ese momento:
Ya no necesitas sustituir
Los valores de las variables aparecen directamente en la última columna
Para solucionar con python usamos numpy.linalg.solve, que aplica internamente eliminación de Gauss con pivotado, y es la forma más eficiente y segura de resolver sistemas lineales \(A \cdot x = b \) en Python.
import numpy as np# Matriz de coeficientesA = np.array([ [3, 6, 2], [10, 3, 8], [1, 7, 5]], dtype=float)# Vector de resultadosb = np.array([34, 69, 48], dtype=float)# Resolver el sistema A·x = bsol = np.linalg.solve(A, b)# Mostrar resultadosp1, p2, p3 = solprint(f"p1 = {p1:.2f}, p2 = {p2:.2f}, p3 = {p3:.2f}")
En el artículo anterior se trabajo los autovalores y autovectores, es común quedarse con la sensación de que son conceptos abstractos. Pero en realidad, están detrás de muchas de las herramientas más potentes del análisis de datos moderno.
Una de ellas es el Análisis de Componentes Principales (PCA), una técnica que permite comprimir información sin perder lo esencial.
En este artículo veremos cómo los eigenvectores sirven para reducir la dimensionalidad de los datos, y cómo este principio se aplica a algo tan visual como la compresión de imágenes de rostros humanos.
Cuando trabajamos con datos reales —imágenes, audio, sensores o registros de clientes— solemos tener miles de variables. Eso significa que el procesamiento se vuelve lento, costoso y muchas veces innecesario, porque buena parte de los datos son redundantes.
El PCA (Principal Component Analysis) se basa precisamente en encontrar las direcciones de mayor variabilidad dentro de los datos. Y esas direcciones no son otras que los autovectores de la matriz de covarianza del conjunto.
Visualizando el concepto con una imagen
Una imagen digital no es más que una matriz de números, donde cada valor representa la intensidad del color (por ejemplo, del blanco al negro si es en escala de grises).
Para este ejemplo usaremos el famoso dataset de rostros de celebridades incluido en scikit-learn.
from sklearn.datasets import fetch_lfw_peopleimport matplotlib.pyplot as plt# Cargamos el dataset de carasfaces = fetch_lfw_people(min_faces_per_person=60)image = faces.images[0]plt.imshow(image, cmap='bone')plt.title(f"Ejemplo de imagen: {faces.target_names[0]}")plt.axis('off')plt.show()
Cada imagen tiene 62 filas × 47 columnas, es decir, 2.914 píxeles o variables. PCA nos permitirá representar esta misma información con muchas menos variables.
Aplicando PCA paso a paso
PCA consiste básicamente en tres fases:
Calcular la matriz de covarianza del conjunto de datos.
Obtener sus autovectores y autovalores.
Proyectar los datos sobre las direcciones asociadas a los autovalores más grandes, que contienen la mayor parte de la varianza.
En código, podemos hacerlo así:
from sklearn.decomposition import PCAimport numpy as np# Aplanamos las imágenes 2D a vectores 1DX = faces.data# Aplicamos PCA para conservar solo 15 componentes principalespca = PCA(n_components=15)X_pca = pca.fit_transform(X)# Reconstruimos las imágenes desde los componentes principalesX_reconstructed = pca.inverse_transform(X_pca)# Mostramos la imagen original y la reconstruidafig, axes = plt.subplots(1, 2, figsize=(8, 4))axes[0].imshow(X[0].reshape(62, 47), cmap='bone')axes[0].set_title("Imagen original")axes[0].axis('off')axes[1].imshow(X_reconstructed[0].reshape(62, 47), cmap='bone')axes[1].set_title("Reconstruida (15 componentes)")axes[1].axis('off')plt.show()
¿Qué estamos haciendo en realidad?
Cada componente principal es un autovector de la matriz de covarianza. Cada uno representa una dirección en el espacio de datos donde la información cambia más. Los autovalores indican cuánta “varianza” explica cada componente.
En este caso, al reconstruir la imagen con solo 15 componentes, vemos una versión algo borrosa, pero perfectamente reconocible. Hemos pasado de 2.914 variables a solo 15, manteniendo casi toda la información útil.
Si reducimos a 5 componentes, la imagen pierde detalle; si aumentamos a 50, se ve casi igual que la original. Todo depende del equilibrio que queramos entre tamaño y fidelidad.
Las “eigenfaces”
Una de las formas más visuales de entender PCA en imágenes es observar los autovectores directamente. En este caso se les conoce como eigenfaces, o “caras propias”.
Cada eigenface representa un patrón característico: sombras de ojos, contorno del rostro, luz lateral, expresión, etc.