logongas

Herramientas de usuario

Herramientas del sitio

Ocultar Menú
Traza: • 5. Pandas: Apendices
clase:iabd:pia:1eval:tema05-apendices

−Tabla de Contenidos

5. Pandas: Apendices

Tratamiento de datos inválidos

  • De una columna , obtener la lista de filas que tiene el valor NaN o None. Retorna una array de booleanos.

1
df.capacidad.isna()
 

[False, True,  False, True,  False, False, False, False, False, False, 
 False, False, False, False, False, False, False, False, False, False, 
 False, False, False, False, False, False, False, False, False, False]

  • De una columna , obtener la lista de filas que NO tiene el valor NaN o None. Retorna una array de booleanos.. Como es un array de booleanos se puede usar para filtrar las filas que son válidas.

1
df.capacidad.notna()
 

[True, False, True, False, True, True, True, True, True, True, 
 True, True,  True, True,  True, True, True, True, True, True, 
 True, True,  True, True,  True, True, True, True, True, True]

  • De una columna, borrar las filas que tengan NaN o None

1
new_df=df[df.capacidad.notna()]

  • De más de una columna, borrar las filas que tenga NaN o None

1
df[(df.tipo.notna()) & (df.capacidad.notna()) & (df.precio.notna())]

  • Rellenar los valores que tengan NaN o None con la media de su columna

1
2
df.fillna(df.mean(),inplace=True)
new_df=df.fillna(df.mean())

  • Rellenar los valores de una columna con NaN o None con un valor

1
df['tipo']=df.tipo.fillna("Desconocido")

  • Rellenar los valores de una columna con NaN o None con la media

1
df['precio']=df.precio.fillna(df.precio.mean())

pandas_profiling

Genera un HTML con información del DataFrame

1
2
3
from pandas_profiling import ProfileReport
reporte = ProfileReport(df, title = "Mi reporte")
reporte.to_file("reporte.html")

Se puede ver el resultado en pandas_profiling.html

Una herramienta similar pero mucho mas potente es pywedge. Mas información en Automated Interactive Package for EDA, Modeling, and Hyperparameter Tuning in a few lines of Python Code

Mas información:

clase/iabd/pia/1eval/tema05-apendices.txt · Última modificación: 2022/01/23 17:16 por admin

Herramientas de la página

Excepto donde se indique lo contrario, el contenido de este wiki esta bajo la siguiente licencia: GNU Free Documentation License 1.3
GNU Free Documentation License 1.3 Donate Powered by PHP Valid HTML5 Valid CSS Driven by DokuWiki