Detección de datos de texto incoherentes

Recientemente ha recibido la noticia de que el equipo de atención al cliente quiere hacer algunas preguntas de seguimiento a los participantes en la encuesta SFO. Sin embargo, el marcador automático que utiliza el centro de llamadas no es capaz de analizar todos los números de teléfono, ya que están en formatos diferentes. Tras investigar un poco, has descubierto que algunos números de teléfono se escriben con guiones (-) y otros con paréntesis ((,)). En este ejercicio, averiguarás qué números de teléfono tienen estos problemas para saber cuáles necesitas arreglar.

dplyr y stringr están cargados, y sfo_survey está disponible.

Este ejercicio forma parte del curso

Limpieza de datos en R

Ver curso

Ejercicio interactivo práctico

Pruebe este ejercicio completando este código de muestra.

# Filter for rows with "-" in the phone column
sfo_survey %>%
  filter(___)

Editar y ejecutar código

Este ejercicio forma parte del curso

Limpieza de datos en R

IntermedioNivel de habilidad

4.8+

195 reviews

Comienza el curso gratis

En este capítulo, aprenderás a superar algunos de los problemas más comunes con los datos sucios. Convertirá tipos de datos, aplicará restricciones de rango para eliminar puntos de datos futuros y eliminará puntos de datos duplicados para evitar el doble recuento.

Exercise 1: Restricciones del tipo de datos Exercise 2: Tipos de datos comunes Exercise 3: Conversión de tipos de datos Exercise 4: Recorte de cuerdas Exercise 5: Restricciones de alcance Exercise 6: Limitaciones de la duración del viaje Exercise 7: Regreso al futuro Exercise 8: Restricciones de unicidad Exercise 9: Duplicados completos Exercise 10: Eliminar duplicados parciales Exercise 11: Agregación de duplicados parciales

Los datos categóricos y de texto suelen ser algunas de las partes más desordenadas de un conjunto de datos debido a su naturaleza no estructurada. En este capítulo, aprenderá a corregir las incoherencias de los espacios en blanco y las mayúsculas en las etiquetas de las categorías, a contraer varias categorías en una sola y a reformatear las cadenas para mantener la coherencia.

Exercise 1: Comprobación de la afiliación Exercise 2: Sólo para miembros Exercise 3: No es miembro Exercise 4: Problemas de datos categóricos Exercise 5: Identificación de incoherencias Exercise 6: Corregir la incoherencia Exercise 7: Colapso de categorías Exercise 8: Limpieza de datos de texto Exercise 9: Detección de datos de texto incoherentes

Ejercicio actual

Exercise 10: Sustitución y retirada Exercise 11: Números de teléfono no válidos

En este capítulo, se adentrará en problemas más avanzados de limpieza de datos, como asegurarse de que todos los pesos están escritos en kilogramos en lugar de libras. También adquirirá conocimientos muy valiosos que le ayudarán a verificar que los valores se han añadido correctamente y que los valores que faltan no afectan negativamente a sus análisis.

Exercise 1: Uniformidad Exercise 2: Uniformidad de fechas Exercise 3: Uniformidad monetaria Exercise 4: Validación cruzada Exercise 5: Validación de totales Exercise 6: Validar la edad Exercise 7: Integridad Exercise 8: Tipos de ausencia Exercise 9: Visualización de los datos que faltan Exercise 10: Tratamiento de los datos que faltan

La vinculación de registros es una potente técnica para fusionar varios conjuntos de datos, que se utiliza cuando los valores tienen errores tipográficos o diferente ortografía. En este capítulo, aprenderá a vincular registros mediante el cálculo de la similitud entre cadenas y, a continuación, utilizará sus nuevos conocimientos para unir dos conjuntos de datos de reseñas de restaurantes en un conjunto de datos maestro limpio.

Exercise 1: Comparación de cadenas Exercise 2: Calcular la distancia Exercise 3: Pequeña distancia, pequeña diferencia Exercise 4: Corrección de errores tipográficos con la distancia entre cadenas Exercise 5: Generar y comparar pares Exercise 6: ¿Enlazar o unirse?Exercise 7: Bloqueo de pares Exercise 8: Comparación de pares Exercise 9: Puntuación y enlace Exercise 10: ¿Marcar y luego seleccionar o seleccionar y luego marcar?Exercise 11: Montaje Exercise 12: ¡Enhorabuena!