Impact of Data Cleansing for Urban Bus Commercial Speed Prediction - Inria - Institut national de recherche en sciences et technologies du numérique
Journal Articles SN Computer Science Year : 2022

Impact of Data Cleansing for Urban Bus Commercial Speed Prediction

Impact du nettoyage de données sur la prédiction de la vitesse commerciale des bus urbains

Abstract

Public Transportation Information Systems (PTIS) are widely used for public bus services amongst cities in the world. These systems gather information about trips, bus stops, bus speeds, ridership, etc. This massive data is an inviting source of information for machine learning predictive tools. However, it most often suffers from quality deficiencies, due to multiple data sets with multiple structures, to different infrastructures using incompatible technologies, to human errors or hardware failures. In this paper, we consider the impact of data cleansing on a classical machine-learning task: predicting urban bus commercial speed. We show that simple, transport specific business and quality rules can drastically enhance data quality, whereas more sophisticated rules may offer little improvements despite a high computational cost.
Les systèmes d'information pour les ransports publics (SITP) sont largement répandus et utilisés par les services de bus publics dans nobre de villes à travers le monde. Ces systèmes recueillent des informations sur les trajets, les arrêts de bus, la vitesse des bus, la fréquentation, etc. Ces données massives constituent une source d'information intéressante pour les outils prédictifs d'apprentissage automatique. Cependant, elles souffrent le plus souvent de déficiences qualitatives, dues à des ensembles de données multiples aux structures multiples, à des infrastructures différentes utilisant des technologies incompatibles, à des erreurs humaines ou à des défaillances matérielles. Dans cet article, nous examinons l'impact du nettoyage des données sur une tâche classique d'apprentissage automatique : la prédiction de la vitesse commerciale des bus urbains. Nous montrons que des règles de gestion et de qualité simples et spécifiques au transport peuvent améliorer considérablement la qualité des données, alors que des règles plus sophistiquées tendent à offrir peu d'améliorations tout en ayant un coût de calcul élevé.
Fichier principal
Vignette du fichier
Impact_of_data_cleaning_on_bus_commercial_speed_prediction.pdf (712.99 Ko) Télécharger le fichier
Origin Files produced by the author(s)

Dates and versions

hal-03220449 , version 1 (07-05-2021)

Identifiers

Cite

Gauthier Lyan, David Gross-Amblard, Jean-Marc Jézéquel, Simon Malinowski. Impact of Data Cleansing for Urban Bus Commercial Speed Prediction. SN Computer Science, 2022, 3 (82), pp.1-11. ⟨10.1007/s42979-021-00966-1⟩. ⟨hal-03220449⟩
153 View
327 Download

Altmetric

Share

More