Can sparsity improve the privacy of neural networks? - Inria - Institut national de recherche en sciences et technologies du numérique
Communication Dans Un Congrès Année : 2023

Can sparsity improve the privacy of neural networks?

Résumé

Sparse neural networks are mainly motivated by ressource efficiency since they use fewer parameters than their dense counterparts but still reach comparable accuracies. This article empirically investigates whether sparsity could also improve the privacy of the data used to train the networks. The experiments show positive correlations between the sparsity of the model, its privacy, and its classification error. Simply comparing the privacy of two models with different sparsity levels can yield misleading conclusions on the role of sparsity, because of the additional correlation with the classification error. From this perspective, some caveats are raised about previous works that investigate sparsity and privacy.
Fichier principal
Vignette du fichier
HAL_gretsi.pdf (600.35 Ko) Télécharger le fichier
MIApipelineENG-crop.pdf (432.68 Ko) Télécharger le fichier
S_1.pdf (2.3 Ko) Télécharger le fichier
S_2.pdf (2.34 Ko) Télécharger le fichier
S_3.pdf (2.32 Ko) Télécharger le fichier
S_4.pdf (2.35 Ko) Télécharger le fichier
phasis_diagram_english.pdf (16.4 Ko) Télécharger le fichier
Origine Fichiers produits par l'(les) auteur(s)
Origine Fichiers produits par l'(les) auteur(s)

Dates et versions

hal-04062317 , version 1 (07-04-2023)
hal-04062317 , version 2 (18-04-2023)
hal-04062317 , version 3 (12-10-2023)

Identifiants

Citer

Antoine Gonon, Léon Zheng, Clément Lalanne, Quoc-Tung Le, Guillaume Lauga, et al.. Can sparsity improve the privacy of neural networks?. GRETSI 2023 - XXIXème Colloque Francophone de Traitement du Signal et des Images, Aug 2023, Grenoble, France. ⟨hal-04062317v3⟩
334 Consultations
294 Téléchargements

Altmetric

Partager

More