Orientation covariant aggregation of local descriptors with embeddings - Inria - Institut national de recherche en sciences et technologies du numérique
Communication Dans Un Congrès Année : 2014

Orientation covariant aggregation of local descriptors with embeddings

Teddy Furon
Hervé Jégou
  • Fonction : Auteur
  • PersonId : 833473

Résumé

Image search systems based on local descriptors typically achieve orientation invariance by aligning the patches on their dominant orientations. Albeit successful, this choice introduces too much invariance because it does not guarantee that the patches are rotated consistently. This paper introduces an aggregation strategy of local descriptors that achieves this covariance property by jointly encoding the angle in the aggregation stage in a continuous manner. It is combined with an efficient monomial embedding to provide a codebook-free method to aggregate local descriptors into a single vector representation. Our strategy is also compatible and employed with several popular encoding methods, in particular bag-of-words, VLAD and the Fisher vector. Our geometric-aware aggregation strategy is effective for image search, as shown by experiments performed on standard benchmarks for image and particular object retrieval, namely Holidays and Oxford buildings.
Fichier principal
Vignette du fichier
eccv14_tolias_orientation_covariant_aggregation.pdf (1.02 Mo) Télécharger le fichier
Vignette du fichier
angemb.png (6.27 Ko) Télécharger le fichier
K_vm.pdf (36.87 Ko) Télécharger le fichier
K_vm_2approx.pdf (6.76 Ko) Télécharger le fichier
K_vm_32approx.pdf (6 Ko) Télécharger le fichier
K_vm_8approx.pdf (5.82 Ko) Télécharger le fichier
frequencies.pdf (3.16 Ko) Télécharger le fichier
map_vs_dim_holidays.pdf (3.24 Ko) Télécharger le fichier
map_vs_dim_oxford5k.pdf (3.21 Ko) Télécharger le fichier
match_176_179_6_a.pdf (216.6 Ko) Télécharger le fichier
match_176_179_6_d.pdf (216.66 Ko) Télécharger le fichier
match_176_179_6_m.pdf (216.59 Ko) Télécharger le fichier
mod_effect_fisher_holidays.pdf (3.13 Ko) Télécharger le fichier
mod_effect_vlad_holidays.pdf (3.13 Ko) Télécharger le fichier
rotation_stats_org1.pdf (5.62 Ko) Télécharger le fichier
rotation_stats_org2.pdf (5.5 Ko) Télécharger le fichier
rotation_stats_org3.pdf (5.55 Ko) Télécharger le fichier
rotation_stats_org4.pdf (5.32 Ko) Télécharger le fichier
rotation_stats_org5.pdf (5.54 Ko) Télécharger le fichier
rotation_stats_org6.pdf (5.54 Ko) Télécharger le fichier
rotation_stats_org7.pdf (5.54 Ko) Télécharger le fichier
rotation_stats_org8.pdf (5.54 Ko) Télécharger le fichier
rotation_stats_weighted1.pdf (2.07 Ko) Télécharger le fichier
rotation_stats_weighted2.pdf (2.16 Ko) Télécharger le fichier
rotation_stats_weighted3.pdf (3.11 Ko) Télécharger le fichier
rotation_stats_weighted4.pdf (4.72 Ko) Télécharger le fichier
rotation_stats_weighted5.pdf (4.69 Ko) Télécharger le fichier
rotation_stats_weighted6.pdf (3.11 Ko) Télécharger le fichier
rotation_stats_weighted7.pdf (2.16 Ko) Télécharger le fichier
rotation_stats_weighted8.pdf (2.07 Ko) Télécharger le fichier
vm_kappa_holidays.pdf (3.55 Ko) Télécharger le fichier
Origine Fichiers produits par l'(les) auteur(s)
Format Figure, Image
Origine Fichiers produits par l'(les) auteur(s)
Origine Fichiers produits par l'(les) auteur(s)
Origine Fichiers produits par l'(les) auteur(s)
Origine Fichiers produits par l'(les) auteur(s)
Origine Fichiers produits par l'(les) auteur(s)
Origine Fichiers produits par l'(les) auteur(s)
Origine Fichiers produits par l'(les) auteur(s)
Origine Fichiers produits par l'(les) auteur(s)
Origine Fichiers produits par l'(les) auteur(s)
Origine Fichiers produits par l'(les) auteur(s)
Origine Fichiers produits par l'(les) auteur(s)
Origine Fichiers produits par l'(les) auteur(s)
Origine Fichiers produits par l'(les) auteur(s)
Origine Fichiers produits par l'(les) auteur(s)
Origine Fichiers produits par l'(les) auteur(s)
Origine Fichiers produits par l'(les) auteur(s)
Origine Fichiers produits par l'(les) auteur(s)
Origine Fichiers produits par l'(les) auteur(s)
Origine Fichiers produits par l'(les) auteur(s)
Origine Fichiers produits par l'(les) auteur(s)
Origine Fichiers produits par l'(les) auteur(s)
Origine Fichiers produits par l'(les) auteur(s)
Origine Fichiers produits par l'(les) auteur(s)
Origine Fichiers produits par l'(les) auteur(s)
Origine Fichiers produits par l'(les) auteur(s)
Origine Fichiers produits par l'(les) auteur(s)
Origine Fichiers produits par l'(les) auteur(s)
Origine Fichiers produits par l'(les) auteur(s)
Origine Fichiers produits par l'(les) auteur(s)
Origine Fichiers produits par l'(les) auteur(s)

Dates et versions

hal-01020823 , version 1 (08-07-2014)
hal-01020823 , version 2 (21-11-2014)
hal-01020823 , version 3 (25-11-2014)

Identifiants

Citer

Giorgos Tolias, Teddy Furon, Hervé Jégou. Orientation covariant aggregation of local descriptors with embeddings. European Conference on Computer Vision, Sep 2014, Zurich, Switzerland. ⟨hal-01020823v2⟩
358 Consultations
1225 Téléchargements

Altmetric

Partager

More