siscore

  • Description :

SI-Score (Synthetic Interventions on Scenes for Robustness Evaluation) est un ensemble de données permettant d'évaluer la robustesse des modèles de classification d'images face aux changements de taille, d'emplacement et d'angle de rotation de l'objet.

Dans SI-SCORE, nous prenons des objets et des arrière-plans et faisons systématiquement varier la taille, l'emplacement et l'angle de rotation des objets afin de pouvoir étudier l'effet de la modification de ces facteurs sur les performances du modèle. L'espace d'étiquettes d'image est l'espace d'étiquettes ImageNet (1k classes) pour une évaluation facile des modèles.

Plus d'informations sur l'ensemble de données peuvent être trouvées sur https://github.com/google-research/si-score

FeaturesDict({
    'dataset_label': ClassLabel(shape=(), dtype=int64, num_classes=1000),
    'image': Image(shape=(None, None, 3), dtype=uint8),
    'image_id': int64,
    'label': ClassLabel(shape=(), dtype=int64, num_classes=1000),
})
  • Documentation des fonctionnalités :
Fonctionnalité Classe Forme Type D Description
FonctionnalitésDict
étiquette_ensemble de données Étiquette de classe int64
image Image (Aucun, Aucun, 3) uint8
image_id Tenseur int64
étiquette Étiquette de classe int64
@misc{djolonga2020robustness,
      title={On Robustness and Transferability of Convolutional Neural Networks},
      author={Josip Djolonga and Jessica Yung and Michael Tschannen and Rob Romijnders and Lucas Beyer and Alexander Kolesnikov and Joan Puigcerver and Matthias Minderer and Alexander D'Amour and Dan Moldovan and Sylvain Gelly and Neil Houlsby and Xiaohua Zhai and Mario Lucic},
      year={2020},
      eprint={2007.08558},
      archivePrefix={arXiv},
      primaryClass={cs.CV}
}

siscore/rotation (configuration par défaut)

  • Description de la config : facteur de variation : rotation

  • Taille du téléchargement : 1.40 GiB

  • Taille du jeu de données : 1.40 GiB

  • Divisions :

Diviser Exemples
'test' 39 540

Visualisation

score/taille

  • Description de la config : facteur de variation : taille

  • Taille du téléchargement : 3.25 GiB

  • Taille de l'ensemble de données : 3.27 GiB

  • Divisions :

Diviser Exemples
'test' 92 884

Visualisation

score/localisation

  • Description de la config : facteur de variation : localisation

  • Taille du téléchargement : 18.21 GiB

  • Taille de l'ensemble de données : 18.31 GiB

  • Divisions :

Diviser Exemples
'test' 541 548

Visualisation