# Anomaly Detection via Reverse Distillation from One-Class Embedding

**Authors:** Hanqiu Deng, Xingyu Li  
**arXiv:** [2201.10703](https://arxiv.org/abs/2201.10703)  
**Date:** 2022-01-26  
**Summary page:** https://www.summarizepaper.com/fr/paper/2201.10703v2/

## Key points

- Les auteurs Hanqiu Deng et Xingyu Li ont présenté un article intitulé "Anomaly Detection via Reverse Distillation from One-Class Embedding" lors de la conférence CVPR 2022.
- Ils utilisent la distillation des connaissances (KD) pour résoudre le problème complexe de la détection d'anomalies non supervisée.
- Le modèle T-S proposé comprend un encodeur enseignant et un décodeur élève, introduisant ainsi un paradigme de "distillation inverse".
- Le réseau élève prend en entrée l'incorporation en une classe du modèle enseignant pour restaurer les représentations multi-échelles.
- Un module incorporant en une classe (OCBE) entraînable est introduit dans le modèle T-S pour préserver les informations essentielles sur les motifs normaux tout en abandonnant les perturbations anormales.
- Les expérimentations montrent que la méthode proposée dépasse les performances SOTA, démontrant son efficacité et sa généralisabilité.

## Summary

Les auteurs Hanqiu Deng et Xingyu Li ont présenté un article intitulé "Anomaly Detection via Reverse Distillation from One-Class Embedding" lors de la conférence CVPR 2022. Dans cet article, ils explorent l'utilisation de la distillation des connaissances (KD) pour résoudre le problème complexe de la détection d'anomalies non supervisée. Ils soulignent que la disparité de représentation des anomalies dans le modèle enseignant-élève (T-S) fournit des preuves essentielles pour la détection d'anomalies. Cependant, l'utilisation d'architectures similaires ou identiques pour construire les modèles enseignant et élève dans des études précédentes limite la diversité des représentations anormales. Pour remédier à ce problème, les auteurs proposent un nouveau modèle T-S composé d'un encodeur enseignant et d'un décodeur élève, introduisant ainsi un paradigme de "distillation inverse" simple mais efficace. Dans ce nouveau modèle, le réseau élève prend en entrée l'incorporation en une classe du modèle enseignant au lieu des images brutes directement, et vise à restaurer les représentations multi-échelles du modèle enseignant. La distillation des connaissances dans cette étude commence donc naturellement par des présentations abstraites et haut niveau pour atteindre les caractéristiques de bas niveau. De plus, les auteurs introduisent un module incorporant en une classe (OCBE) entraînable dans leur modèle T-S. L'incorporation compacte obtenue préserve efficacement les informations essentielles sur les motifs normaux tout en abandonnant les perturbations anormales. Les expérimentations approfondies menées sur des benchmarks de détection d'anomalies et de nouveauté en une classe montrent que la méthode proposée dépasse les performances SOTA (State-of-the-Art), démontrant ainsi son efficacité et sa généralisabilité. Cette approche innovante offre une nouvelle perspective sur la distillation des connaissances pour améliorer la détection d'anomalies non supervisée.