Federated Multi-Target Domain Adaptation
Auteurs : Chun-Han Yao, Boqing Gong, Yin Cui, Hang Qi, Yukun Zhu, Ming-Hsuan Yang
Points clés générés par l'IA
- Les méthodes d'apprentissage fédéré permettent de former des modèles sur des données utilisateur distribuées tout en préservant leur confidentialité.
- Il peut être difficile d'obtenir des signaux de supervision de haute qualité pour les tâches de vision.
- Dans ce scénario, les données client distribuées ne sont pas étiquetées et un ensemble de données étiqueté centralisé est disponible sur le serveur.
- Le problème traité est celui de l'adaptation de domaine avec une source (donnée centralisée du serveur) et plusieurs cibles (donnée client distribuée).
- Une mise en œuvre efficace appelée DualAdapt est proposée pour relever ces défis.
- Des résultats expérimentaux montrent que cette mise en œuvre atteint une grande précision, minimise le coût communicationnel et requiert peu de ressources informatiques sur les appareils clients.
- Une analyse ablative évalue l'efficacité et les coûts individuels des composants du cadre.
- L'introduction de classifieurs locaux globaux améliore la précision sans augmenter significativement les coûts computationnels ni les frais de communication par rapport à Fed-MCD.
- L'auto-apprentissage améliore encore la précision sans augmenter considérablement les coûts computationnels.
- Le mécanisme pondéré GMM permet d'approcher la précision du modèle complet à celle d'un oracle avec seulement 1 000 paramètres supplémentaires à télécharger, démontrant ainsi l'efficacité du pondéré mixup proxy cible.
- Ce travail est lié à l'adaptation centralisée multi-cible mais prend en compte les contraintes liées à l'apprentissage fédéré et aux ressources limitées des appareils clients.
Résumé : Federated learning methods enable us to train machine learning models on distributed user data while preserving its privacy. However, it is not always feasible to obtain high-quality supervisory signals from users, especially for vision tasks. Unlike typical federated settings with labeled client data, we consider a more practical scenario where the distributed client data is unlabeled, and a centralized labeled dataset is available on the server. We further take the server-client and inter-client domain shifts into account and pose a domain adaptation problem with one source (centralized server data) and multiple targets (distributed client data). Within this new Federated Multi-Target Domain Adaptation (FMTDA) task, we analyze the model performance of exiting domain adaptation methods and propose an effective DualAdapt method to address the new challenges. Extensive experimental results on image classification and semantic segmentation tasks demonstrate that our method achieves high accuracy, incurs minimal communication cost, and requires low computational resources on client devices.
Outils pour cet article
Posez des questions sur cet article à notre assistant IA
Vous pouvez aussi discutez avec plusieurs papiers à la fois ici.
Le résumé précédent a été créé il y a plus d'un an et peut être réexécuté (si nécessaire) en cliquant sur le bouton Exécuter ci-dessous.
Articles similaires résumés avec nos outils d'IA
Naviguez à travers encore plus d'articles similaires en utilisant une
représentation arborescenteRecherchez des articles similaires (en version bêta)
Nous comparons le titre et le résumé avec les articles indexés dans notre base. Pour les articles arXiv, la recherche porte sur la même catégorie ; pour les DOI et les autres sources, elle couvre toutes les sources et disciplines. Vous pouvez la relancer à mesure que notre base s’enrichit.
Avertissement : Notre outil de synthèse basé sur l'IA et l'assistant virtuel fournis sur ce site Web peuvent ne pas toujours fournir des résumés complets ou des réponses exactes. Nous vous encourageons à examiner attentivement et à évaluer le contenu généré pour vous assurer de sa qualité et de sa pertinence par rapport à vos besoins.