Federated Multi-Target Domain Adaptation

Mots clés générés par l'IA : Apprentissage Fédéré Adaptation de Domaine Données Distribuées Communication Ressources Informatiques

Points clés générés par l'IA

  • Les méthodes d'apprentissage fédéré permettent de former des modèles sur des données utilisateur distribuées tout en préservant leur confidentialité.
  • Il peut être difficile d'obtenir des signaux de supervision de haute qualité pour les tâches de vision.
  • Dans ce scénario, les données client distribuées ne sont pas étiquetées et un ensemble de données étiqueté centralisé est disponible sur le serveur.
  • Le problème traité est celui de l'adaptation de domaine avec une source (donnée centralisée du serveur) et plusieurs cibles (donnée client distribuée).
  • Une mise en œuvre efficace appelée DualAdapt est proposée pour relever ces défis.
  • Des résultats expérimentaux montrent que cette mise en œuvre atteint une grande précision, minimise le coût communicationnel et requiert peu de ressources informatiques sur les appareils clients.
  • Une analyse ablative évalue l'efficacité et les coûts individuels des composants du cadre.
  • L'introduction de classifieurs locaux globaux améliore la précision sans augmenter significativement les coûts computationnels ni les frais de communication par rapport à Fed-MCD.
  • L'auto-apprentissage améliore encore la précision sans augmenter considérablement les coûts computationnels.
  • Le mécanisme pondéré GMM permet d'approcher la précision du modèle complet à celle d'un oracle avec seulement 1 000 paramètres supplémentaires à télécharger, démontrant ainsi l'efficacité du pondéré mixup proxy cible.
  • Ce travail est lié à l'adaptation centralisée multi-cible mais prend en compte les contraintes liées à l'apprentissage fédéré et aux ressources limitées des appareils clients.
Accédez également à nos autres résultats générés par IA : Résumé complet, Résumé vulgarisé, Article de type blog; ou posez des questions sur cet article à notre Assistant IA.

Auteurs : Chun-Han Yao, Boqing Gong, Yin Cui, Hang Qi, Yukun Zhu, Ming-Hsuan Yang

Licence : CC BY 4.0

Résumé : Federated learning methods enable us to train machine learning models on distributed user data while preserving its privacy. However, it is not always feasible to obtain high-quality supervisory signals from users, especially for vision tasks. Unlike typical federated settings with labeled client data, we consider a more practical scenario where the distributed client data is unlabeled, and a centralized labeled dataset is available on the server. We further take the server-client and inter-client domain shifts into account and pose a domain adaptation problem with one source (centralized server data) and multiple targets (distributed client data). Within this new Federated Multi-Target Domain Adaptation (FMTDA) task, we analyze the model performance of exiting domain adaptation methods and propose an effective DualAdapt method to address the new challenges. Extensive experimental results on image classification and semantic segmentation tasks demonstrate that our method achieves high accuracy, incurs minimal communication cost, and requires low computational resources on client devices.

Soumis à arXiv le 17 Aoû. 2021

Posez des questions sur cet article à notre assistant IA

Vous pouvez aussi discutez avec plusieurs papiers à la fois ici.

Instructions pour utiliser l'assistant IA ?

Résultats du processus de synthèse de l'article arXiv : 2108.07792v1

Les méthodes d'apprentissage fédéré nous permettent de former des modèles d'apprentissage automatique sur des données utilisateur distribuées tout en préservant leur confidentialité. Cependant, il n'est pas toujours possible d'obtenir des signaux de supervision de haute qualité provenant des utilisateurs, notamment pour les tâches de vision. Contrairement aux paramètres fédérés typiques avec des données client étiquetées, nous considérons un scénario plus pratique où les données client distribuées ne sont pas étiquetées et où un ensemble de données étiquetée centralisée est disponible sur le serveur. Nous prenons également en compte les variations entre le serveur-client et entre les clients et posons un problème d'adaptation de domaine avec une source (donnée centralisée du serveur) et plusieurs cibles (donnée client distribuée). Dans cette nouvelle tâche d'adaptation multi-cible fédérée (FMTDA), nous analysons les performances des moyens existants d'adaptation de domaine et proposons une mise en œuvre efficace appelée DualAdapt pour relever ces défis. Des résultats exprimentiels approfondis sur des tâches de classification d'images et segmentation sèmantique montrent que notre mise en œuvre atteint une grande praccision, minimise le coût en termes communicationnel et requiert peu ressources informatiques sur les appareils clients. Nous effectuons également une analyse ablative pour évaluer l'efficacité et coûts individuells composants du cadre. Les résultats montrent qu’en introduisant classifieurs locaux globaux on obtient 1,1 % gain praccision sans augmenter significativement coûts computationnels ni frais communication par rapport à Fed-MCD. L’auto-apprentissage (ST) ameliore encore la praccision 0,7 % sans augmenter considérablement coûts computationnels. Grâce au mêcanisme pondère GMM la praccision du modèle complet se rapproche oracle alors qu’il y a seullement 1 000 paramètres supplêmentaires à telecharger diffuser ce qui démontre l’efficacité pondère mixup proxy cible. Notre travail est liê à adaptation centralisée multi-cible car meme si certaine moyens ont étê proposés pour résoudre ce problême ells ne tiennent génralement pas compte contraintes liês à l’apprentissage fêdrê ni ressources limités appareils clients.
Créé le 16 Nov. 2023
Disponible dans d'autres langues : en

Évaluez la qualité du contenu généré par l'IA en votant

Note : 0

Pourquoi avons-nous besoin de votes ?

Les votes sont utilisés pour déterminer si nous devons réexécuter nos outils de synthèse. Si le compte atteint -10, nos outils peuvent être redémarrés.

Le résumé précédent a été créé il y a plus d'un an et peut être réexécuté (si nécessaire) en cliquant sur le bouton Exécuter ci-dessous.

Articles similaires résumés avec nos outils d'IA

Naviguez à travers encore plus d'articles similaires en utilisant une

représentation arborescente

Recherchez des articles similaires (en version bêta)

En cliquant sur le bouton ci-dessus, notre algorithme analysera tous les articles de notre base de données pour trouver le plus proche en fonction du contenu des articles complets et pas seulement des métadonnées. Veuillez noter que cela ne fonctionne que pour les articles pour lesquels nous avons généré des résumés et que vous pouvez le réexécuter de temps en temps pour obtenir un résultat plus précis pendant que notre base de données s'agrandit.

Avertissement : Notre outil de synthèse basé sur l'IA et l'assistant virtuel fournis sur ce site Web peuvent ne pas toujours fournir des résumés complets ou des réponses exactes. Nous vous encourageons à examiner attentivement et à évaluer le contenu généré pour vous assurer de sa qualité et de sa pertinence par rapport à vos besoins.