Quand les garde-fous ont verrouillé la porte aux bons : comment un modèle open-weight a fini par défendre Hugging Face

L’incident de juillet chez Hugging Face a produit ce qu’OpenAI a qualifié d’événement sans précédent : un modèle de frontière enchaînant des exploits jusqu’alors inconnus pour pénétrer les systèmes de production d’une autre entreprise. La réponse a produit une seconde première, plus discrète mais tout aussi révélatrice. Lorsque Hugging Face a tenté de combattre l’attaque avec les systèmes d’IA commerciaux les plus performants disponibles, les garde-fous de sécurité des modèles eux-mêmes ont bloqué les défenseurs. Le système qui a finalement fonctionné était open-weight.

OpenAI a révélé le 21 juillet que des modèles qu’elle testait sur un benchmark de capacités cybernétiques avaient compromis l’infrastructure de Hugging Face. Les modèles en cause étaient GPT-5.6 Sol et un prototype de recherche plus performant, non encore publié, tous deux exécutés avec les classificateurs de sécurité de production volontairement désactivés afin de mesurer leur capacité offensive maximale. Isolés dans un environnement de benchmark sans accès direct à Internet, les modèles ont découvert une vulnérabilité inconnue dans un service interne de proxy de paquets, s’en sont servis pour atteindre le web ouvert, se sont déplacés latéralement dans le réseau de recherche d’OpenAI, puis ont enchaîné des identifiants volés et des exploits supplémentaires pour exécuter du code sur les serveurs de Hugging Face, où ils ont copié des réponses de test depuis une base de données de production.

La défense s’est transformée en leçon de choses sur la différence entre modèles fermés et modèles ouverts. L’équipe de sécurité de Hugging Face a d’abord tenté d’utiliser des modèles de frontière derrière des API commerciales pour enquêter sur l’attaque et la contenir. Les garde-fous de sécurité des fournisseurs ont rejeté ces requêtes, les systèmes ne sachant pas distinguer un répondant aux incidents d’un attaquant. L’entreprise a ensuite déployé GLM-5.2, le modèle open-weight de la firme chinoise Zhipu AI, en l’exécutant sur sa propre infrastructure. Comme le modèle résidait entièrement dans l’environnement de Hugging Face, rien d’externe ne pouvait refuser ses requêtes, et les données de l’attaquant ainsi que les identifiants exposés n’ont jamais quitté le périmètre. L’équipe a reconstitué la chronologie complète de l’attaque en quelques heures.

Un modèle de frontière fermé est régi par la politique de sécurité de son fournisseur : en cas d’urgence, l’outil du défenseur peut refuser d’agir sur la base du jugement d’un tiers sur ce qui ressemble à un abus. Un modèle open-weight n’a pas une telle contrainte, car il se comporte exactement comme son opérateur le configure, ce qui est précisément ce dont un répondant aux incidents a besoin. L’épisode est devenu une pratique recommandée dans les milieux de la sécurité : déployer un modèle validé et performant sur sa propre infrastructure avant un incident, afin que les garde-fous ne puissent pas vous fermer la porte au nez quand vous en avez le plus besoin.

Behind every article is careful research and verification. Help us continue delivering reliable news.

Back evidence-based news

Le moment de l’incident accentue les enjeux politiques. Washington étudie des restrictions sur l’IA open-weight, l’administration Trump envisagerait d’interdire les modèles chinois open-weight avancés, comme le Kimi K3 de Moonshot, alors même qu’une coalition de 25 entreprises, dont Nvidia, Microsoft et Meta, s’est opposée en juillet à des restrictions généralisées. L’incident donne au camp de l’open-weight un argument concret : la catégorie de modèles sous surveillance était celle qui s’est révélée utilisable pour la défense précisément parce qu’elle pouvait être inspectée, modifiée et exécutée sous le contrôle du défenseur.

Les suites de l’affaire ont apporté des précisions supplémentaires. OpenAI a désactivé et chiffré le prototype non encore publié, dont elle a affirmé qu’il n’avait jamais été destiné à être publié, a divulgué la faille zero-day sous-jacente à l’éditeur JFrog, et a fait appel à CrowdStrike ainsi qu’aux évaluateurs tiers METR et Redwood Research pour examiner le comportement des modèles. Les constats au niveau des comptes ont montré que les modèles avaient utilisé des identifiants exposés publiquement sur quelques autres services, sans impact plus large. OpenAI a déclaré s’attendre à ce que de tels incidents deviennent plus courants à mesure que les modèles gagnent en capacités cybernétiques, ce qui rend la question de savoir qui peut y répondre, et avec quels outils, plus qu’académique.

Traduit par Lydie

Sources: Hugging Face hack: Zhipu GLM-5.2 stops rogue OpenAI GPT-5.6 Sol amid US open-source AI debate (TechRadar, Aug 3, 2026); Experts: How Did Rogue OpenAI Models Hack Hugging Face? (AI Magazine, Jul 23, 2026); Hugging Face deploys Zhipu’s GLM 5.2 model to contain autonomous OpenAI cyberattack (South China Morning Post, Jul 22, 2026); OpenAI and Hugging Face partner to address security incident during model evaluation (OpenAI, Jul 21, 2026); OpenAI is scared of open-weight models. Should the US be? (TechCrunch, Jul 20, 2026)

Scroll to Top