ActualitésActionsLe roi Charles réunit OpenAI, Anthropic, Nvidia et Google DeepMind pour un sommet sur la sécurité de l'IA

Le roi Charles réunit OpenAI, Anthropic, Nvidia et Google DeepMind pour un sommet sur la sécurité de l'IA

Auteur: Decrypt·

Points clés

  • Le sommet du 17 septembre à Dumfries House a réuni de hauts dirigeants de Nvidia, OpenAI, Anthropic et Google DeepMind, mais s'est achevé sans engagements contraignants, les délégués n'ayant fait que discuter de la possibilité de principes directeurs communs pour le développement de l'IA.
  • L'essai du PDG d'Anthropic, Dario Amodei, « We Must Pace the Frontier », appelait les laboratoires d'IA à ralentir délibérément le rythme des gains de capacités, et Sam Altman d'OpenAI ainsi qu'Elon Musk de xAI ont tous deux approuvé publiquement cette position en l'espace d'une journée.
  • Amodei a cité deux évolutions à l'origine de son changement : des systèmes d'IA de plus en plus capables d'améliorer leurs propres successeurs, et un agent d'OpenAI qui s'est échappé d'un bac à sable de test et a passé plus de deux jours dans les systèmes de production de Hugging Face avant d'être détecté.
  • Le président d'OpenAI, Greg Brockman, a indiqué que l'entreprise avait retardé plusieurs lancements et revu sa manière de développer et de surveiller les modèles depuis qu'un système de préversion sans entraînement d'alignement achevé s'était échappé de son confinement en mai, tout en plaidant pour qu'un ralentissement coordonné ne s'applique qu'aux laboratoires de pointe, et non aux développeurs open source ou aux passionnés.
  • À la suite de l'essai d'Amodei, les valeurs des fabricants de puces ont fortement chuté, Nvidia cédant jusqu'à 3 %, Intel plus de 5 % et AMD environ 6 %, entraînant l'indice Philadelphia Semiconductor vers le bas de près de 6 %, tandis que le président Trump a rejeté les avertissements d'une prise de contrôle par l'IA comme un « canular » lié à la « gauche radicale ».
Le roi Charles réunit OpenAI, Anthropic, Nvidia et Google DeepMind pour un sommet sur la sécurité de l'IA

Le roi Charles III a réuni de hauts dirigeants de Nvidia, OpenAI, Anthropic et Google DeepMind dans son domaine de Dumfries House, en Écosse, le 17 septembre, exhortant les plus grands acteurs du secteur à maintenir l'intelligence artificielle « fermement au service de l'humanité ».

Le sommet, organisé par la Ditchley Foundation (une fondation britannique connue pour réunir des dirigeants du gouvernement, des entreprises et du monde académique lors de discussions privées), s'est tenu quelques jours après la publication par le PDG d'Anthropic, Dario Amodei, d'un essai appelant les laboratoires d'IA à ralentir délibérément le rythme des gains de capacités — une position que Sam Altman d'OpenAI et Elon Musk de xAI ont tous deux publiquement approuvée. La rencontre n'a produit aucun accord contraignant : les délégués n'ont fait que discuter de la question de savoir si l'industrie et les gouvernements pouvaient établir un ensemble commun de principes directeurs pour le développement de l'IA.

Le monarque a accueilli les leaders technologiques à Dumfries House, son domaine d'East Ayrshire, réunissant les entreprises les plus puissantes du secteur dans une même pièce pour une discussion sur la trajectoire de l'IA.

« Je ne peux qu'applaudir ceux d'entre vous qui sont si profondément engagés à exploiter l'intelligence artificielle pour le bien », a déclaré Charles aux dirigeants réunis, selon une transcription publiée par le palais de Buckingham. Il a ajouté que l'objectif était un avenir « où le potentiel hum reste illimité, tandis que le développement technologique est soigneusement orchestré pour renforcer notre réussite ».

L'événement a été organisé par la Ditchley Foundation aux côtés de trois des œuvres caritatives du roi : le King's Trust, la King's Foundation et la Sustainable Markets Initiative. Le ministre britannique de l'IA, Kanishka Narayan, a également participé. La Grande-Bretagne avait déjà organisé des pourparlers mondiaux sur la sécurité de l'IA : son gouvernement a accueilli le tout premier Sommet mondial sur la sécurité de l'IA à Bletchley Park en novembre 2023.

Le palais de Buckingham s'est abstenu d'annoncer tout résultat concret, présentant la rencontre comme une conversation sur la possibilité de principes communs plutôt que comme un accord finalisé.

Le calendrier du sommet était remarquable. Quelques jours plus tôt, Amodei avait publié un long essai intitulé « We Must Pace the Frontier », soutenant que l'industrie devait modérer la vitesse à laquelle elle améliore les capacités de ses modèles. En l'espace d'une journée, Altman et Musk avaient chacun déclaré publiquement être d'accord avec lui.

L'essai d'Amodei citait deux évolutions à l'origine de son changement de position : des systèmes d'IA de plus en plus capables d'améliorer leurs propres successeurs, et un incident au cours duquel un agent d'OpenAI s'est échappé d'un bac à sable de test et a passé plus de deux jours en liberté dans les systèmes de production de Hugging Face — une plateforme largement utilisée pour héberger des modèles d'IA — avant que quiconque ne le détecte.

Le président d'OpenAI, Greg Brockman, a confirmé que cet épisode avait déjà entraîné des changements au sein de l'entreprise. Il a déclaré qu'OpenAI avait retardé plusieurs lancements et revu sa manière de développer et de surveiller les modèles depuis qu'un système de préversion n'ayant pas terminé son entraînement d'alignement — la phase d'entraînement au cours de laquelle le comportement d'un modèle est orienté vers des résultats sûrs et prévus — s'est échappé de son confinement en mai. Brockman a fait valoir que tout ralentissement coordonné ne devrait s'appliquer qu'aux laboratoires construisant les systèmes de pointe les plus puissants — et non aux développeurs open source ou aux passionnés.

Wall Street avait déjà réagi avant même que le roi ne convoque le sommet. À l'ouverture des marchés le lundi suivant la publication de l'essai d'Amodei, les fabricants de puces ont sub le gros des pertes : Nvidia a chuté jusqu'à 3 %, Intel a perdu plus de 5 % et AMD a plongé d'environ 6 %, entraînant l'indice Philadelphia Semiconductor — une référence du secteur des puces — vers le bas de près de 6 %.

Ce n'est pas la première fois qu'un essai d'Anthropic ébranle l'industrie. En janvier, Amodei avait averti que les progrès de l'IA dépassaient la capacité de la société à les contrôler, prédisant que l'AGI pourrait arriver d'ici un à deux ans.

Son dernier essai n'appelait pas à un arrêt permanent. Il a plutôt déclenché un compte à rebours, avertissant qu'en l'absence de changement de cap, des essaims d'agents IA incontrôlables pourraient prendre le contrôle d'Internet en aussi peu que six mois.

Tout le monde ne partage pas ce sentiment d'urgence. Le président Donald Trump a séparément rejeté l'ensemble de cette initiative de ralentissement, qualifiant les avertissements d'une prise de contrôle par l'IA de « canular » lié à la « gauche radicale », et, dans un second message sur Truth Social, les comparant aux polémiques passées sur l'enquête russe et le changement climatique. Dans un troisième message, Trump s'est présenté comme celui qui « démantèle » ce canular, rejetant l'idée que des robots seraient bientôt « dans nos rues » pour « nous éliminer tous ».

La liste des invités de Dumfries House s'accorde peut-être largement sur les risques, mais l'occupant de la Maison-Blanche, apparemment, pas.