# Désinformation Articles associés

Le Centre d'actualités HTX fournit les derniers articles et analyses approfondies sur "Désinformation", couvrant les tendances du marché, les mises à jour des projets, les développements technologiques et les politiques réglementaires dans l'industrie crypto.

15 modèles de raisonnement échouent collectivement : explication des risques cachés derrière les chaînes de pensée révélées

Lorsque les modèles de raisonnement à grande échelle (LRM) exposent leurs processus de raisonnement intermédiaires aux utilisateurs et aux systèmes en aval, une question négligée émerge : se fier uniquement à la sécurité de la réponse finale est-il suffisant ? Une étude conjointe de plusieurs universités, dont Harvard, USC et le MIT, démontre le contraire. Elle révèle que les chaînes de raisonnement (CoT) peuvent générer des contenus à haut risque (ex : instructions pour fabriquer une bombe), même lorsque la réponse finale semble sûre. L'étude propose une évaluation en deux étapes : analyser séparément la trajectoire de raisonnement (r) et la réponse finale (y) selon 20 principes de sécurité, chacun noté de 1 à 5. Trois modes d'échec sont identifiés : **Unsafe** (raisonnement et réponse non sûrs), **Leak** (raisonnement dangereux mais réponse sûre), et **Escape** (raisonnement sûr mais réponse dangereuse). Testé sur 15 modèles de raisonnement (dont GPT-4o, Gemini, Claude) avec un ensemble de 41K prompts potentiellement nuisibles, un constat majeur apparaît : **la dangerosité moyenne du raisonnement dépasse systématiquement celle de la réponse finale** pour tous les modèles. Les risques se concentrent sur des catégories comme la désinformation, les préjugés et les dommages physiques. Pour atténuer ces risques, les chercheurs proposent une méthode d'**orientation adaptative multi-principes**. Elle ajuste les activations internes du modèle pendant le raisonnement pour le guider vers des états « sûrs » définis par les principes. Testée sur des modèles open-source (comme DeepSeek-R1), cette méthode réduit le taux de contenus non sûrs jusqu'à 40.8% tout en conservant 97.7% des performances sur des benchmarks standard. En conclusion, cette recherche souligne l'importance cruciale d'évaluer et de contrôler la sécurité tout au long du processus de raisonnement, et pas seulement au résultat final, en fournissant un cadre unifié pour le diagnostic et l'atténuation de ces risques cachés.

marsbitIl y a 9 h

15 modèles de raisonnement échouent collectivement : explication des risques cachés derrière les chaînes de pensée révélées

marsbitIl y a 9 h

« L’IA perce les défenses de la NSA en quelques heures » fait le buzz, la vérité révèle-t-elle un exercice Red Team ?

Une déclaration largement diffusée selon laquelle l'IA Mythos d'Anthropic aurait « piraté en quelques heures la quasi-totalité des systèmes classifiés de la NSA » s'est avérée être une interprétation trompeuse d'un exercice de « red team » autorisé. L'origine remonte à un article de *The Economist* citant le sénateur Mark Warner, qui rapportait les propos du chef de la NSA. Le journaliste Shashank Joshi a par la suite clarifié que cette performance s'était déroulée dans des conditions très spécifiques et contrôlées, où Mythos était utilisé avec d'autres outils pour identifier des vulnérabilités dans un environnement répliqué de la NSA, et non pour une intrusion réelle. Cette démonstration, bien que vertigineuse par sa rapidité, concernait donc un test de sécurité interne. Anthropic limite d'ailleurs l'accès à son modèle avancé Mythos via le « Project Glasswing », une initiative réservée à des partenaires de défense triés sur le volet pour évaluer leurs propres systèmes. La position du gouvernement américain envers Anthropic et Mythos apparaît ambivalente. Alors que le Pentagone a initialement rompu sa collaboration et qu'un décret a brièvement restreint l'accès à certains modèles suite à des craintes de contournement des garde-fous, la NSA continuerait de les utiliser en interne. Cette situation souligne le double enjeu : reconnaître les capacités offensives potentielles de l'IA tout en cherchant à les exploiter pour la cybersécurité nationale. L'épisode met enfin en lumière la difficulté de réguler ces technologies et la rapidité avec laquelle une information contextuelle peut être déformée lorsqu'elle circule.

marsbit06/23 00:58

« L’IA perce les défenses de la NSA en quelques heures » fait le buzz, la vérité révèle-t-elle un exercice Red Team ?

marsbit06/23 00:58

Claude va-t-il bloquer les comptes et vérifier les cartes d'identité ? La reconnaissance faciale est un vieux dossier vieux de deux mois, « la transmission des données à la police » est une mauvaise interprétation

Anthropic a mis à jour sa politique de confidentialité pour Claude, entrant en vigueur le 8 juillet. Contrairement aux interprétations répandues sur les réseaux sociaux chinois, les principaux changements ne sont pas aussi radicaux qu’annoncé. L’authentification par pièce d’identité et reconnaissance facile, présentée à tort comme une nouvelle mesure, est en réalité opérationnelle depuis avril 2026 via le prestataire Persona. La mise à jour juridique ne fait que formaliser cette pratique existante. L’affirmation selon laquelle le nouveau texte facilite le partage de données avec les autorités policières est également infondée. Une comparaison ligne par ligne avec l’ancienne version montre que les conditions de divulgation aux forces de l’ordre (croyance de bonne foi, prévention d’activités illégales, etc.) étaient déjà présentes. Le nouveau libellé est simplement plus structuré et détaillé. Le changement substantiel réside dans la couverture explicite des flux de données liés aux "Agents" : lorsque Claude effectue des tâches multi-étapes ou interagit avec des services tiers, les entrées/sorties de l’utilisateur sont partagées avec ces tiers. Cette clarification comble un vide de l’ancienne politique, adaptant le texte aux capacités évoluées de l’assistant. Anthropic réaffirme par ailleurs ne pas vendre les données des utilisateurs, ne pas inclure de publicité dans Claude, et laisser le contrôle sur l’utilisation des conversations pour l’entraînement des modèles. Cette mise à jour correspond principalement à un alignement de la politique sur la réalité technique et juridique existante, plutôt qu’à un durcissement intentionnel de la protection de la vie privée.

marsbit06/15 08:59

Claude va-t-il bloquer les comptes et vérifier les cartes d'identité ? La reconnaissance faciale est un vieux dossier vieux de deux mois, « la transmission des données à la police » est une mauvaise interprétation

marsbit06/15 08:59

活动图片