Anthropic launches Claude Personal Finance for bank account analysis. Explore its features, privacy considerations, availability and comparison with ChatGPT.
METR finds faster Anthropic AI benchmark progress, but key evidence remains redacted. Learn what IT buyers should check before adopting new model releases.
Ray-Ban Meta and Oakley Meta arrive in Philippine stores Nov. 10, with Tagalog AI support and four models spanning everyday, prescription, and sports use.
Learn how to spot AI hallucinations, verify facts and quotes, check sources, and review AI-generated business reports before sharing or acting on them.
Artificial intelligence visual creation just took a massive leap forward. OpenAI has officially launched Images 2.6, a major update to its image generation and editing ecosystem. Designed to tackle common user frustrations—like inconsistent character edits and sluggish generation times—Images 2.6 brings a robust suite of performance upgrades and creative tools directly to ChatGPT, Codex, and […]
Comme vous le savez, je m'amuse beaucoup avec l'IA en ce moment. Bon, j'en cause surtout sur mon Patreon parce que sinon, je vous saoulerai grave avec toutes mes expériences mais ça c'est un truc que je tenterai bien à l'occasion. Je vous explique...
Cette semaine, 4 chercheurs du MIT CSAIL, Rikiya Takehi, Jayden Teoh, Alex Zhang et Omar Khattab, ont expliqué sur leur site comment ils ont demandé à GPT-6 Astra, le modèle d'OpenAI, de rendre Qwen3.5-0.8B meilleur en maths en retouchant directement ses poids, sans la moindre descente de gradient.
Et non seulement, l'IA d'OpenAI y est parvenu, mais en plus, le chiffre claque puisque le score sur MATH-500 de ce Qwen est passé de 7,9 % à 48,1 % suite à une modification par Astra de seulement 131 072 poids sur 0,8 milliard, soit 0,016 % du modèle.
Pour ceux qui arrivent (en armure comme Diam's ^^), les poids d'un réseau de neurones, c'est l'IMMENSE liste des nombres que l'entraînement ajuste petit à petit, et que presque personne ne sait ensuite retoucher à la main. C'est d'une telle complexité ! Mais avec un petit budget et 50 passes pour regarder comment le modèle répond à ses retouches, Astra lui à réussi !
Le point de départ des chercheurs, c'est que Qwen tournait en rond sur les problèmes de maths. Ainsi sur ses 96 premières réponses d'entraînement, 85 pédalaient dans la semoule jusqu'à atteindre la limite des 32 768 tokens et donc sans livrer de solution... Snif... Astra a donc remonté ces boucles une par une jusqu'à une direction écrite par les couches 15 et 19 du modèle, puis il l'a soustraite des poids. Et voilà comment la part des réponses interrompues à cause de cette limite en token est tombée de 93 % à 33 %.
Alors, Qwen est-il vraiment devenu bon en maths grâce à Astra ?
Hé bien pas vraiment, et ce sont les auteurs eux-mêmes qui le disent dans leur papier. En fait, réparer des boucles permet surtout au modèle de finir des réponses qu'il savait déjà trouver. Ils ont d'ailleurs refait l'essai sur Gemma 3 270M, un modèle qui boucle rarement, et là, aucune des retouches d'Astra n'a fait bougé le score MATH-500 de plus d'un point. Voilà, donc contrairement aux grandes annonces que j'ai pu lire de ci, de là, retoucher les poids de Qwen a juste permis de lever un obstacle qui cachait une capacité existante, mais n'a en aucun cas ajouté une capacité qui manquait.
Cette expérience a ensuite été refaite par Jonathan Coletti, sur Hugging Face, qui a
réévalué les poids publiés
avec le prompt, les réglages et le correcteur des auteurs. Et il est passé d'un Qwen à 7,4 % à un Qwen à 50,2 % après, réflexion activée bien sûr (le mode "Thinking" quoi). Ça confirme donc bien le papier.
Mais Jonathan a aussi tenté le coup avec le mode réflexion coupé et là, la retrouche a fait perdre au modèle un peu plus de 2 points.
Quoiqu'il en soit, cette retouche peut se rapprocher de l'effacement d'une direction dans les poids, ce qui en gros est la recette de l'abliteration qu'utilisent déjà
ces outils qui virent la censure des LLM
. Astra serait donc potentiellement capable de lever des limites sur des modèles open source (dont les poids sont dispo)... Intéressant non ?
Voilà, donc si vous faites tourner ce petit Qwen chez vous et que vous optez pour cette version retouchée par Astra, activez bien ce mode Thinking car avec lui, le modèle aura la bosse des maths !
OpenAI tests AI for hardware design and vehicle engineering. Explore manufacturing limits and what businesses should check before adopting these tools.
An EU court adviser outlines when Google Gemini’s reuse of news could infringe publishers’ rights and what businesses using web-connected AI should check.
Every major leap in generative artificial intelligence begins quietly in the code. Long before marketing teams roll out flashy announcement trailers or live-streamed keynote events, developer documentation, SDK updates, and API specifications often spill the beans on what is coming next. That exact scenario is playing out right now in the AI community. OpenAI’s latest […]
Opera's WebAI brings local AI models to supported browsers, offering developers new options while raising questions about privacy and device requirements.
Siri AI and Google Gemini both offer conversational AI, personal context, and app automation, but they work differently across devices. Compare their features, privacy controls, and everyday usefulness to decide which assistant suits you best.
Google Play's October 2026 updates introduce Ask Play video answers, 30-second gameplay recordings, shareable Play Shorts, and new pairing features for Android XR glasses and wireless earbuds.
Anthropic moves Agent Skills to the Agentic AI Foundation. Learn what the handover means for IT teams, workflow portability, compatibility, and security.
Microsoft's MAI-DxO AI outperformed generalist doctors on diagnostic benchmarks, but real-world hospital testing is still needed to assess its clinical value.