OpenAI o1 : une nouvelle série de modèles OpenAI pour le raisonnement par IA

La communauté de l'IA est en ébullition avec des spéculations sur la prochaine étape des modèles GPT d'OpenAI, beaucoup la qualifiant de « Projet Strawberry ». La raison en est que si tu interroges GPT-4o en lui demandant combien de R se trouvent dans le mot « strawberry », il te dira qu'il y a deux R dans le mot « strawberry ». Cela peut sembler étrange compte tenu de la puissance de GPT-4o. Cependant, le modèle est conçu pour traiter le sous-texte et non les mots exacts. Des rumeurs indiquaient que le prochain modèle viserait à résoudre ce problème. Sam Altman a alimenté ces rumeurs en publiant des photos de fraises sur son compte X (anciennement connu sous le nom de Twitter).

Avec la dernière annonce d'OpenAI le jeudi 12 septembre, nous avons enfin une réponse à ces spéculations ! OpenAI o1, une nouvelle série de modèles d'IA conçus pour ralentir et réfléchir avant de répondre, a été publié. Fait intéressant, OpenAI o1 est capable de raisonner plus efficacement et de répondre correctement à la question sur les fraises ! Dans cet article, nous allons discuter de ce qu'est OpenAI o1, de son fonctionnement, de ses domaines d'application et de ce qu'il implique pour l'avenir de l'IA. Commençons !

Fig 1. Un exemple de requête posée à OpenAI o1 concernant les fraises.

Nouvelles avancées dans l'IA par OpenAI#

En juillet 2024, des dirigeants d'OpenAI ont indiqué que la recherche d'OpenAI approche d'un niveau de résolution de problèmes comparable à celui des humains, désigné sous le nom de niveau 2 de l'IA. Il est évident que ce niveau met l'accent sur le raisonnement, puisque OpenAI présente sa nouvelle série de modèles, OpenAI o1, comme étant capable de réfléchir avant de répondre. OpenAI o1 est un nouveau LLM (grand modèle de langage), un modèle d'IA qui comprend et génère du texte de type humain en apprenant des motifs à partir de masses de données textuelles. Il a été conçu pour traiter des problèmes complexes nécessitant un raisonnement approfondi.

Fig 2. La perspective d'OpenAI sur les étapes de l'IA.

Le modèle a été entraîné à l'aide de l'apprentissage par renforcement, une technique où le modèle apprend à prendre de meilleures décisions par essai et erreur en recevant des récompenses ou des pénalités pour ses actions. L'algorithme d'apprentissage par renforcement aide le modèle à réfléchir plus efficacement en suivant une chaîne de pensée. OpenAI a également indiqué que les performances d'o1 continuent de s'améliorer grâce à un apprentissage par renforcement accru lors de l'entraînement et à un temps de « réflexion » prolongé lors de la résolution de problèmes, montrant ainsi que l'entraînement étendu et le traitement réfléchi contribuent tous deux à renforcer les capacités du modèle.

Bien qu'OpenAI o1 représente une avancée significative pour le raisonnement complexe, il s'agit encore d'un modèle précoce qui manque de certaines fonctionnalités qui rendent ChatGPT utile, telles que la navigation sur le Web ou le téléchargement de fichiers et d'images. Pour de nombreuses tâches courantes, GPT-4o pourrait encore être plus performant pour le moment. Cependant, OpenAI o1 marque un grand pas en avant dans la capacité de l'IA à gérer le raisonnement complexe, c'est pourquoi OpenAI lance une nouvelle série et l'appelle OpenAI o1.

Comment les nouveaux modèles OpenAI améliorent le raisonnement par IA#

OpenAI o1 peut être utilisé pour des tâches telles que le déchiffrement de codes, la résolution de défis de programmation, la résolution de problèmes mathématiques, la résolution de mots croisés et même le traitement de sujets complexes en science, en sécurité et en santé. Dans un clin d'œil amusant au nom de code du projet, OpenAI a démontré les compétences de raisonnement du modèle en craquant un code qui a révélé le message « THERE ARE THREE R’S IN STRAWBERRY ».

Au-delà du déchiffrement de codes, OpenAI o1 possède également de solides compétences en programmation. Il obtient de bons résultats dans les défis de programmation compétitive, tels que ceux proposés sur Codeforces, une plateforme où les programmeurs résolvent des problèmes de code complexes dans des conditions chronométrées. Dans ces défis, le modèle atteint des classements Elo élevés (un système de notation qui mesure les niveaux de compétence en fonction des performances contre d'autres concurrents) et surpasse les modèles précédents. Il excelle également en mathématiques et réussit bien aux examens tels que l'American Invitational Mathematics Examination (AIME).

Fig 3. Évaluation comparative des compétences en programmation d'o1.

Ces avancées positionnent OpenAI o1 comme une mise à niveau majeure par rapport aux modèles précédents tels que GPT-4o. Il ouvre de nouvelles perspectives pour l'IA dans des domaines tels que les affaires, le développement, la recherche et la santé. Par exemple, en recherche en génétique, OpenAI o1 peut parcourir rapidement un grand nombre d'articles de recherche, en extrayant les principales conclusions et les liens entre les marqueurs génétiques et les maladies. Il comprend un langage scientifique complexe et peut résumer des points importants, aidant ainsi les chercheurs à se concentrer sur les informations les plus pertinentes.

Un regard plus approfondi sur la chaîne de pensée#

Nous avons vu plus tôt qu'OpenAI o1 introduit un processus de raisonnement en « Chaîne de pensée ». Il permet au modèle de s'attaquer à des problèmes complexes d'une manière similaire aux stratégies cognitives humaines. Le modèle peut décomposer les défis en étapes plus petites et gérables, et affiner son approche de manière itérative. Contrairement aux modèles précédents qui s'appuyaient sur la reconnaissance de motifs immédiate, o1 optimise sa prise de décision en explorant de multiples chemins de raisonnement, en apprenant à la fois de ses réussites et de ses erreurs grâce à l'apprentissage par renforcement.

OpenAI a décidé de garder ces chaînes de pensée brutes cachées des utilisateurs, proposant à la place des résumés qui donnent un aperçu du raisonnement du modèle sans exposer chaque étape. Cette décision aide à prévenir la mauvaise utilisation du processus de pensée du modèle tout en permettant aux développeurs de surveiller et d'affiner la sécurité et l'alignement de l'IA. En observant en interne les chaînes cachées, les développeurs peuvent s'assurer qu'o1 respecte les directives éthiques et évite tout comportement nuisible.

Benchmarking d'OpenAI o1#

OpenAI o1 présente des améliorations majeures par rapport à GPT-4o dans plusieurs tests comparatifs qui évaluent les capacités de raisonnement et de résolution de problèmes. À l'American Invitational Mathematics Examination (AIME) 2024, un examen de mathématiques difficile destiné aux meilleurs lycéens, o1 a atteint un taux de précision de 74 % avec un seul échantillon par problème, contre 12 % pour GPT-4o. Avec un consensus sur 64 échantillons, sa précision est passée à 83 %, et en utilisant une méthode de reclassement affinée avec 1 000 échantillons, il a atteint 93 %, se classant ainsi parmi les 500 meilleurs étudiants à l'échelle nationale.

Au-delà des mathématiques, o1 a également obtenu des résultats exceptionnels dans les tests comparatifs évaluant les connaissances scientifiques, comme le GPQA Diamond, qui couvre des questions de niveau doctorat en chimie, en physique et en biologie. Fait remarquable, o1 a surpassé des experts humains titulaires d'un doctorat lors de ce test, devenant ainsi le premier modèle d'IA à réussir cet exploit. Il a également surpassé GPT-4o dans 54 des 57 catégories du test comparatif MMLU, qui évalue la compréhension dans un ensemble diversifié de sujets, incluant l'histoire, le droit et les sciences.

Fig 4. Évaluation comparative d'OpenAI o1.

Prends en main OpenAI o1#

OpenAI a introduit deux nouveaux modèles d'IA dans la série o1 : o1-preview et o1-mini. Le modèle o1-preview est conçu pour réfléchir plus profondément avant de répondre, excellant dans les tâches de raisonnement complexes en science, codage et mathématiques. Il offre des capacités de résolution de problèmes avancées pour les utilisateurs travaillant sur des projets exigeants. En revanche, o1-mini est un modèle plus petit, plus rapide et plus économique, optimisé spécifiquement pour le raisonnement STEM, en particulier les mathématiques et le codage. Bien qu'il puisse avoir une connaissance du monde moins large, o1-mini égale presque les performances d'o1-preview sur des évaluations clés comme le concours de mathématiques AIME et les défis de codage Codeforces, le tout pour un coût réduit de 80 %.

Fig 5. Comparaison des modèles OpenAI.

Tu peux essayer ces modèles via différentes plateformes OpenAI. Les utilisateurs de ChatGPT Plus et Team peuvent accéder à la fois à o1-preview et o1-mini via le sélecteur de modèles, expérimentant des capacités de raisonnement améliorées directement dans ChatGPT. Les développeurs ayant un accès API de niveau 5 peuvent commencer à prototyper avec ces modèles, bien que certaines fonctionnalités avancées soient encore en développement. OpenAI prévoit également de rendre o1-mini disponible pour tous les utilisateurs de ChatGPT Free bientôt. En explorant ces modèles, tu peux faire l'expérience directe des avancées dans le raisonnement par IA et choisir celui qui correspond le mieux à tes besoins.

Considérations sur l'IA éthique prises par OpenAI#

OpenAI a mis l'accent sur l'éthique et la sécurité lors du développement de la série de modèles o1. Avant de publier les modèles o1-preview et o1-mini, ils ont mené des évaluations approfondies, incluant des tests externes et des vérifications internes pour détecter des risques tels que le contenu non autorisé, les hallucinations et les biais. Les modèles sont conçus avec des capacités de raisonnement avancées pour mieux comprendre et suivre les règles de sécurité.

OpenAI a également mis en place des mesures de protection telles que des listes de blocage et des classificateurs de sécurité pour gérer les risques. Le modèle o1 présente un niveau de risque global moyen. Il présente de faibles risques dans des domaines tels que la cybersécurité et l'autonomie des modèles, et des risques moyens dans des domaines tels que le contenu CBRN (chimique, biologique, radiologique et nucléaire) et la persuasion. Le groupe de consultation sur la sécurité et le conseil d'administration d'OpenAI ont examiné ces mesures de sécurité afin de garantir que l'utilisation du modèle est sûre et éthique.

Fig 6. Fiche d'évaluation d'OpenAI o1.

Des rumeurs à la réalité : OpenAI o1 entre en scène#

OpenAI o1 est un grand pas en avant dans le raisonnement par IA, transformant certaines des premières rumeurs en réalité. Contrairement à GPT-4o, la série o1 réfléchit plus profondément en utilisant une approche de « Chaîne de pensée », décomposant les problèmes complexes en étapes plus petites pour de meilleures réponses. Actuellement disponible en avant-première dans ChatGPT et l'API, OpenAI prévoit d'ajouter des fonctionnalités comme la navigation sur le Web et le téléchargement de fichiers et d'images. OpenAI a également partagé qu'ils prévoient de continuer à développer et à publier des modèles dans la série GPT, parallèlement à la nouvelle série OpenAI o1. Alors que l'IA continue d'évoluer, des avancées comme celles-ci ouvrent la voie à des systèmes d'IA plus puissants, intuitifs et polyvalents, capables de mieux assister et comprendre les besoins humains.

Reste informé des dernières actualités en matière d'IA en rejoignant notre communauté ! Rends-toi sur notre dépôt GitHub pour découvrir comment nous innovons en matière de solutions d'IA dans des secteurs tels que la fabrication et la santé. 🚀