L'Observatoire de l'IA #07 - 30 août au 5 septembre 2024

Salut tout le monde ! 👋

Bienvenue dans cette septième édition de L'Observatoire de l'IA.

Les géants de l'IA sortent les gros bras 💪

Magic Dev dévoile une fenêtre contextuelle titanesque

Magic Dev frappe fort avec l'annonce d'une fenêtre de contexte de 100 millions de tokens pour ses agents de raisonnement et de programmation. Cette avancée colossale s'accompagne d'un partenariat pour construire deux nouveaux supercalculateurs sur Google Cloud.

xAI lance Colossus, le Goliath des clusters d'entraînement

Pas en reste, xAI d'Elon Musk a mis en service Colossus, annoncé comme le plus grand cluster d'entraînement au monde avec 100 000 GPU H100. Et ce n'est qu'un début : ils prévoient de doubler sa taille dans les mois à venir. Cette infrastructure colossale représente une percée dans la capacité de calcul disponible pour l'entraînement des modèles d'IA, ouvrant la voie à des possibilités d'innovation sans précédent.

OpenAI prépare son coup de maître avec GPT Next

OpenAI ne compte pas se laisser distancer. L'entreprise prévoit de lancer GPT Next plus tard cette année, avec une puissance de calcul environ 100 fois supérieure à celle de GPT-4. Cette augmentation exponentielle de capacité pourrait redéfinir les standards de l'industrie et ouvrir la voie à des applications d'IA encore inimaginables aujourd'hui.

La course (infinie) à l'innovation 🏎️

Cohere affûte ses modèles

Cohere a mis à jour ses modèles Command R et Command R+, améliorant leurs performances en matière de rappel, vitesse, mathématiques et raisonnement. Un sacré boost pour leurs assistants déjà très performants !

Cerebras révolutionne l'inférence

Cerebras annonce son nouveau service d'inférence IA, affirmant qu'il est le plus rapide au monde. Utilisant leur processeur Wafer Scale Engine de troisième génération, Cerebras offre des vitesses d'inférence jusqu'à 20 fois plus rapides que les solutions GPU, à un cinquième du prix. Le service peut traiter 1 800 tokens par seconde pour le modèle Llama3.1 8B. Cerebras résout le problème de bande passante mémoire en stockant l'ensemble du modèle sur une seule puce.

Cette innovation pourrait bien changer la donne dans le domaine de l'inférence IA.

Google riposte avec Gems et Imagen 3

Google n'est pas en reste et a déployé Gems et Imagen 3 pour les abonnés Gemini Advanced. Gems permet de créer des versions personnalisées de Gemini (l’équivalent des GPTs de ChatGPT mais en plus avancé).

La recherche IA atteint de nouveaux sommets 🏔️

Des modèles qui comprennent (presque) comme nous

Une étude fascinante de Sam Bowman, chercheur en sécurité de l'IA chez Anthropic, présente une liste d'objectifs pour développer une IA transformatrice (TAI) de manière sûre. Il divise ces objectifs en trois phases :

1. Préparation : Développer des modèles sûrs, des méthodes d'évaluation robustes, et des protocoles de sécurité avant l'arrivée de la TAI.

2. TAI : Gérer le déploiement initial de systèmes d'IA au niveau humain, en utilisant ces systèmes pour accélérer la recherche en sécurité.

3. Post-TAI : Gérer les systèmes d'IA surhumains, en s'assurant qu'ils restent sous contrôle humain.

Bowman souligne l'importance de la transparence, de la collaboration avec les gouvernements, et de la considération des questions éthiques comme le bien-être de l'IA.

L'IA qui prédit les tremblements de terre

Dans une avancée spectaculaire, des chercheurs de l'Université du Texas ont développé une IA capable de prédire 70% des tremblements de terre lors d'un essai en Chine. C'est un pas de géant pour la prévention des catastrophes naturelles !

Éthique et société : l'IA sous le microscope ⚖️

Google DeepMind face à un dilemme éthique

Comme déjà vu la semaine passée, près de 200 employés de Google DeepMind ont signé une lettre exhortant Google à mettre fin aux contrats militaires, arguant que cela viole les principes éthiques de l'entreprise en matière d'IA. Ce débat met en lumière les tensions croissantes entre innovation technologique et responsabilité éthique.

L'IA : fabrique de (faux) souvenirs

Une étude du MIT Media Lab a révélé que les chatbots génératifs augmentaient significativement la formation de faux souvenirs lors d'entretiens simulés avec des témoins de crimes. Cette découverte soulève des questions cruciales sur l'utilisation de l'IA dans des contextes sensibles comme le système judiciaire.

Le monde des affaires s'emballe 💼

OpenAI vise les étoiles

OpenAI se préparerait à une importante levée de fonds qui pourrait valoriser l'entreprise à plus de 100 milliards de dollars, avec de potentiels investissements d'Apple, Nvidia et Microsoft.

Sakana : le nouveau poids lourd japonais de l'IA

Sakana, un laboratoire d'IA japonais, a levé 100 millions de dollars en série A pour développer ses capacités de calcul et recruter plus de chercheurs.

L'Europe ne reste pas sur la touche

Malgré un contexte économique difficile pour les startups, les entreprises d'IA en Europe continuent de lever des fonds importants, avec plusieurs deals dépassant les 100 millions de dollars en 2024.

Les défis de demain 🔮

L'Initiative de Provenance des Données a lancé un avertissement : les modèles d'IA générative pourraient souffrir à mesure que les sites web restreignent l'accès des robots d'indexation, bloquant l'accès à des données de haute qualité. C'est un rappel que l'IA, aussi puissante soit-elle, dépend toujours de la qualité des données qui la nourrissent.

Pendant ce temps, l'Open Source Initiative (OSI) s'attelle à définir clairement ce qu'est "l'IA open source", dans une tentative de clarifier le paysage et d'établir des standards. C'est un pas important vers plus de transparence dans un domaine en constante évolution.

Pour conclure cette semaine riche en développements, le philosophe et scientifique Stephen Wolfram nous rappelle l'importance d'intégrer une réflexion philosophique profonde dans la recherche en IA. Alors que la technologie avance à pas de géant, il est crucial de ne pas perdre de vue les implications éthiques et sociétales de ces avancées.

REJOIGNEZ-NOUS ! 👇

Notre dernière vidéo YouTube 🪩

Notre communauté 🤝

Pour approfondir vos connaissances et participer à des discussions passionnantes sur l'IA, nous vous invitons à rejoindre notre groupe SKOOL "L'Atelier de l'IA". Vous y trouverez des ressources gratuites, des templates YouTube, et pourrez engager des échanges enrichissants avec d'autres passionnés d'IA.

Pour rester connecté et recevoir des mises à jour régulières sur le monde de l'IA, n'hésitez pas à me suivre sur LinkedIn, j’y poste régulièrement du contenu !