{"version":"1.0","type":"rich","provider_name":"Acast","provider_url":"https://acast.com","height":250,"width":700,"html":"<iframe src=\"https://embed.acast.com/$/6484c005e432cf001030c493/68f90bc053978989ad740027?\" frameBorder=\"0\" width=\"700\" height=\"250\"></iframe>","title":"#58 - Marina Vinyes - Elle a recodé ChatGPT","thumbnail_width":200,"thumbnail_height":200,"thumbnail_url":"https://open-images.acast.com/shows/6484c005e432cf001030c493/1761151416072-bd7ea9c8-5bd8-4ad1-a476-19581213ab00.jpeg?height=200","description":"<p>Elle a quitté un job de rêve pour coder son propre LLM. </p><p>Parce que même les meilleurs ingénieurs IA sont en train d’être dépassés. </p><p> </p><p>Et pour cause. </p><p>Aucun domaine n’avance plus vite que l’IA générative. </p><p> </p><p>Chaque semaine, un nouveau modèle. </p><p> </p><p>Un qui code. </p><p>Un qui traduit vos vidéos. </p><p>Un qui les génère… </p><p> </p><p>Et un… </p><p>Qui s’appelle ”Banana” 🍌 </p><p> </p><p>Pendant que les utilisateurs ne savent plus où donner de la tête, les scientifiques eux se noient dans les publications… </p><p>Et les ingénieurs dans le code 😅 </p><p> </p><p>Personne n’arrive à suivre le rythme. </p><p>Absolument personne. </p><p> </p><p>Marina peut vous le confirmer. </p><p><br></p><p>Après une thèse en IA, elle va passer 7 ans à faire du Machine Learning chez Criteo.</p><p>Et chez Criteo, l’IA, c’est pas pour faire joli.</p><p>C’est même une des pierres angulaires du produit</p><p><br></p><p>Alors dès que les IA génératives pointent le bout de leur nez, Marina est déjà sur le coup.</p><p><br></p><p>Au coeur de l’innovation.</p><p>Au top du domaine.</p><p><br></p><p>Et pourtant, même pour elle, le malaise est palpable.</p><p><br></p><p>L’impression que tout va trop vite.</p><p>Qu’elle n’a plus le temps de maitriser.</p><p>Et que son propre domaine est en train de la dépasser.</p><p><br></p><p>Alors elle prend une décision drastique :</p><p>Tout plaquer.</p><p><br></p><p>Mais pas pour faire le tour du monde.</p><p>Non.</p><p><br></p><p>Pour créer elle-même, son propre LLM.</p><p>Le coder.</p><p>Et l’entrainer, grâce aux 2 GPUs qu’elle vient d’acheter.</p><p><br></p><p>Son objectif n’est pas d’aller concurrencer OpenAI ou Anthropic. ❌</p><p>Mais juste, de continuer à maitriser ses outils.</p><p>Plutôt que d’en devenir dépendant.</p><p><br></p><p>Je suis parti à la rencontre de Marina Vinyes pour qu’elle me raconte tout ce qu’elle a tiré de cette expérience passionnante...</p><p><br></p><p>Grâce à laquelle elle a pu contribuer au Project Numina,</p><p>Une IA open-source qui après avoir remporté une olympiade de Maths,</p><p>s’est mise en tête de rivaliser avec les modèles des GAFAM 🚀</p><p><br></p><p>Un nouvel épisode qui risque (encore) de vous apprendre 2-3 trucs.</p><p>(si c’est pas le cas, dites le moi en commentaire, je vous rembourse 😅)</p><p><br></p><p>Bonne écoute 🎧</p><p><br></p><p>PS : dites-moi ce que vous pensez de l'épisode en commentaire (et surtout, abonnez-vous !)</p><p><br></p><p><br></p><p>Notes de l'épisode :</p><ul><li>le site de Andrej Karpathy : https://karpathy.ai/</li><li>nanoGPT, l'implémentation simple d'un LLM : https://github.com/karpathy/nanoGPT</li><li>le Hugging face du projet Numina : <a href=\"https://huggingface.co/AI-MO\" rel=\"noopener noreferrer\" target=\"_blank\">https://huggingface.co/AI-MO</a></li><li>le site Unsloth AI : <a href=\"https://unsloth.ai/\" rel=\"noopener noreferrer\" target=\"_blank\">https://unsloth.ai/</a></li></ul><p><br></p><p>---------------------------------</p><p><br></p><p>Retrouvez Marine sur :</p><ul><li>Linkedin : <a href=\"https://www.linkedin.com/in/marina-vinyes-ph-d-02257998/?originalSubdomain=fr\" rel=\"noopener noreferrer\" target=\"_blank\">https://www.linkedin.com/in/marina-vinyes-ph-d-02257998</a></li><li>son site : <a href=\"https://vinyesm.github.io/\" rel=\"noopener noreferrer\" target=\"_blank\">https://vinyesm.github.io/</a></li></ul><p>Et voici le repo GH avec le code de son LLM : <a href=\"https://github.com/vinyesm/nanoGPT-for-image\" rel=\"noopener noreferrer\" target=\"_blank\">https://github.com/vinyesm/nanoGPT-for-image</a></p><p><br></p><p><br></p><p>--------------------------------</p><p><br></p><p>Je suis Mathieu Sanchez, et vous pouvez me suivre ici : https://www.linkedin.com/in/matsanchez/</p><p><br></p><p>Vous pouvez aussi suivre Tronche de Tech, sur vos réseaux favoris :</p><p>- Linkedin : https://www.linkedin.com/company/tronche-de-tech/</p><p>- Instagram : https://www.instagram.com/tronchedetech/</p>","author_name":"Mathieu Sanchez"}