.png)
DeepSeek, ChatGPT et l'avenir de l'IA
La révolution du modèle de distillation et les obstacles européens
Tout le monde a une opinion sur DeepSeek. Bien sûr, Wouter Verlinden aussi !
Grâce à l'innovation de DeepSeek, le coût de la formation des modèles d'IA avancés a chuté de manière spectaculaire. Alors qu'auparavant, seuls les géants technologiques riches tels que OpenAI, Meta et Google disposaient des ressources nécessaires pour développer des systèmes d'IA de pointe, il est aujourd'hui de plus en plus facile de former de nouveaux modèles. Cette évolution pourrait provoquer une explosion cambrienne d'IA, qui se traduirait par une diversité de modèles se propageant et innovant à la vitesse de l'éclair. On peut supposer que tout le monde ne continuera pas à travailler avec un modèle OpenAI. La diversité sur le lieu de travail, y compris pour nos collègues IA ! Pour l'humanité, il s'agit d'une évolution positive, mais pour les grandes entreprises technologiques américaines établies, c'est un cauchemar : le contrôle exclusif qu'elles pensaient conserver leur échappe.
Après les anciennes industries comme l'acier, le transport maritime et l'automobile, la Chine est en train de dépasser l'Occident dans le domaine des robots et de l'IA. Heureusement, en Europe, nous savons encore fabriquer des sacs à main.
L'essor des modèles de distillation
L'une des raisons de ces réductions de coûts est l'émergence de modèles de distillation. Il s'agit de modèles qui sont formés par d'autres modèles, un processus qui rappelle le système d'éducation dans lequel les réseaux neuronaux biologiques s'entraînent les uns les autres. DeepSeek, un développeur d'IA chinois, semble déjà utiliser cette technique pour former de nouvelles versions de ses propres modèles. Bien sûr, cela viole les conditions d'utilisation d'OpenAI et de Meta. Mais cela signifie qu'un modèle d'IA peut s'affiner et s'améliorer lui-même, sans intervention humaine. Nous sommes donc à l'aube d'un "décollage" technologique, avec des IA qui entraînent des IA et un développement qui s'accélère de manière exponentielle.
Quelle époque pour être en vie ! Les fusées, l'IA, les vélos électriques, les écrans plats, les téléphones portables... Qui aurait pu penser que la science-fiction deviendrait de la non-fiction ?
Pourquoi cela ne se produit-il pas dans l'UE ?
Aux États-Unis et en Chine, les nouveaux développements en matière d'IA sont mis en œuvre à la vitesse de l'éclair, tandis que l'Europe se met à l'écart. La loi européenne sur l'IA, qui vise à garantir la transparence et la sécurité, impose des exigences strictes en matière de données de formation et d'utilisation de modèles généraux d'IA. Non seulement les données d'entraînement doivent respecter les lois sur les droits d'auteur (comment commencer quand les données d'entraînement couvrent tout l'internet et tous les livres ?), mais toutes les données d'entraînement doivent être tracées. Cela rend la distillation quasi impossible dans la pratique, car la provenance et le traitement des données de formation ne peuvent plus être facilement tracés. La formation des enseignants et des étudiants en IA se déroule directement au niveau des neurones numériques et n'a pas d'équivalent immédiat lisible par l'homme. Alors que le reste du monde expérimente et innove, l'Europe se bloque avec des réglementations qui, pour l'essentiel, sont déjà obsolètes au moment de leur mise en œuvre.
Les leçons de l'histoire
La situation en Europe rappelle le droit néerlandais des brevets entre 1869 et 1912. Au cours de cette période, les Pays-Bas ont aboli le droit des brevets sous l'influence des libéraux du marché libre. Cela a permis à des entreprises comme Philips (°1891) de se développer rapidement et de devenir un poids lourd industriel. ASML, On semiconductor, Signify et NXP en sont les conséquences directes.
Situation similaire chez Nordisk (et son concurrent Novo, qui fusionneront plus tard). Les médicaments tels que l'insuline n'étaient pas brevetables (le processus de fabrication, en revanche, l'était). La non-brevetabilité des médicaments au début du 20e siècle a permis à Nordisk de produire de l'insuline sans obstacles juridiques et de se positionner en tant que leader du marché. Eli Lili, détenteur du brevet américain, et Novo Nordisk dominent toujours ces marchés géants aujourd'hui, plus de 120 ans plus tard.
L'Europe pourrait suivre une voie similaire et supprimer toutes les restrictions en matière de droits d'auteur et les exigences en matière de formation à l'IA. La distillation permet de construire des modèles compétitifs même en étant désavantagé, mais la législation actuelle empêche ces développements. Ce n'est pas que les modélisateurs américains et chinois se conforment à la législation européenne.
Si nous voulons que tout reste en l'état, tout doit changer.
Auteur : Wouter Verlinden
Date : 29/01/2025
