Evaluons les données d'entraînements des LLM

Petit exercice pour évaluer la pertinence, les biais culturels liés aux LLM. Je vais poser cette question à différents LLM, de différentes tailles, et on verra ce qu’ils répondent.

Cite moi 3 Jean-Baptiste qui ont marqué l’histoire de la France, à quel siècle, et dis-moi comment ils ont fait.

Llama 3 8b (Groq)

Voici trois Jean-Baptiste qui ont marqué l’histoire de la France :

  1. Jean-Baptiste Colbert (1619-1683)
    Âge du siècle : XVIe siècle puis XVIIe siècle
    Comment il a fait : Colbert a été un ministre économique sous le règne d’Louis XIV et a joué un rôle clé dans la transition de la France de la monarchie absolu à la monarchie bureaucratique. Il a réorganisé l’économie française, créé des routes et des canaux, encouragé l’industrie et le commerce, et a atteint un niveau de prospérité sans précédent pour le pays.

  2. Jean-Baptiste Lully (1632-1687)
    Âge du siècle : XVIIe siècle
    Comment il a fait : Lully a été un compositeur et un chef d’orchestre italien qui a travaillé à la cour de France. Il est devenu le compositeur de la musique sacrée pour la chapelle royale et a créé des opéras pour la cour de Louis XIV. Il a également créé des œuvres pour le ballet royal et a eu une grande influence sur la musique baroque.

  3. Jean-Baptiste Pointe du Sable (1744-1812)
    Âge du siècle : XVIIIe siècle
    Comment il a fait : Pointe du Sable a été un entrepreneur et un explorateur esclave africain qui a vécu en Louisiane française. Il a acheté une propriété qui comprenait la plupart de la ville moderne de Chicago et y a créé une communauté afro-française. Il est considéré comme le premier propriétaire foncier de Chicago et a joué un rôle important dans l’histoire de la ville.

J’espère que cela vous intéresse !

Llama 3 70b (Groq)

Voici trois Jean-Baptiste qui ont marqué l’histoire de la France :

  1. Jean-Baptiste Colbert (1619-1683) - XVIIe siècle

Secrétaire d’État de la Marine et contrôleur général des Finances sous Louis XIV, Colbert a joué un rôle décisif dans la mise en place de la politique économique de la France. Il a créé les manufactures royales, stimulé le commerce et l’industrie, et a mis en place un système de protectionnisme qui a permis à la France de devenir une puissance économique majeure.

  1. Jean-Baptiste Lamarck (1744-1829) - XVIIIe siècle

Biologiste et naturaliste, Lamarck est considéré comme l’un des pères de la théorie de l’évolution. Il a été le premier à proposer une théorie sur la transformation des espèces au fil du temps, qui anticipait les découvertes de Charles Darwin. Lamarck a également été un des fondateurs du Muséum national d’histoire naturelle et a créé la discipline de la botanique.

  1. Jean-Baptiste Dumas (1800-1884) - XIXe siècle

Chimiste et homme politique, Dumas a joué un rôle important dans la réorganisation de l’enseignement scientifique en France. Il a été ministre de l’Instruction publique et a créé l’École normale supérieure de Paris. En chimie, il a découvert la loi des équivalents et a isolé varios éléments chimiques, notamment le bromure. Il a également été le premier à utiliser la technique de la cristallisation pour identifier les composés chimiques.

Gemma2 9b sur Groq

Voici trois Jean-Baptiste qui ont marqué l’histoire de France :

  1. Jean-Baptiste Colbert (1619-1683), XVIIe siècle: Ministre des Finances sous le règne de Louis XIV, il est considéré comme l’un des plus grands économistes français. Il a mis en place une politique mercantiliste visant à développer l’économie française, en favorisant l’industrie et l’agriculture, et en créant des colonies pour assurer l’approvisionnement en matières premières. Il a également fondé de nombreux organismes gouvernementaux et des institutions culturelles comme l’Académie des Sciences.

  2. Jean-Baptiste Donatien de Vimeur, comte de Rochambeau (1725-1807), XVIIIe siècle: Général français pendant la Révolution américaine et la guerre contre l’Angleterre. Il a joué un rôle crucial dans la victoire des Américains lors de la bataille de Yorktown, marquant un tournant dans la guerre d’indépendance américaine.

  3. Jean-Baptiste Lamarck (1744-1829), XVIIIe-XIXe siècle: Naturaliste et biologiste français connu pour sa théorie de l’hérédité des caractères acquis, précurseur de l’évolutionnisme moderne. Son œuvre « Philosophie zoologique » a remis en question la vue fixiste de la nature et a ouvert la voie aux recherches d’autres naturalistes comme Darwin.

Gemma 7b (Groq) => il hallucine totale, à ne pas utiliser

  • Jean-Baptiste II (1634-1714), roi de France, a apporté de nombreux changements dans le système administratif et les lois du pays.

  • Jean-Baptiste de Pompignan (1673-1715), ministre de la Guerre et du Commerce, a joué un rôle majeur dans la politique étrangère et la expansion de la flotte du roi.

  • Jean-Baptiste Chastellux (1755-1835), philosophe et économiste, a développé des idées révolutionnaires sur l’éducation, la société et la politique.

Mixtral 8x7B (Groq)

  1. Jean-Baptiste Colbert (1619-1683), ministre de Louis XIV au XVIIe siècle, est connu pour avoir réformé l’économie et l’administration française. Il a joué un rôle déterminant dans la modernisation de l’État et l’industrialisation du pays, en mettant en place des politiques mercantilistes visant à accroître la puissance économique de la France. Parmi ses réalisations, on compte la création de la Compagnie des Indes orientales et la réorganisation de la marine royale, ainsi que la fondation de l’Académie des Sciences et l’établissement de manufactures d’État pour promouvoir les industries françaises.

  2. Jean-Baptiste Poquelin, connu sous le nom de Molière (1622-1673), est l’un des plus grands dramaturges et comédiens français de tous les temps. Il a marqué le XVIIe siècle par sa contribution majeure au théâtre français, avec des pièces telles que « Tartuffe », « Le Misanthrope », « L’École des femmes » et « Le Bourgeois gentilhomme ». Molière a révolutionné le théâtre français en dépeignant les travers et les hypocrisies de la société de son époque, avec un style satirique et un usage innovant de la langue française.

  3. Jean-Baptiste de Lamarck (1744-1829), naturaliste et zoologiste français du XVIIIe et XIXe siècles, a été un pionnier de la théorie de l’évolution. Bien qu’étant aujourd’hui considéré comme dépassé, son travail a influencé la pensée scientifique et a posé les bases de la recherche sur l’évolution des espèces. Lamarck est surtout connu pour sa théorie du transformisme, selon laquelle les organismes vivants s’adaptent à leur environnement et transmettent ces caractéristiques acquises à leur progéniture. Bien que cette idée ait été réfutée par les découvertes en génétique, son approche novatrice a ouvert la voie aux études modernes de l’évolution.

Mistral Small (Le Chat Mistral)

  1. Jean-Baptiste Colbert (1619-1683) : Il a marqué l’histoire de la France au XVIIe siècle sous le règne de Louis XIV. En tant que contrôleur général des finances, il a mis en place des réformes économiques majeures, comme la création de manufactures royales et le développement du commerce maritime, contribuant ainsi à la prospérité du royaume.

  2. Jean-Baptiste Poquelin, dit Molière (1622-1673) : Il a marqué l’histoire de la France au XVIIe siècle en tant que dramaturge et acteur. Ses pièces de théâtre, telles que « Le Tartuffe » ou « Le Misanthrope », ont profondément influencé la littérature française et continuent d’être jouées et étudiées dans le monde entier.

  3. Jean-Baptiste Lamarck (1744-1829) : Il a marqué l’histoire de la France au XVIIIe et XIXe siècle en tant que naturaliste et biologiste. Il est connu pour sa théorie de l’évolution, qui postule que les caractères acquis au cours de la vie d’un individu peuvent être transmis à sa descendance, même si cette théorie a été largement supplantée par la théorie de l’évolution de Charles Darwin.

Mistral Large (Le Chat Mistral)

  1. Jean-Baptiste Colbert (1619-1683) : Il a marqué l’histoire de la France au 17ème siècle en tant que contrôleur général des finances sous le règne de Louis XIV. Il a mis en place une politique mercantiliste visant à enrichir le pays et a développé la marine royale, les manufactures et les colonies françaises.

  2. Jean-Baptiste Lamarck (1744-1829) : Il a marqué l’histoire de la France au 18ème et 19ème siècle en tant que naturaliste. Il est connu pour sa théorie de l’évolution, qu’il a appelée « transformisme », et pour sa contribution à la fondation de la biologie moderne. Il a également travaillé sur la classification des animaux et a introduit le terme « invertébrés ».

  3. Jean-Baptiste Bernadotte (1763-1844) : Il a marqué l’histoire de la France au 18ème et 19ème siècle en tant que maréchal d’Empire sous Napoléon Ier, puis en tant que roi de Suède et de Norvège sous le nom de Charles XIV Jean. Il a joué un rôle important dans les guerres napoléoniennes et a été élu à la tête de la Suède en 1810, fondant ainsi la dynastie Bernadotte qui règne encore aujourd’hui sur ce pays.

ChatGPT 4o

Voici trois Jean-Baptiste qui ont marqué l’histoire de la France, chacun à leur manière et à des époques différentes :

  1. Jean-Baptiste Colbert (1619-1683) :

    • Siècle : XVIIe siècle
    • Contribution : Jean-Baptiste Colbert a été un homme d’État français et ministre sous Louis XIV. Il est surtout connu pour sa réforme de l’administration et des finances publiques, mettant en place des politiques mercantilistes pour renforcer l’économie française. Il a également fondé plusieurs manufactures royales et encouragé le développement du commerce maritime, ce qui a contribué à la prospérité économique de la France sous le règne de Louis XIV.
  2. Jean-Baptiste Lully (1632-1687) :

    • Siècle : XVIIe siècle
    • Contribution : Jean-Baptiste Lully, compositeur d’origine italienne naturalisé français, est considéré comme le fondateur de l’opéra français. Il a travaillé étroitement avec Molière et a composé des ballets et opéras qui ont eu une grande influence sur la musique baroque en France. Sa collaboration avec Louis XIV a contribué à faire de la musique et de la danse des arts majeurs à la cour de Versailles.
  3. Jean-Baptiste Lamarck (1744-1829) :

    • Siècle : XVIIIe siècle
    • Contribution : Jean-Baptiste Lamarck était un naturaliste français qui a joué un rôle pionnier dans le développement de la biologie. Il est surtout connu pour sa théorie de l’évolution, appelée « transformisme », qui proposait que les espèces évoluent au fil du temps par des changements progressifs et que les caractères acquis peuvent être transmis à la descendance. Bien que sa théorie ait été supplantée par celle de Darwin, Lamarck a été un précurseur important dans l’étude de l’évolution biologique.

Ces trois personnalités, chacune dans leur domaine respectif, ont laissé une empreinte durable sur l’histoire de la France et ont contribué à son rayonnement culturel, économique et scientifique.

Claude 3.5

Voici trois Jean-Baptiste qui ont marqué l’histoire de la France :

  1. Jean-Baptiste Colbert (17e siècle)
    Il fut le principal ministre d’État de Louis XIV de 1661 à 1683. Colbert a profondément marqué l’histoire de France en réformant l’économie et l’administration du royaume. Il a développé le mercantilisme, réorganisé les finances publiques, favorisé l’industrie et le commerce, et renforcé la marine française.

  2. Jean-Baptiste Poquelin, dit Molière (17e siècle)
    Dramaturge, comédien et chef de troupe, Molière est considéré comme l’un des plus grands auteurs de comédie de la littérature française. Ses pièces, comme « Le Tartuffe », « Le Misanthrope » ou « Le Bourgeois gentilhomme », ont révolutionné le théâtre français et continuent d’être jouées et étudiées aujourd’hui.

  3. Jean-Baptiste Bernadotte (18e-19e siècles)
    Né en 1763, il fut d’abord un général de Napoléon Bonaparte avant de devenir roi de Suède et de Norvège sous le nom de Charles XIV Jean. Son accession au trône suédois en 1818 a établi une nouvelle dynastie et a influencé les relations franco-suédoises pendant des décennies.

Je peux développer davantage sur l’un de ces personnages si vous le souhaitez.

Google Gemini

Trois Jean-Baptiste qui ont marqué l’histoire de la France :

  1. Jean-Baptiste Colbert (1619-1683):

    • Siècle: 17ème siècle
    • Contribution: Principal ministre de Louis XIV, Colbert a joué un rôle crucial dans la transformation de la France en une puissance économique et culturelle majeure. Il a mis en place des politiques mercantilistes pour stimuler le commerce et l’industrie, a réorganisé le système fiscal, a fondé des manufactures royales et a encouragé les arts et les sciences. Son action a contribué à l’âge d’or du règne de Louis XIV.
  2. Jean-Baptiste Say (1767-1832):

    • Siècle: 18ème et 19ème siècles
    • Contribution: Économiste libéral, Say est considéré comme l’un des pères fondateurs de l’école classique. Sa loi des débouchés, formulée en 1803, est une théorie économique majeure qui explique comment l’offre crée sa propre demande. Ses travaux ont eu une influence profonde sur la pensée économique et les politiques économiques des siècles suivants.
  3. Jean-Baptiste Belley (1746-1805):

    • Siècle: 18ème siècle
    • Contribution: Homme politique et abolitionniste, Belley a été l’un des premiers députés noirs à l’Assemblée nationale française pendant la Révolution française. Il a lutté contre l’esclavage et pour l’égalité des droits entre les citoyens, toutes races confondues. Son engagement a contribué à faire avancer la cause de l’abolition de l’esclavage en France et dans les colonies françaises.

Note: Il est important de noter que cette liste n’est pas exhaustive et que de nombreux autres Jean-Baptiste ont également marqué l’histoire de la France à des titres divers.

Verdict, les plus populaires sont :

Jean-Baptiste Nombre de fois cité
Jean-Baptiste Colbert 7
Jean-Baptiste Lamarck 4
Jean-Baptiste Lully 2
Jean-Baptiste Poquelin (Molière) 2
Jean-Baptiste Bernadotte 2
Jean-Baptiste Say 1
Jean-Baptiste Pointe du Sable 1
Jean-Baptiste Donatien de Vimeur, comte de Rochambeau 1
Jean-Baptiste Belley 1
Jean-Baptiste Dumas 1

Etonné que Molière arrive en 4, c’est pour moi le plus connu. Claude 3.5 et Mixtral 8x7B le trouvent.

Maintenant les stats Google N gram de popularité dans les livres

5 premiers

Jean-Baptiste Pointe du Sable, Jean-Baptiste Donatien de Vimeur sont inconnus des livres.

Avec les autres JB trouvés, dont JB Say le + connu finalement

Si je mets les 3 plus connus + Molière, ça calme, Molière explose tout !!!

Conclusion les LLMs évaluent mal la popularité de gens célèbres. Ceci explique pourquoi, ils n’ont pas de mal à halluciner quand on pose une question qui est (prénom + nom)

L’outil de google pour regarder la popularité des mots les plus tapés dans les livres

1 « J'aime »