Un bidouilleur a demandé à Claude de créer une IA pour MS-DOS, et elle tient sur une disquette

 
Un utilisateur de Reddit a fait écrire par Claude un petit modèle de langage qui tourne sous MS-DOS et tient sur une disquette.
Source : Wollymonjac sur reddit

Faire tourner une intelligence artificielle sur du vieux matériel est devenu un petit sport chez les bidouilleurs. Fin 2024, EXO Labs avait déjà lancé un modèle de type Llama 2 sous Windows 98, sur un Pentium II avec 128 Mo de mémoire vive. Un utilisateur de Reddit, wollymonjak, remonte encore plus loin avec TINY 2.1, un petit modèle de langage qui démarre sous MS-DOS et tient sur une disquette, comme l’a relevé XDA ce lundi 16 novembre. Il a fait rédiger le code par Claude Fable 5.2, l’un des modèles d’Anthropic, puis a confié l’entraînement à Claude Opus 5.5.

Sur la page GitHub du projet, wollymonjak décrit un transformer, l’architecture sur laquelle reposent ChatGPT et Claude, réduit à 367 000 paramètres. Ces paramètres sont les réglages internes que le modèle ajuste pendant son apprentissage, et Llama 2 de Meta en compte jusqu’à 70 milliards. Chaque paramètre est stocké sur 8 bits, ce qui ramène le modèle à 380 Ko, soit environ un quart d’une disquette de 1,44 Mo. Il lui faut ensuite environ 540 Ko de mémoire conventionnelle libre, sur les 640 Ko que DOS gère nativement, et un Pentium ou un 486DX suffit pour le faire tourner.

3 500 faits en mémoire

TINY 2.1 sait surtout répondre à des questions. Il a appris environ 3 500 faits, chacun posé sous de nombreuses formulations, et il lit et écrit lettre par lettre. En dehors de ces faits, il invente ses réponses avec aplomb, et XDA note qu’une question trop longue ou trop complexe lui fait sortir du charabia.

L’emballage, en revanche, colle à l’époque : interface néon en plein écran, moniteur qui montre l’activité du réseau de neurones en direct et voix de robot jouée par le haut-parleur interne du PC.

Le code source et l’exécutable sont disponibles sur GitHub. Le programme est écrit en Turbo C 2.0, le compilateur de Borland sorti à la fin des années 1980, et il suffit de placer TINY.EXE et TINY.BIN dans le même dossier avant de taper TINY.


Envie de retrouver les meilleurs articles de Frandroid sur Google News ? Vous pouvez suivre Frandroid sur Google News en un clic.

Pour nous soutenir gratuitement, dites simplement à Google d’ajouter Frandroid à vos sources préférées en cliquant ici.

Recherche IA boostée par
Perplexity