DIY : un AI Tamagotchi à 50 $ avec le kit Muse de Meta

Meta a présenté le Muse Charm, un petit dispositif portable qui donne une apparence « tamagotchi » à son assistant IAIntelligence artificielleEnsemble de techniques permettant à des machines d'accomplir des tâches nécessitant habituellement certaines capacités humaines, comme la reconnaissance, la prédiction ou la prise de décision.. L’idée de pouvoir porter son IA comme une montre‑poche a séduit l’auteur, qui a préféré bricoler son propre gadget à 50 $ plutôt que d’attendre la commercialisation officielle.

Le composant de base est le Waveshare ESP32‑S3 1.75 C, un ordinateur à carte unique de 1,75 pouce, vendu en dropshipping depuis la Chine. Après avoir reçu le boîtier argenté, il l’a branché sur son PC, installé les clés d’accès fournies par Meta et l’a associé à l’application mobile Muse. La configuration initiale était simple, mais l’appareil affichait les réponses de Muse en texte limité à quelques mots, sans audio.

Pour pallier ces lacunes, l’auteur a sollicité Claude, l’assistant conversationnel d’Anthropic, afin de réécrire le firmware. En quelques minutes, Claude a ajouté :

• une page d’historique des conversations, consultable en glissant vers la droite ;
• une voix britannique provenant d’ElevenLabs, qui lit les réponses de Muse à haute voix ;
• un aperçu vidéo basse résolution transmis par Bluetooth, permettant de visualiser l’image de la caméra du téléphone sans passer par le Wi‑Fi domestique.

Ces améliorations ont transformé le petit pendentif en un véritable appareil multifonctions : il sert de montre, de télécommande d’appareil photo et, grâce à un mini‑jeu intégré, d’animal de compagnie numérique. Le jeu propose plusieurs niveaux de faim, d’ennui et de saleté ; les « friandises » sales augmentent le besoin de nettoyage, et l’activité excessive fatigue le pet virtuel.

Le principal défi technique était la latenceLatenceDélai entre l'envoi d'une requête à un système et l'obtention d'une réponse ou du début de celle-ci. du serveur Muse. Même après les optimisations, les réponses peuvent être rapides ou mettre plusieurs secondes à arriver, selon la charge des serveurs de Meta. Le dispositif ne possède pas de caméra ni de connexion 5G intégrée ; il s’appuie sur le téléphone pour ces fonctions, ce qui limite son autonomie mais simplifie le matériel.

L’expérience a mis en lumière deux points clés pour les amateurs de gadgets IA :

1. Programmabilité – Le kit Waveshare, combiné à un modèle de langage comme Claude, permet d’ajouter ou de modifier des fonctions sans toucher au code source original de Meta. Cela ouvre la porte à des usages très personnalisés, du contrôle domotique à la création de jeux simples.
2. Sécurité – L’auteur a isolé le dispositif sur le réseau invité de la maison, après avoir appris qu’un testeur avait vu son adresse domicile fuite via Muse. La prudence reste de mise quand on expose un assistant IA à son réseau domestique.

En pratique, le dispositif ne remplace pas le smartphone : il ne propose pas plus de fonctionnalités que l’application Muse elle‑même, sauf lorsqu’il est enrichi de code supplémentaire. Pour les développeurs ou les bricoleurs, le « Muse Gadget » offre néanmoins une plateforme d’expérimentation peu coûteuse. Pour un utilisateur lambda, l’intérêt réside surtout dans le côté ludique du petit compagnon virtuel.

La question qui reste ouverte est celle de la version officielle du Muse Charm. Sera‑t‑elle aussi ouverte à la reprogrammation que le kit DIY ? Si Meta décide de verrouiller le firmware, les passionnés devront se tourner vers des solutions de type développement, comme le Waveshare. En attendant, le projet montre que l’on peut déjà, avec un peu d’aide d’une IA conversationnelle, transformerTransformerArchitecture de réseau neuronal reposant notamment sur des mécanismes d'attention pour traiter des séquences de données. un simple pendentif en un assistant IA personnalisable.

Le futur des assistants portables pourrait donc passer par des appareils ouverts, où chaque utilisateur peut choisir les fonctions qui lui sont utiles, plutôt que par un produit fermé vendu à prix premium.