Ich habe ein AI-Tamagotchi entwickelt, bevor Meta das konnte

Mark Zuckerbergs Meta hat die KI so niedlich gemacht indem sie ein kleines, formbares Gesicht bekommt – und dieses Weihnachtszeit möchte er Ihnen ein Muse Charm verkaufen, damit Sie Ihren fröhlichen KI-Helfer wie einen Tamagotchi mit sich tragen können.

Aber ich werde keine kaufen, weil wir haben Muse Charm zu Hause. Sie kosteten nur 50 Dollar, und ich habe entschieden, dass die Lernerfahrung sich gelohnt hat.

Meine Version hat keine Sportkameras oder einen 5G-Mobilfunkradio, aber sie spricht wirklich mit Muse und hat auch niedliche Avatare! Sie dient gleichzeitig als Taschenuhr und als Bildschirm für die Fernbedienung einer Kamera, und (theoretisch) kann sie meinen Smart-Home steuern.

Oder zumindest kann es das, wenn man viel zusätzlichen Vibe-Code einfügt.

Vor einigen Wochen zahlte ich 50 US-Dollar für einen 1,75-Zoll-Touchscreen-Computer-Anhänger, der aus China versandt wurde – genauer gesagt den Waveshare ESP32-S3 1,75C. Das Push-to-Talk-AI-Devkit sieht nicht nur sehr wie das Muse Charm aus, sondern wird auch offiziell von Meta genehmigt. Es ist eines der ersten Produkte, die das Unternehmen anbietet, wenn man ein „Muse Gadget“ bauen möchte – ein Gerät, das mit Meta’s Open-Source-Code und Tokens direkt mit ihrem Muse AI-Cloud verbunden wird.

Als das silberne Taschenuhr ankam, fühlte es sich ziemlich nutzlos an, damit anzufangen. Die Einrichtung war ganz einfach – ich steckte es einfach in meinen PC und zeigte Claude auf Meta’s GitHub, dann pairingte ich es mit der Muse-Telefon-App. Aber selbst nachdem ich Meta’s Schlüssel auf das Gerät gelegt hatte, dachte Muse ursprünglich, ich würde Audio-Clips für die Transkription senden, anstatt Befehle. Nachdem ich das geklärt hatte, waren Muses Antworten immer noch langsam, und es antwortete mir nicht laut. Es war schwierig zu erkennen, was es sagte, da es nur wenige Wörter auf dem Bildschirm zeigte, und es gab keinen Ort, um die vollen Nachrichten zu lesen, außer wenn ich mein eigenes Telefon mit seiner eigenen Muse-App hervorholte.

Die Meta-Version des Builds enthielt auch nur ein einzelnes Jolly-Avatar, das meist nur da saß und hübsch aussah, und es erkannte nicht automatisch Smart-Home-Gadgets wie Amazon Echo oder Google Home-Geräte. (Dieses Gadget hat nach meinem ersten Installieren wirklich nichts Nützliches getan.) Und obwohl die Meta-AI-Softwareingenieure Anant Narayanan und Jeremy Payne ein schönes Beispiel-App bereitstellen, das zeigt, wie Muse Gadgets Video aus der Kamera des Handys streamen können, machte die Abwesenheit eines Fernauslöseknopfs es nicht so nützlich für Fotos zu machen.

Aber ein paar Sitzungen von Claude Code füllten fast alle Lücken aus. Alles, was ich tun musste, war, das Waveshare wieder in meinen PC einzuschließen und anschließend Claude bitten, jedes Ding neu zu programmieren, das ich wollte.

Als ich Claude darüber beschwerte, dass ich Muses Antworten auf meine Fragen nicht richtig lesen oder hören konnte, Probleme, die andere haben haben genannt auchClaude hat eine Konversationen- Historie-Seite erstellt, damit ich mit der rechten Seitengesteuerung lesen kann, was dort steht. Ich habe eine britische AI-Stimme von ElevenLabs eingesetzt, die ihre Antworten laut ausspricht. (Die Stimme war die wenigste, die den Geist quälte – meine Frau und ich sind uns einig, auch wenn sie überhaupt nicht dem liebevollen Vibe der Muse-Avatarn entspricht.)

Dank Claude kann ich jetzt einen Knopf drücken, um mein Handy eine Bildaufnahme von jenseits des Raumes mit einer hochwertigen Live-Vorschau zu machen, und die Vorderkamera meines Handys zeigt nicht mehr umgekehrt aus. Claude hat auch die mangelhafte Kameravorschau über Bluetooth sehr schnell hinzugefügt, sodass ich nicht mehr das Home-Wi-Fi benötige, um Fotos aus kreativen Winkeln zu erhalten.

Ich bat Claude, eine ganze Charge verschiedener Avatare zu erstellen, wie diejenigen, die Meta während des Meta Connect präsentierte, und ein Tamagotchi-artiges Minispiel hinzuzufügen, in dem die Avatare Nahrung, Spiel, Schlaf und Baden benötigen. Als das Spiel zu einfach schien, um Aufmerksamkeit zu erregen, bat ich ihn, vier verschiedene Level für Hunger, Langeweile und Schmutz hinzuzufügen. Ich beschloss, dass Leckereien zu einem chaotischen Durcheinander werden sollten und die Avatare dadurch schmutziger werden, wenn sie sie essen, und dass zu viel Spiel ein Tier erschöpfen sollte. Mein Wunsch war Clodes Befehl.

Als ich bemerkte, dass ich versehentlich zu früh auf die Push-to-Talk-Taste losließ und Muse fast leer gewordenes Audio erleben musste, korrigierte das Vibe-Coding innerhalb weniger Minuten, indem es nur Audio über eine Sekunde lang sendete. Die einzige offensichtliche Verzögerung, die ich jetzt sehe, kommt von den eigenen Servern von Meta – manchmal sind sie reaktionsfähig, manchmal verzögern sie sich ziemlich stark.

Es war so einfach, Claude dazu zu bringen, den Anhänger neu zu programmieren, dass ich ihn bat, einige Funktionen speziell für dieses Video in dieser Geschichte zu erstellen – einschließlich einer funktionierenden Taschenuhroberfläche mit drei Zeigern, die tatsächlich die Uhrzeit anzeigt. (Das dauerte 15 Minuten; jetzt, wenn ich sage, dass das Hardware-System wie eine Taschenuhr aussieht, kannst du sehen, was ich meine!) Er fand sogar die Video-Clips von Zuck, lud sie herunter, bearbeitete sie und installierte einen Video-Player, sodass ich diese Clips auf dem Waveshare abspielen konnte.

Ich möchte, dass Sie verstehen, dass ich keine Programmiererfahrung habe und daher keine Ahnung habe, ob dieser Code gut ist oder nicht. Er könnte tödlich fehlerhaft sein. Ich vertraue auch Meta oder seinem Muse-Agenten nicht – besonders nachdem ich gelesen habe wie es die Hausadresse eines Rezensenten durchleckte. (Ich habe das von Anfang an als Vorsichtsmaßnahme auf den Gäste-Wi-Fi-Netzwerk gesetzt.)

Verwandte

• Ihre Geheimnisse sind bei dem niedlichen Robotik-Spielzeug Eiliko nicht sicher

Das bedeutet, dass ich nicht wirklich Wissen, wie nützlich das Muse Charm für diejenigen sein mag oder nicht. do weiß, wie man programmiert sind Willig, einen größeren Glaubensschritt zu wagen. Aber nachdem ich mehrmals ein großes, kleines silbernes Anhängerstück verloren habe – eines ohne mehr Funktionen als mein Handy (und sogar noch weniger ohne zusätzlichen Code) – denke ich, dass Muse selbst nicht der Grund ist, einen speziellen Rechen-Quarzuhr zu kaufen.

Der Grund für das Verwenden eines speziellen Hardwaregeräts ist, Dinge zu tun, die man nicht mit dem bereits im Portemonnaie befindlichen Telefon machen kann – wie zum Beispiel das gesamte Gerät programmieren, um alles zu tun, was man möchte. Dabei frage ich mich: Wird das eigentliche Muse Charm so frei programmierbar sein, oder wären die Leute, die es kaufen würden, besser mit einem Entwicklungskit aufgehoben? Wir werden sehen, wenn es verfügbar ist.