Résumé :
Meta étend encore le champ d'application de son agent intelligent d'IA Muse et a commencé à ouvrir les codes et outils de développement de logiciels pertinents aux développeurs, permettant aux utilisateurs de créer leurs propres appareils physiques d'IA équipés de Muse. Grâce à ces outils open source, les développeurs peuvent connecter Muse à des écrans e-ink, des écrans tactiles, des boutons, des capteurs et divers actionneurs, permettant ainsi aux agents d'IA de passer des logiciels des ordinateurs et des téléphones mobiles au monde réel.
Meta appelle ce produit « gadgets Muse », qui sont des périphériques matériels Muse assemblés et développés par les utilisateurs eux-mêmes. Selon le plan annoncé par Meta, les développeurs peuvent utiliser des cartes de développement ESP32 courantes ou de petits ordinateurs tels que Raspberry Pi, puis accéder à Muse via le kit de développement logiciel fourni par Meta. Muse peut ensuite interagir avec les écrans, les boutons, les capteurs et d'autres composants matériels.
Les scénarios d'application fournis par Meta sont assez riches. Par exemple, les développeurs peuvent créer un petit appareil doté d'un écran couleur à encre électronique et laisser Muse afficher des rappels sur l'écran ; ils peuvent également diffuser l'interface de Muse sur un grand écran via un périphérique HDMI ; ils peuvent également l'installer sur un petit écran tactile pour créer une version DIY similaire au Muse Charm de Meta.
Cela signifie que Muse n'est plus limité à la forme matérielle conçue par Meta. Tant qu'ils disposent de certaines capacités de développement matériel, les utilisateurs peuvent décider eux-mêmes sous quelle forme Muse doit exister. Il peut s'agir d'un petit assistant IA sur le bureau ou d'un terminal de contrôle connecté à divers capteurs et appareils électroménagers.
Cependant, Meta rappelle également clairement aux développeurs que ces appareils DIY sont « à leurs propres risques ». Après tout, une fois qu’un agent IA commence à se connecter au matériel du monde réel, les opérations qu’il peut effectuer ne se limitent plus à générer du texte ou à répondre à des questions, mais peuvent affecter directement l’environnement réel.
En plus des outils de développement ouverts, Meta a également lancé un Muse Home Link auto-conçu et prévoit de le fournir gratuitement aux utilisateurs.
Muse Home Link est positionné plus près d'un centre de contrôle de maison intelligente IA. Grâce aux compétences développées par la communauté, qui sont des compétences conçues pour des tâches spécifiques, Muse peut contrôler les appareils de la maison selon les instructions de l'utilisateur. Par exemple, allumez les lumières, contrôlez la télévision ou encore envoyez un document à l'imprimante. Ce qui est possible dépend des appareils connectés par l'utilisateur et des compétences qu'il a installées.
Nat Friedman, responsable de Meta Superintelligence Labs, a révélé que Meta avait produit 5 000 unités Muse Home Link. Les utilisateurs peuvent actuellement s'inscrire sur la liste d'attente et le produit devrait commencer à être expédié en octobre.
La différence entre ce produit et les contrôleurs de maison intelligente traditionnels réside dans le fait que Meta espère faire des agents IA un portail d'interaction unifié entre les utilisateurs et divers appareils. Les maisons intelligentes traditionnelles exigent généralement que les utilisateurs ouvrent une application spécifique, sélectionnent un appareil, puis effectuent une opération claire, tandis que Muse peut comprendre des instructions en langage plus naturel et décider seule quelles compétences doivent être appelées en fonction de la tâche.
Par exemple, les utilisateurs peuvent théoriquement demander à Muse « d'allumer les lumières du salon » sans savoir à quelle marque appartient la lampe spécifique, quelle application doit être ouverte ou quelle interface d'appareil appeler. Si les compétences développées par la communauté couvrent suffisamment d’appareils, Muse pourrait progressivement devenir une couche de contrôle d’IA capable d’effectuer des tâches sur plusieurs appareils.
L'ouverture par Meta de l'écosystème matériel Muse cette fois-ci est également cohérente avec la stratégie récente de l'entreprise consistant à promouvoir les agents IA pour pénétrer dans les appareils physiques. Meta a déjà lancé Muse Charm et d'autres matériels conçus autour de Muse, dans l'espoir de permettre aux utilisateurs d'interagir plus naturellement avec l'IA.
Muse lui-même passe également d'un simple chatbot à un agent capable d'effectuer des tâches au nom de l'utilisateur. Auparavant, Meta avait donné à Muse la possibilité de gérer des questions pratiques telles que Facebook Marketplace, mais cette orientation a également apporté de nouveaux problèmes de sécurité et de confidentialité.
Il y a eu des incidents antérieurs au cours desquels Muse a fourni les adresses personnelles des utilisateurs à des inconnus lors du traitement des transactions sur Facebook Marketplace. Les utilisateurs avaient auparavant autorisé Muse à gérer les communications sur la Marketplace et leur avaient fourni des informations telles que l'adresse, l'heure de ramassage, etc., mais n'avaient pas explicitement demandé à Muse d'envoyer leur adresse personnelle aux acheteurs potentiels. Après l'incident, Meta a déclaré qu'elle étudiait comment clarifier davantage les paramètres d'autorisation de Muse.
Par conséquent, Meta permet désormais à Muse de contrôler davantage les lumières, les téléviseurs, les imprimantes et autres appareils physiques, ce qui signifie également que la question des autorisations pour les agents IA deviendra plus importante. Une fois que l’IA passera de « l’envoi de messages aux utilisateurs » au « contrôle d’appareils réels pour les utilisateurs », les opérations incorrectes ne seront peut-être plus simplement des fuites de confidentialité ou des informations erronées, mais pourront avoir directement des impacts réels.
Dans une perspective à plus long terme, l'ouverture par Meta de l'outil de développement matériel Muse cette fois-ci est en fait une tentative de construire un écosystème matériel ouvert autour des agents IA. Dans le passé, le matériel d'IA était souvent conçu par les fabricants avec des fonctions fixes, et les utilisateurs ne pouvaient l'utiliser que de la manière prédéfinie par le fabricant après l'achat ; Les gadgets Muse tentent de transformer l'agent IA lui-même en une plate-forme universelle pouvant se connecter à divers matériels.
Si ce modèle peut se développer, les futurs appareils d'IA n'auront peut-être plus besoin d'une apparence unifiée. Les développeurs peuvent déployer le même agent IA sur des écrans e-ink, des robots de bureau, des contrôleurs domestiques, des appareils portables et même divers matériels maison en fonction de leurs propres besoins. Muse lui-même est responsable de la compréhension des intentions des utilisateurs, et c'est le matériel périphérique qui effectue les tâches spécifiques.
La production par Meta de 5 000 Muse Home Links cette fois-ci peut également être considérée comme une première expérience dans ce modèle. Par rapport à la vente directe de matériel complet à grande échelle, en distribuant gratuitement un petit nombre d'appareils et en ouvrant les outils de développement et l'écosystème de compétences, Meta permet aux développeurs d'explorer par eux-mêmes les appareils physiques et les scénarios d'utilisation pour lesquels Muse est adapté. À mesure que les agents d'IA passent progressivement du logiciel au monde réel, ce modèle « cerveau IA + matériel ouvert » pourrait devenir une direction importante pour la concurrence des produits d'IA dans la prochaine étape.
Commentaires