Nous avons vu Spot le chien robot courir, sauter et même danser... mais maintenant nous pouvons voir Spot parler. Dans une vidéo publiée par Boston Dynamics, on voit son chien robot coiffé d'un grand chapeau, d'une moustache et d'un regard perçant, discutant avec le personnel avec un accent britannique et leur faisant visiter les installations de l'entreprise.
"Pouvons-nous commencer notre voyage ?" » demanda Spot. "La station de recharge est l'endroit où le robot Banban se repose et se recharge, et c'est le premier endroit que nous allons visiter. Suivez-moi, messieurs." Comme le montre la démo, Spot est capable de répondre aux questions et même d'ouvrir la « bouche » pour donner l'impression qu'il parle réellement.
Pour faire « parler » Spot, Boston Dynamics a utilisé l'API ChatGPT d'OpenAI et certains grands modèles de langage (LLM) open source pour former soigneusement ses réponses. Il a ensuite équipé le robot d'un haut-parleur, ajouté des capacités de synthèse vocale et lui a permis d'« imiter la parole » comme la bouche d'une marionnette.
Matt Klingensmith, ingénieur logiciel principal de Boston Dynamics, a déclaré que l'équipe avait donné à Spot un "script très bref" qui concernait chaque pièce des installations de l'entreprise. Le robot combine ensuite le script avec les images qu'il obtient des caméras placées sur sa pince et son corps, lui donnant "plus d'informations sur ce qu'il voit avant de réagir". Selon la société, Spot utilise un modèle visuel de réponse aux questions pour sous-titrer les images et répondre aux questions les concernant.
"Fancy Butler" n'est pas le seul rôle que joue Spot dans la vidéo. Le robot à quatre pattes incarne également un archéologue des années 1920, un adolescent et un voyageur temporel shakespearien. Lorsqu'on lui a demandé d'écrire un haïku, il a également répondu : « Le générateur bourdonne doucement dans la pièce, le générateur bourdonne doucement dans la pièce sans joie, un peu comme mon âme. »
Boston Dynamics a déclaré avoir découvert quelque chose d'inattendu en expérimentant Spot en tant que guide touristique. À un moment donné, l'équipe a demandé à Spot qui étaient ses « parents », et elle a fini par se diriger vers un ancien modèle Spot exposé dans le bureau de l'entreprise. La société a également noté que dans certains cas, LLM inventait encore des choses, comme lorsque Stretch, le robot qu'elle a conçu pour déplacer des cartons, a été conçu pour le yoga.
"Nous sommes ravis de continuer à explorer l'intersection de l'intelligence artificielle et de la robotique", a écrit Clinensmith dans un article publié sur le site Web de Boston Dynamics. "Ces modèles (LLM) peuvent aider à fournir un contexte culturel, des connaissances générales de bon sens et une flexibilité utiles pour de nombreuses tâches robotiques - par exemple, être capable d'attribuer des tâches à un robot simplement en lui parlant contribuera à réduire la courbe d'apprentissage pour l'utilisation de ces systèmes."
Bien que Spot semble ridicule dans la vidéo, il est difficile de ne pas penser à la capacité du robot ressemblant à un chien à ouvrir les portes et à espionner les gens. Après tout, cela pourrait devenir à tout moment un outil de la police et de l’armée.