in

Les lunettes Iron Man arrivent chez ChatGPT

Les lunettes Iron Man arrivent chez ChatGPT

Vous vous souvenez certainement des lunettes de Tony Stark dans Iron Man, ou de celles de Spider-Man lorsque Tony lui-même les lui donne. Eh bien, ce type de gadget est aujourd’hui présent sous une forme quelque peu bêta et limitée, mais il est en train de prendre forme. Il s’agit des RizzGPT, des lunettes créées par un étudiant de Stanford et qui, bien qu’encore très basiques, constituent un pas en avant pour nous rapprocher du concept des lunettes d’Iron Man. Attention, car si Google s’empare de ce projet et le ramène à Glass ? Peut-être que ce projet raté ne sera plus un échec.

Google a essayé et échoué, ce n’est rien, mais avec l’inclusion de ChatGPT et l’arrivée sur le marché d’autres IA, la situation pourrait changer de manière exponentielle. Bryan Hau-Ping Chiang, étudiant en informatique et en génie électrique, a trouvé la clé, rudimentaire mais efficace, et c’est un bon point de départ.

RizzGPT, l’IA de ChatGPT portée sur les lunettes de réalité augmentée

Pour réaliser ces RizzGPT, Chiang a utilisé des éléments déjà créés dans le cadre de différents projets. Monocle AR est un matériel open source très intéressant qui permet, via un téléphone mobile auquel il est connecté sans fil, de présenter les données fournies par ChatGPT.

Ce matériel est installé au-dessus d’une paire de lunettes, comme un monocle, où l’on peut voir ou lire les réponses de l’IA. Mais pour cela, il faut qu’elle comprenne et sache ce que vous lui demandez, ou ce qui est dit dans une conversation. C’est là qu’intervient l’ASR, la reconnaissance automatique de la parole d’OpenAI, qui est également installée sur le téléphone.

A lire également  afficher Grid Legends en cours d'exécution sur un NUC

RizzGPT

Le mode de fonctionnement général est le suivant :

  • OpenAI Whisper capte le son et l’envoie pour qu’il soit transcrit en texte pour que ChatGPT, via son IA, renvoie une réponse au téléphone.
  • Il l’envoie à AR Monocle et représente les informations sur le cristal.
  • Le sujet répond ou interagit verbalement avec la réponse, en demandant ou en répondant à la réponse, que le téléphone prend et recommence.

Un assistant personnel 24 heures sur 24, 365 jours par an.

C’est ainsi que Chiang décrit RizzGPT, comme “une nouvelle ère de l’informatique ambiante rendue possible par l’AR + AI, où chacun dispose de son propre assistant personnel disponible 24 heures sur 24 et 7 jours sur 7”. Les possibilités sont infinies. Chiang l’a utilisé lors d’un entretien d’embauche fictif, où ChatGPT lui a donné les réponses les plus optimisées pour obtenir le poste.

Il a également été utilisé dans une conversation normale avec un ami, où l’IA a affiché dans le RizzGPT les réponses demandées ou des informations utiles. Entre-temps, l’IA a rapidement appris qui était l’ami de Chiang, s’est entraînée avec des images, l’a reconnu et a interagi avec lui en lui donnant des réponses.

De plus, au restaurant où ils se sont rencontrés, l’IA via RizzGPT a donné à Chiang des conseils sur la nourriture, en lisant le menu qu’il tenait et en lui disant ce qu’il pourrait aimer et ce qu’il pourrait ne pas aimer en fonction des goûts qu’il lui avait indiqués. C’est révolutionnaire, non pas qu’il s’agisse d’un nouveau domaine, mais c’est l’étape suivante. Google va-t-il réessayer avec les Google Glass V2, en voyant ce que Chiang a été capable de faire avec un budget très réduit et à quel point c’est efficace ?

A lire également  XPG présente un refroidisseur de processeur hybride : prend en charge jusqu'à 280 W

Il est certain qu’à l’heure actuelle, il y a un grand nombre d’entreprises ou de startups qui conçoivent des dizaines de projets basés sur l’IA qui peuvent changer complètement notre vie quotidienne, comme l’a fait, par exemple, le smartphone. Mais pour l’instant, il faut s’en tenir à des gadgets comme RizzGPT et imaginer ses possibilités comme une sorte de Jarvis dans notre vie quotidienne.