Las gafas ChatGPT llevan la IA a su vida real

Si bien muchas personas se han divertido chateando con ChatGPT de OpenAI, un estudiante de Stanford encontró un nuevo uso para el modelo de lenguaje grande: interactuar con otros en el mundo real.

Estudiante de informática e ingeniería eléctrica. Bryan Hau Ping Chiang ha hecho que ChatGPT sea portátil e interactivo gracias al hardware Monocle AR de código abierto y al reconocimiento automático de voz (ASR) Whisper de OpenAI. Actualmente también se usa un teléfono inteligente dentro de la configuración. Estas tecnologías combinadas recibieron el nombre pegadizo rizzGPT («Rizz» es la jerga de «carisma») por Chiang. Guiado en tiempo real, Chaing ha utilizado el asistente de chat de IA durante eventos como una entrevista de trabajo simulada, una reunión casual con un amigo y la elección de los mejores platos en un nuevo restaurante.

en un guía a rizzGPT, compartido en Twitter, Chiang describe el sistema como el comienzo de «una nueva era de computación ambiental habilitada por AR + AI, donde todos tienen su propio asistente personal disponible las 24 horas del día, los 7 días de la semana». Más brevemente y con humor, rizzGPT se puede usar durante eventos de la vida como citas incómodas y entrevistas de trabajo, proporcionando «Carisma como servicio (CaaS) en tiempo real», bromea el estudiante de Stanford.

Un gran ejemplo de rizzGPT en acción lo proporciona el Tweet incrustado arriba. En el video, Chiang mejorado con IA responde a una serie de preguntas de la entrevista, utilizando el discreto dispositivo Monocle AR sujeto al marco de sus anteojos. La pantalla integrada de Monocle le proporciona una señal automática de respuestas perfeccionadas por IA directamente desde ChatGPT.

Otro uso situacional interactivo personal del sistema rizzGPT se proporciona cuando Chiang se topa con un amigo. La IA aprendió quiénes son sus amigos, se entrenó con fotos y puede reconocerlos. El usuario conectado de Monocle puede evocar conversaciones relevantes basadas en mensajes de teléfonos inteligentes intercambiados con cualquier amigo en particular. Esto podría implementarse fácilmente en «citas incómodas», por lo que los usuarios pueden pilotar automáticamente una conversación brillante. Dicho esto, es posible que otras personas a tu alrededor no estén tan emocionadas de verte usando anteojos que escanean su rostro y te dicen qué decir. Hay algunos ecos de Google Glass aquí.

Otro ejemplo convincente de agentes de IA combinados con Monocle AR es para brindar asesoramiento sobre el menú en un restaurante. En esto vídeo tuiteado puede ver que la IA lee el menú (en silencio) para Chiang, y cuando se le pregunta verbalmente, proporciona algunos consejos hablados basados ​​en lo que sabe sobre sus gustos y aversiones de alimentos, y valores nutricionales. El estudiante de Stanford también aprovecha los servicios conectados para la transcripción de voz, TTS y OCR en esta aplicación de IA del mundo real.