El laboratorio DeepMind de Google está trabajando en una inteligencia artificial que considera los objetos y entornos en los que movemos el puntero del mouse cuando interactuamos con ella.
Cuando hablamos con otra persona frente a la pantalla de una computadora a menudo utilizamos la flecha para indicarle a qué nos referimos. Apuntamos a objetos. Aportamos una gran cantidad de información que de otro modo tendríamos que detallar verbalmente, como consecuencia la comunicación es mucho más clara.
Los desarrolladores quieren una IA a la que el usuario le pueda mostrar una imagen y pedir la dirección para llegar al sitio que allí aparece. Una IA que entienda el contexto de nuestras preguntas y pedidos.
Objetivos del puntero con IA
Según explican en la página dedicada a este desarrollo, han establecido cuatro principios básicos.
El puntero debe ser capaz de funcionar a través de todas las aplicaciones, no necesitar una aplicación especial. Debe poder transmitir datos de un espacio a otro.
La capacidad para captar el contexto debe permitirle al sistema ver y entender qué es importante para el usuario. Si el resultado depende de una larga explicación se pierde el sentido de esta función.
La IA debe ser capaz de entender un lenguaje relativamente vago, considerando para ello los gestos realizados con el mouse y el contexto. Expresiones tales como “arregla esto” deberían ser comandos válidos y suficientes.
Finalmente, la IA tiene que comprender a qué se está apuntando. Transformar la imagen como colección de píxeles en elementos y categorías de objetos.
Aplicación
Según Google el sistema está siendo integrado a Chrome y a las nuevas Googlebook. Así pues, en teoría, los usuarios de Gemini en Chrome deberían acceder a esta función tan pronto como hoy mismo. Hasta donde sabemos el sistema lleva por nombre Magic Pointer.
