Microsoft está avanzando plenamente en su estrategia de inteligencia artificial, integrando Copilot como componente central de Windows 11, lanzando una serie de funciones de inteligencia artificial generativa con el objetivo de transformar por completo la forma en que los usuarios interactúan con sus computadoras personales. Estas nuevas funciones incluyen control por voz, análisis del contenido de la pantalla y un agente de automatización local limitado, con el objetivo de hacer que Copilot sea el "principal medio" de interacción entre los usuarios y sus PCs.

"¡Hola, Copilot": el control por voz se convierte en la norma

Los usuarios ahora pueden activar Copilot en sus PC con Windows diciendo "¡Hola, Copilot". Esta función es opcional y, al activarse, se muestra un icono de micrófono y una señal de audio. Microsoft afirma que los usuarios que utilizan la voz interactúan con Copilot dos veces más que los usuarios que utilizan texto, lo que indica una mayor fidelidad de los usuarios con la interacción por voz. Las sesiones pueden finalizar automáticamente o mediante el comando "Adiós".

Para facilitar el acceso, Copilot se agregará a la barra de tareas de Windows, incluyendo un nuevo botón para herramientas de voz y visualización, y los usuarios podrán acceder a la configuración de Windows mediante comandos de voz. Microsoft también planea ofrecer una opción de texto puro, para satisfacer las necesidades de los usuarios que desean interactuar sin hablar.

QQ20251017-092228.png

Copilot Vision: análisis en tiempo real de la pantalla y ayuda contextual

La función "Copilot Vision" ya está disponible en todos los dispositivos compatibles con Copilot en todo el mundo. Esta función puede analizar el contenido de la pantalla y proporcionar ayuda relacionada con el contexto mientras los usuarios editan fotos, juegan o trabajan en Office. Microsoft afirma que Copilot Vision puede procesar y analizar documentos completos en Word, Excel y PowerPoint, brindando un fuerte apoyo a la productividad.

"Copilot Actions": un agente local limitado y autónomo

Microsoft también lanzó una función de prueba llamada "Copilot Actions", que permite a Copilot realizar algunas tareas simples en la computadora local, como buscar PDFs o organizar fotos. Esta función se lanzará inicialmente en Copilot Labs en formato de vista previa para usuarios del Programa de Insiders. Los usuarios podrán observar en cualquier momento el trabajo de Copilot y intervenir cuando sea necesario.

Microsoft reconoce que estas funciones basadas en agentes aún son limitadas y posiblemente fallidas, y no pueden controlar confiablemente software complejo. Dado que estudios muestran que los sistemas de IA basados en agentes pueden presentar riesgos de seguridad, Microsoft afirma que las pruebas de los usuarios serán clave para mejorar la fiabilidad.

Colaboración con la empresa emergente china Manus: acceso a archivos locales a nivel del sistema

Además, Microsoft se integró con la empresa emergente china Manus. Según informes, el agente de Manus utiliza el modelo de Anthropic, integrado en el Explorador de archivos de Windows, permitiendo a los usuarios crear un sitio web desde archivos locales simplemente haciendo clic derecho. Manus utiliza el "protocolo de contexto del modelo" diseñado por Anthropic, logrando así un acceso a nivel del sistema a los contenidos locales.

Servicios en línea y expansión a aplicaciones de juegos

  • Copilot Connectors permite a los usuarios extraer datos de servicios conectados como OneDrive, Outlook, Gmail o Google Drive. Los usuarios pueden usar sugerencias como "Buscar detalles de mi cita con el dentista" para buscar citas, contactos o documentos y exportar directamente los resultados a Word, Excel o PowerPoint.

  • En el ámbito de los juegos, "Gaming Copilot" ya está disponible en la consola portátil de Windows de Asus ROG Xbox Ally. Los usuarios pueden activarlo presionando un botón sin pausar el juego, ayudándoles a navegar o explicar mecanismos del juego en títulos como Minecraft.

La mayoría de las nuevas funciones funcionan en cualquier dispositivo Windows 11 compatible con Copilot, pero Microsoft recomienda usar computadoras Copilot+ para mejorar la velocidad de procesamiento y la ejecución de tareas de IA locales. Solo ciertas funciones específicas de "Click to Do" integración con Zoom