- Apple está desarrollando On Screen Awareness para permitir que Siri comprenda e interactúe con el contenido que se muestra actualmente en su pantalla.
- Apple también proporcionará interfaces de programación de aplicaciones (API) para que los desarrolladores integren el conocimiento en pantalla en sus aplicaciones de terceros y actualmente está probando una integración ChatGPT, que permitirá a Siri responder preguntas basadas en capturas de pantalla.
- Aunque no está disponible en iOS 18.2 beta, Screen Awareness puede llegar a tiempo para iOS 18.4 en 2025
Entre los asistentes digitales, siri Funcionó bastante bien (ciertamente en comparación con Cortana, el desafortunado asistente del competidor). microsoft), y ahora manzana Hace que Siri sea más inteligente al darle una mejor idea de lo que estás mirando en la pantalla, lo que llama “conciencia de pantalla”.
manzana Entró en detalles sobre El desarrollo de esta función se encuentra en la página de documentación para desarrolladores de Apple.que también indica que está previsto que se incluya en varias de las próximas versiones beta del sistema operativo (OS) de Apple para realizar pruebas.
Apple mostró originalmente la inteligencia en pantalla en junio de 2024, lo que es un fuerte indicio de que todavía está en desarrollo.
La idea básica del conocimiento de la pantalla es bastante sencilla: si estás mirando elementos en tu pantalla, como un documento o un navegador con una página abierta, y tienes una pregunta sobre algo que estás viendo, puedes preguntar. Siri (equipado inteligencia de manzana). Luego, Siri debería poder responder a su pregunta con información relevante o realizar la acción que solicitó, como enviar el contenido a una aplicación de terceros compatible.
Si funciona según lo previsto (y ese es un gran “si”), conducirá a una Siri más inteligente que no necesitará que le describas lo que quieres que haga con tanta extensión como podrías necesitarlo ahora. Por ejemplo, puede abrir un documento y solicitar un resumen sin ingresar usted mismo el contenido del documento.
Los planes de Apple para el futuro previsible para Siri
Informes de MacRumors Apple proporcionó interfaces de programación de aplicaciones (API) a los desarrolladores, permitiéndoles poner el contenido de sus aplicaciones a disposición de Siri y Apple Intelligence. La idea es proporcionar a los desarrolladores esta API varios meses antes del lanzamiento para que puedan utilizar el conocimiento en pantalla con aplicaciones de terceros cuando se lancen oficialmente.
Actualmente sabemos que Apple está experimentando ChatGPT En lo último iOS 18.2 Beta (entre otros sistemas operativos de Apple), y ChatGPT La integración con Siri le permitirá hacer preguntas sobre elementos (como imágenes, archivos PDF y videos) que aparecen en la pantalla. Luego, Siri tomará una captura de pantalla y la pasará a ChatGPT para responder a su consulta. Esto significa que esta funcionalidad está actualmente limitada a capturas de pantalla de su pantalla.
Sin embargo, la conciencia en pantalla es un poco diferente, como señala MacRumors, ya que la conciencia en pantalla pretende integrarse de una manera más directa.
Se supone que la conciencia en pantalla de Siri es un tipo de capacidad para analizar, interpretar e interactuar directamente con el contenido de la pantalla. Si alguien te envía su número y quieres guardarlo, puedes decirle a Siri que cree un nuevo contacto sin tener que agregar instrucciones adicionales ni que Siri realice muchos pasos intermedios.
¿Sobrevivirá y prosperará Siri en la era de la inteligencia artificial?
Aparentemente, el conocimiento en pantalla aún no está en la versión beta de iOS 18.2, y MacRumors especula que es una de varias funciones de Siri que no veremos por un tiempo, pero esta noticia sigue siendo prometedora. Una predicción contiene información en pantalla de que podría incluirse en iOS 18.4, que se espera que se lance en la primera mitad de 2025.
Si esto funciona, Siri podría convertirse en un asistente digital más útil y, con el estilo de diseño de Apple, podría convertirse en el asistente digital elegido por muchos. Este desarrollo me recuerda lo que microsoft apunta a con Copiloto. Esto no ha sido bien recibido por lo que hemos visto hasta ahora, dejando el objetivo abierto para Apple.