In collaborazione con l'università aalto in Finlandia, I ricertari Apple Hanno presentatore IluvuiUN MODELLO AI CAPACE DI CRECESTERE E RAGIONARE SU SCHERMATE DI Proprio Come Farebbe un essere Uno.
A Differenza Dei Classici Modelli Ai Che Si Basano Solo Su Testo O Su Imagini Naturali (vieni Paesagi o Animali), Iluvui è Stato istruit ANALIZZARE interfaccia utente. SA Leggere Schermate, Casella di controllo Riconoscere, menu, Campi di Testo e interpretare il concorso Visivo in Abbinamento A COMANDI VOCALI O TESTUALI.
Un Esempio? PUOI CHIEDER “Come facecio ad Ascoltare L'Ultimo Episodio del podcast?” E Ottenere una risposta dettagliata, con I Passaggi Visivi da Segire Sull'app.
I Ricercari Hanno Adattato Llava, UN Modello Open Source Multimodale, E l'Hanno Rieducato su un set di dati Sintetico Fatto Di:
- Schermate Di App
- Domande e risposte in Stile Conversassionle
- DESCRIONI DETTAGIALE DELL'Interfaccia
- Previsioni Sulle Azioni Dell'utente
- Piani Multi-Step per Compiti Compressi
Il Risultato? ILUUVUI SUPER LLAVA SIA NEI TEST Automatizzati Sia NELLE PREFERAME DEGLI UTENTI REALI. E Senza NEMMENO DOVER INDICARE UNA ZONA PRECISA DELLO DELLO SCHERMO.
Apple intravede diverse applicanti per questa questa tecnologia, vieni accessibilità migliorata per utenti con disabilità, test automatici di interfaccia in fase di sviluppo e assistenti smart capici di automatizare interazioni complice compone al tutto l'interno dello app alternata appling app app enterno interno dello app di allogna
E se consideramo I recenti Studi Apple Sull'anticipazione Delle Conseguenze Delle Azioni Compiute Nelle App, Iluvui Potrebbe Divenare Un Tassello Chiave per un IOS semper Più intelligente e Proattivo.
Notizia
