IOS 26 ievieš nozīmīgu Evolūciju Apple vizuālās intelekta tehnoloģijā, paplašinot savas iespējas no vienkāršas uz kameru balstītas atpazīšanas līdz plašai attēlu parsēšanai tieši uz ierīces ekrāna satura. Šis jauninājums no jauna definē to, kā lietotāji mijiedarbojas ar attēliem un vizuālo saturu visās lietotnēs un ekrānuzņēmumos savos iPhones, it īpaši ar tiem, kas aprīkoti ar Apple jaunāko silīciju, lai uzlabotu ierīces apstrādi.
Vizuālā intelekta izcelsme ir iOS 18.2 kā kameras vadības funkcija, kas ļauj iPhone kamerai aprakstīt apkārtni, tulkot tekstu un reālā laikā identificēt dažādus objektus, piemēram, augus un dzīvniekus. Izmantojot iOS 26, Apple ir pārveidojis vizuālo inteliģenci par visaptverošāku vizuālās analīzes rīku, kas vairs neierobežo tā lietderību ar to, ko kamera novēro fiziski, bet dziļi iedziļinās paša ekrānuzņēmumu saturā, ieskaitot ekrānuzņēmumus un lietotņu attēlus.
Galvenais akcents ir tas, ka lietotāji var aktivizēt vizuālo inteliģenci uz ekrāna satura, nospiežot tās pašas pogas, ko izmanto ekrānuzņēmumu uzņemšanai. Šī darbība izraisa interfeisu, kas lietotājiem ļauj mijiedarboties ar šiem uztvertajiem vizuālajiem datiem, izmantojot vairākas inteliģentas opcijas atbilstoši atklātajam satura veidam. Sistēma var izdalīt attēlus konkrētiem objektiem vai teksta segmentiem ekrānuzņēmumā vai ekrāna uztveršanā un sniegt atbilstošu informāciju, meklēšanas rezultātus vai tiešas darbības, piemēram, kalendāra notikumu pievienošanu vai uzdevumu sarakstu izveidošanu no atzītajām detaļām.
Raugoties no tehniskā viedokļa, vizuālā intelekta attēlu parsēšanu darbina Apple izsmalcinātā AI, kas ir daļa no plašākas "Apple Intelligence" ekosistēmas. Šī ekosistēma uzlabo Siri, rakstīšanas rīkus un ekosistēmas izpratni par Apple ierīcēm. Paļaušanās uz ierīces apstrādi saglabā lietotāju privātumu, izvairoties no datu augšupielādes ārējiem serveriem, un apstrādes prasības prasa jaudīgu silīciju, kas atrasts tikai jaunākos iPhone modeļos (iPhone 15 Pro, 16 sērijas, 17 sērijas) un saderīgos iPads un Mac.
Objektu veidi Vizuālā inteliģence var identificēt ievērojami paplašinātus. Papildus pamata dzīvniekiem un augiem tas tagad atzīst mākslas darbus, grāmatas, orientierus, dabiskos orientierus un skulptūras gan kameru ieejās, gan ekrānuzņēmumos. Šī plašā spektra atpazīšana ļauj sistēmai piedāvāt bagātīgus kontekstuālos datus, sākot no glezniecības vai skulptūras identificēšanas līdz darbības detaļām par biznesu, kas redzams ekrānuzņēmumā vai dzīvas kameras skatā.
Izstrādātāji gūst labumu arī no šī uzlabojuma, izmantojot modernizēto lietotņu nodomu API, kas ļauj trešo pušu lietotnēm integrēties ar vizuālo intelektu. Tas ļauj novatoriskas lietojumprogrammas, piemēram, fitnesa lietotnes, iegūst treniņu plānus no ekrānuzņēmumiem, ēdiena gatavošanas lietotnes, kas recepšu attēlus pārveido pārtikas preču sarakstos, un produktivitātes rīki, kas interpretē tāfeles fotoattēlus, izmantojot darbināmu saturu.
Viens praktisks vizuālās intelekta funkcionalitātes piemērs ietver notikumu skrejlapas ekrānuzņēmuma uzņemšanu un AI parsēt datumu un notikumu informāciju ar iespēju to pievienot tieši kalendāram. Sistēma var arī veikt mērķtiecīgu attēlu meklēšanu ekrānuzņēmumā, ļaujot lietotājam ekrānā apņemt noteiktus apgabalus vai objektus, nosūtot tos tīmekļa attēlu meklēšanas rezultātiem (piemēram, Google attēlu meklēšana). Lietotāji pat var uzdot tērzēšanas robotus, piemēram, ChatGpt jautājumus par ekrānuzņēmuma elementiem, vizuālo intelektu sasaistot ar sarunvalodas AI, lai iegūtu interaktīvāku pieredzi.
Šī attēlu parsēšanas un satura analīzes funkcija pārsniedz tikai objektu identificēšanu vai meklēšanas veikšanu; Tas lietotājiem ļauj veikt tūlītējas, jēgpilnas darbības atkarībā no konteksta. Piemēram, izmantojot vizuālo intelektu, var pasūtīt ēdienu no restorāna ēdienkartes, kas redzama ekrānuzņēmumā, veikt rezervācijas, apskatīt norises vietas darba laiku vai tieši veikt zvanus, izmantojot vizuāli atrastu kontaktinformāciju. Iespēja parsēt tekstu ļauj reāllaika tulkojumiem, kopsavilkumiem un skaļi lasīt, uzlabot pieejamību un izpratni par savstarpējām valodām.
Vizuālās inteliģences arhitektūra ir ļoti optimizēta ātrumam un privātumam. Funkcijas reāllaika atbildes un analītika pilnībā notiek uz ierīces, nepieprasot interneta savienojumu, ļaujot lietotājiem saņemt tūlītējus rezultātus bez latentuma vai privātuma bažām, kas saistītas ar mākoņa apstrādi. Tas padara to par novatorisku soli kontekstā informētajā skaitļošanā, mainot ierīces no pasīviem plašsaziņas līdzekļu vadītājiem uz proaktīviem palīgiem, kas plūst un darbojas ar vizuāliem datiem.
Izmantojot iOS 26, vizuālās intelekta sistēmas saskarne ir lietotājam draudzīga un intuitīva. Pēc funkcijas aktivizēšanas, izmantojot ekrānuzņēmuma pogas vai kameras vadību, lietotāji redz, ka opcijas tiek parādītas kontekstā, piemēram, Â Jautājiet, â Â meklējot, vai īpašas lietotnes darbības, kas ļauj veikt netraucētu mijiedarbību. Inteliģents parsēšanas motors saprātīgi nosaka satura veidu, neatkarīgi no tā, vai tas ir teksts, māksla, orientārs, kontaktinformācija vai notikumu informācija, un attiecīgi pielāgo tā izvadi un pieejamās lietotāja darbības.
Ierobežojumi joprojām ir saistīti ar ierīces atbalstu, jo skaitļošanas intensitāte nozīmē, ka vizuālā intelekta pilnas iespējas ir rezervētas Apple vismodernākajiem mikroshēmojumiem. Turklāt valodas atbalsts noteiktām objektu atpazīšanas funkcijām pašlaik galvenokārt ir angļu valodā, un Apple darbojas ar plašāku daudzvalodu atbalstu, kad šī funkcija nobriest.
Rezumējot, iOS 26 vizuālā intelekta attēla parsēšana ir ievērojams sasniegums, integrējot ar AI ar AI, vizuālo analīzi ikdienas viedtālruņu lietošanā. Tehnoloģija no reaktīvās uz kameru balstītās objekta atpazīšanas pāriet uz proaktīvu rīku, kas pārveido ekrāna saturu par izmantojamām atziņām, dodot lietotājiem iespēju mijiedarboties ar savām ierīcēm un informāciju jaunos, mainīgos veidos. Šis jauninājums nosaka pamata soli uz nākotnes Apple saskarnēm, kur konteksts un nodomu formas mijiedarbība, dziļi sajaucot redzējumu, zināšanas un rīcību uz ierīci privātumam un atsaucībai.
***Detalizēta evolūcija, funkcionalitāte, izstrādātāju integrācija, lietotāja saskarne un iepriekš minētie praktiskie piemēri atspoguļo vizuālā intelekta attēlu parsēšanas spēju būtību iOS 26, kā paziņots un izstrādāts dažādos ar āboliem saistītos avotos un ekspertu atspoguļojumā 2025. gadā.