Apglabāts iekšā Apple Imaginative and prescient Professional par 3499 $ VR austiņas ir funkcija, kas mani pastāvīgi satriec, taču jūs, iespējams, nekad neesat par to dzirdējuši. Funkcija, ko sauc Personasir iesaistīti divi vai vairāki lietotāji, kuri visi valkā Imaginative and prescient Professionals, tērzē viens ar otru reāllaikā, wager kā virtuālas kopijas.
Personas, kas vairs nav pieejamas beta versijā, ir daļa no Apple Imaginative and prescient Professional iemiesojuma sistēmas, veidojot sevis kopijas, izmantojot 3D fotoattēlu skenēšanu.
Sevis skenēšana nav nekas jauns. Pirms aptuveni pieciem gadiem es mēģināju teleklātbūtni ar 3D skenētiem iemiesojumiem uz Nreal AR brillēm ar uzņēmumu Spatial. Esmu palūkojies uz Meta reālistiskajiem kodeku iemiesojumiem. Es izpētīju multfilmu iemiesojumu teleklātbūtnē ar Microsoft HoloLens. Un es pat esmu skenējis sevi visādos dīvainos mākslīgā intelekta viltojumu veidos, izmantojot OpenAI tālruņa lietotni Sora.
Tomēr neviens neko nedara ar VR vai AR austiņām vai brillēm, kas ir tik uzlabotas kā Apple Imaginative and prescient Personas. Un mēs neesam redzējuši sākumu tam, cik labas lietas var iegūt.
Lai uzzinātu vairāk, es uzvilku M5 Imaginative and prescient Professional austiņas un pieteicos FaceTime, lai sazinātos ar Apple Imaginative and prescient produktu grupas vecāko direktoru Džefu Norisu un produktu mārketinga vecāko direktoru Stīvu Sinkleru. Viņi abi parādījās kā Personas manā mājas birojā. Mēs kā spoki klaiņojām, kad tikšanās sākās, tā teikt, aci pret aci. Pēc dažām minūtēm šķita, ka mēs klātienē pavadām laiku kopā.
Apple neapspriež nākotni. Taču Noriss un Sinklērs izskaidroja dažas ļoti foršās 3D tehnoloģijas, kuru dēļ Personas šķiet tik reālistiskas. Kamēr mēs tērzējām, es iedomājos, ka līdzīgu skenēšanu varētu veikt arī citās vietās, nevis Imaginative and prescient Professional, piemēram, iespējams, jūsu iPhone, kas būtu pieejams lielākam skaitam cilvēku.
Apple Personas šķiet neparastas ārpus austiņām, wager ne iekšpusē.
Īsta telepresence ir dārga maģija
Ir grūti atrast citu cilvēku, kuram būtu Imaginative and prescient Professional, taču, ja man ir, baismīgā sajūta, ka kāds spoks ieiet manā mājā, ir kā burvju mānīšana. Apple VisionOS ir attīstījusies, lai nodrošinātu sadarbību starp Personām, izvēršot virtuālās telpas līdz pat pieciem cilvēkiem, lai kopā varētu redzēt un koplietot virtuālos objektus un lietotnes. Vairāki cilvēki vienā telpā, kas valkā Imaginative and prescient austiņas, var sadarboties ar personām, kuras var pārraidīt arī attālināti.
Es jau gadiem ilgi sapņoju par Tonijam Stārkam līdzīgo Zvaigžņu karu hologrammas teleklātbūtnes ideju. Tas būtībā ir šeit. Tas vienkārši ir iemūrēts ļoti dārgā aparatūrā.
Viedās brilles vēl nav spējušas izturēt šādu iemiesojumu slodzi, lai gan Snap un citu ražotāju AR brilles, iespējams, drīz mēģinās. Mans jautājums Apple ir šāds: kāda tehnoloģija liek personībām izveidoties, un vai tās kādreiz varētu parādīties kaut kur citur?
Splatting skenēšanas tehnoloģija izmanto mašīnmācīšanos
Mūsu sanāksmē Noriss skaidro, ka Persona tehnoloģija izmanto Gausa izspiešanu, lai radītu pārsteidzoši pārliecinošus 3D sejas skenējumus. Gausa izspiešana šobrīd ir galvenā tehnoloģija daudzām 3D lietojumprogrammām, ko bieži izmanto objektu skenēšanai vai liela mēroga vidēm. Piemēram, Meta lietotne Hyperscape Seize vietnē Quest var skenēt veselas telpas 3D telpās VR. Tas izveido 3D attēlu vai ainavu no 2D attēlu sērijas, izmantojot AI.
Personas unikālu padara koncentrēšanās uz sevis, nevis vides skenēšanu. Izmantojot VisionOS 26, Noriss man parādīja galvenās izmaiņas salīdzinājumā ar iepriekšējām Persona versijām. Tagad apmetumi var parādīt detalizētākas detaļas vairākos leņķos un tvert tādas detaļas kā rotaslietas un skropstas. Ķermeņi un sejas tiek skenēti kopā, tādējādi padarot renderējumu nevainojamu.
“Ir iesaistīta mašīnmācība, taču maz cilvēku īsti saprot, ka tas ir tīklu koncerts, kas apvienojas,” saka Noriss. “Mēs tos saskaitījām, tas ir vairāk nekā ducis, wager mēs faktiski samazinājām skaitu, kad pārgājām uz šo jauno Personas versiju.”
Es minēju iespēju skenēt telpas programmā Imaginative and prescient Professional (tādas lietotnes kā Scaniverse un Polycam jau demonstrē 3D skenēšanu austiņās). Noriss saka, ka Apple jau izmanto Gausa izspiešanu fotoattēlu telpiskajām 3D pārveidošanām, kas tagad izskatās dīvaini ieskaujoši austiņās. Tātad, kas būs tālāk?
Imaginative and prescient Professional austiņas var sadarboties tajā pašā telpā un vienlaikus salocīt personās no kaut kur citur. Lai piedalītos telpiskajā pieredzē, jums vienkārši ir jābūt vienai no šīm austiņām.
Nepieciešamo fotoattēlu uzņemšanai nav nepieciešams daudz. Vai to varētu izdarīt iPhone tālruņos?
Pat ja Persona skenēšana tiek veikta, izmantojot Imaginative and prescient Professional austiņas, kas prasa, lai austiņas ir jāpatur, lai pagrieztu galvu un skenētu, tas nav course of, kura dēļ man būtu plaši jāizmanto Imaginative and prescient Professional sensori.
“Kad mēs reģistrējam jūsu Personu, mums ir vajadzīgas tikai dažas attēlus,” man saka Noriss. “Tas ietver dažas sejas izteiksmes, lai palīdzētu mūsu tīkliem saprast, kā jūsu seja kustas, kad runājat un smaidāt. Un viss.”
Es domāju, vai iPhone galu galā varētu skenēt Persona, kas man šķiet daudz vienkāršāk nekā izmantot Imaginative and prescient Professional. Noriss uz to tieši neatbild.
“Ir interesanti iedomāties dažādus veidus, kā to paveikt,” viņš atbild. “Taču šobrīd mums patīk, ka tas ir iebūvēts ierīcē un visa apstrāde notiek ierīcē. Lai tas notiktu, nevienam no šiem attēliem nekur nav jānonāk.”
Es savā VisionOS Personā manas pirmās jaunās versijas demonstrācijas laikā WWDC šī gada sākumā.
Ko tas varētu nozīmēt mūsu nākotnes virtuālās identitātes izjūtai?
Atsevišķā Persona, kuru es skenēju un pievienoju savam Apple ID tālrunī Imaginative and prescient Professional, šķiet, ka tā ir izstrādāta, lai darbotos kā viens pret vienu mana virtuālā sevis kartēšana. Tā ir tuvākā lieta, ko Apple var aizstāt ar kameras izmantošanu, lai pārraidītu manu seju, ko nevar izdarīt, jo es valkāju austiņas.
AI uzņēmumi jau skenē un ģenerē cilvēku virtuālās versijas arvien vairāk tīšu un netīšu viltojumu. OpenAI Sora lietotne šobrīd ir visievērojamākais piemērs, un iPhone tālruņos tiek izmantota līdzīga veida sejas skenēšanas tehnoloģija, lai radītu sevis “Cameo”, ko varu aizdot citiem.
Es jautāju Norisam, kur var novilkt robežu uz priekšu. Viņš liek saprast, ka Apple vēlas skaidri un droši pārstāvēt cilvēku reālajā laikā, nevis kā reprodukciju.
“Mēs esam koncentrējuši Personas uz šo autentiskās reprezentācijas mērķi,” viņš saka. “Mēs cenšamies izpildīt, manuprāt, fundamentālu cilvēka vēlmi, proti: “Es vēlos, lai jūs būtu šeit.” Tas sākas ar mēģinājumu būt uzticīgiem tam, kā mēs izskatāmies, kā mēs virzāmies un kā mēs jūtamies runājot.”
Vai man var būt vairāk nekā viena persona vai vairākas pielāgošanas iespējas?
Pašlaik Apple ierobežo vienu Persona skenēšanu, kas mani pārsteidz. Man patiktu dažādi Skota Steina iemiesojumi dažādās noskaņās vai vienkārši ar dažādām drēbēm. Lai gan Apple nepēta identitātes pārveidošanu, izmantojot skenēšanu, es novērtēju reālistisku briļļu iespējas, un es labprāt varētu pievienot citus piederumus.
“Cilvēki var atkārtoti reģistrēties vai vienkārši uzvilkt citu kreklu un reģistrēties vēlreiz,” saka Noriss. “Es pilnībā saprotu, kāpēc tas būtu kaut kas, ko mēs vēlētos. Wager mēs šobrīd koncentrējamies tikai uz vienu.”
Es mēģināju izmantot skenētus iemiesojumus ar Nreal AR brillēm 2020. gadā, izmantojot lietotni Spatial, kurā varēja izmantot tālruņus un austiņas kopā. Vai Apple arī to darīs?
Vai Personas kādreiz būtu pieejamas ārpus Imaginative and prescient Professional?
Es jau domāju par vairāk iespējām Personām, ne tikai Apple dārgajām austiņām, wager arī iPhone un citām ierīcēm.
Ko darīt, ja tie varētu būt personīgi palīgi mūsu FaceTime zvaniem? Es jau varu piezvanīt savai sievai FaceTime no Imaginative and prescient Professional, un viņa tur var redzēt manu 2D Personu. Viņa par to smejas, jo tas šķiet nedaudz pārdabiski. Ja Apple jau ir tik daudz atvēris durvis ar Animoji pakalpojumā FaceTime, kāpēc ne arī Personas?
Noriss uzstāj, ka Personas labāk darbojas Imaginative and prescient austiņās, un es tam piekrītu. Apmetumi kaut kā šķiet pārliecinošāki. Kad mēs sevi ievietojam vidē, kas jau daļēji sastāv no virtuālām lietām, šīs 3D skenētās identitātes šķiet dabiskākas. Wager fiziskais attālums un ķermeņa izpausmes var notikt arī telpā. Personas var atstāt savu lodziņu un pārvietoties kā rumpis, rokas un sejas.
“Es varu izstāstīt joku, un jūs to sapratīsit, jo jūs redzēsit manu ķermeņa valodu un manas sejas izteiksmes, kuras jūs neredzat divdimensiju ekrānā,” saka Sinklērs. “Šeit, mēs esam istabā kopā, un šķiet, ka mēs patiešām esam šeit.”
Kad viņa Persona stāv blakus manam pārblīvētajam galdam tādā virtuālajā formā, es saprotu, ka viņam ir taisnība.
Apple jau saņem atsauksmes par to biznesa vajadzībām. “Mēs par to dzirdam arī veselības aprūpē,” saka Noriss. “Ārsti, kuri veido procedūras un vēlas apmācīt citus cilvēkus. Viņiem nav jābrauc pa valsti. Viņi var vienkārši piedalīties FaceTime zvanā ar savām Personām.”
Es joprojām redzu nākotni, kurā iPhone, iPad, klēpjdatori un austiņas sadarbojas, un tas ir uzņēmumiem kā Microsoft un Qualcomm ir norādījuši kā tiltu starp austiņām un plakanā ekrāna ierīcēm. Samsung un Google apspriežam arī šos savienojuma punktu veidus ar Android XR. Apple ir ARKit iPhone un iPad, tāpēc iespējas jau pastāv.
Noriss saka, ka personām ārpus austiņām šobrīd kaut kā pietrūktu. “Lai pilnībā novērtētu pieredzi, jums ir jābūt gan uztveršanas iespējām, gan neticamām displeja iespējām. Viņiem patiešām ir jāsanāk kopā, lai radītu šādu burvju mirkli.”
Apple virzoties uz paredzamo viedo briļļu līniju nākotnē un neizbēgami uz modernākiem iPhone un iPad, šī filozofija varētu attīstīties. Personas ir sākums fundamentālām pārmaiņām tajā, kā mēs apstrādājam sadarbību un savienojumus.
Tomēr šobrīd jūs to nekad nepiedzīvosit, ja vien neatrodaties Imaginative and prescient Professional. Ar nepacietību gaidu laiku, kad ieejas biļete šajā maģiskajā telepresence pasaulē būs daudz pieejamāka un labāk izplatīta, lai tajā varētu ierasties vairāk cilvēku.
Šobrīd mana Persona galvenokārt ir pati par sevi. Man patiktu, ja es varētu biežāk atrast kādu kompāniju.
Nepalaidiet garām nevienu no mūsu objektīva tehniskā satura un laboratorijas pārskatiem. Pievienojiet CNET kā vēlamo Google avotu.
