Obuolių akiniai

Sklinda gandai, kad „Apple“ turi slaptą šimtų darbuotojų komandą, dirbančią su virtualios ir papildytos realybės projektais.

• Taip
• Nr

„Apple“ slaptasis papildytos ir virtualios realybės projektas

Turinys

1. „Apple“ slaptasis papildytos ir virtualios realybės projektas
• Mišrios realybės ausinės
• AR išmanieji akiniai
• iOS 14 AR nutekėjimai
• AR Xcode
• Valve partnerystė?
• Kiti gandai
2. Papildyta realybė prieš virtualią realybę
3. „Apple“ VR/AR komanda
• Nuomoja
• Įsigijimai
4. AR / VR patentai
5. Paleidimo data
6. Ateities AR/VR planai
7. „Apple“ akinių laiko juosta

„Apple“ daugiau nei 10 metų tyrinėja virtualiosios realybės ir papildytosios realybės technologijas, pagrįstas patentų paraiškomis, tačiau virtualiosios ir papildytos realybės populiarumas sparčiai išpopuliarėjo, kai buvo paleistas „ARKit“, „Apple“ žaismas tampa vis rimtesnis ir tikimasi, kad tai sukels AR/ VR produktas 2022 m.

Sklando gandai, kad „Apple“ turi slaptą tyrimų padalinį, kuriame šimtai darbuotojų dirba AR ir VR srityse ir tiria būdus, kaip naujas technologijas būtų galima panaudoti būsimuose „Apple“ produktuose. Per pastaruosius kelerius metus VR / AR samdymas išaugo, o „Apple“ įsigijo keletą AR / VR įmonių, tęsdama savo darbą AR / VR erdvėje.

Sklinda gandai, kad „Apple“ bent jau dirba du AR projektai, apimantys papildytosios realybės ausinių rinkinį, kuris bus išleistas maždaug 2022 m., o vėliau bus pristatyti ir elegantiškesni papildytos realybės akiniai. Tačiau daugelis gandų buvo nukreipti tik į akinius, todėl kyla painiavos dėl „Apple“ planų, tačiau panašu, kad AR/VRheadset bus pirmasis išleistas produktas.

„Apple“ analitikas Ming-Chi Kuo mano, kad „Apple“ „mišrios realybės“ ausinės išeis 2022 m. pabaigoje arba 2023 m. pradžioje, o „Apple Glasses“ pasirodys 2025 m., nors kiti šaltiniai teigė, kad akiniai pasirodys 2023 m. Ausinės yra AR/VR, dar žinomas kaip mišri realybė, o „Apple“ akiniai yra papildyta realybė.

Mišrios realybės ausinės

Informacija ir Bloombergas Abu yra sakę, kad „Apple“ kuria išmaniuosius akinius IR AR/VR ausines (dar žinomas kaip mišri realybė), o ausinės bus išleistos pirmiausia, o paskui akiniai. Kalbama, kad ausinės yra panašios į „Facebook“ virtualios realybės „Oculus Quest“ ausines, tačiau jos yra aptakesnio dizaino, kuriame naudojami audiniai ir lengvos medžiagos, kad ausinės būtų patogios.

Sakoma, kad tai būdinga du didelės raiškos 8K ekranai ir akių aptikimo kameros, kurios leis vartotojams „skaityti mažą šriftą“ ir „matyti kitus žmones, stovinčius prieš ir už virtualių objektų“. Ausinės galės nustatyti patalpų paviršius, kraštus ir matmenis „didesniu tikslumu nei esami rinkoje esantys įrenginiai“. Jis turės pažangesnį ekraną ir lustą, kuris bus dar greitesnis nei M1 procesorius 2020 m. Mac kompiuteriuose.

Informacija Vasarį sakė, kad bus įrengta daugiau nei tuzinas kamerų, skirtų stebėti rankų judesius, be kamerų, skirtų matyti išorinį pasaulį, o dizainas blokuoja periferinį matymą, kad šviesa nepatektų į naudotojo matymo lauką. Ekrane taip pat gali būti įmontuotas į išorę nukreiptas skydelis, kad naudotojas galėtų rodyti grafiką kitiems.

„Elec teigia, kad VR ausinės turės didelės raiškos mikro OLED ekraną su iki 3000 pikselių colyje. Anksčiau buvo kalbama apie mikro OLED ekraną, skirtą išmaniesiems akiniams, bet ne VR ausinėms.

„Apple“ analitikas Ming-Chi Kuo teigė, kad būsimos „Apple“ mišrios realybės ausinės bus 15 optinių kamerų modulių iš viso. Aštuoni iš 15 kamerų modulių bus naudojami permatomiems papildytosios realybės potyriams, šeši moduliai bus naudojami „novatoriškiems biometriniams duomenims“, o vienas kameros modulis bus naudojamas aplinkos aptikimui.

Kuo taip pat tiki „Apple“ ausinėse bus įdiegta pažangi akių stebėjimo sistema, naudojama siekiant užtikrinti intuityvią vizualinę patirtį, kuri sklandžiai sąveikauja su išorine aplinka, taip pat intuityvesnis valdymas, kurį galima valdyti akių judesiais ir sumažinta skaičiavimo našta. skiriamoji geba ten, kur vartotojas nežiūri.

Kalbant apie dizainą, ausinės apibūdinamos kaip „aptakus, lenktas skydelis, pritvirtintas prie veido tinklelio medžiaga ir keičiamomis galvos juostelėmis“. Tariamai vienoje galvos juostelėje yra erdvinio garso technologija, pvz., „AirPods Pro“, kad būtų galima mėgautis erdviniu garsu, o kita – ilgiau keliaujant. „Apple“ kuria įvairius valdymo metodus, įskaitant „į antpirščius panašų prietaisą, kurį galima nešioti ant piršto“. Ausinės taip pat galėtų reaguoti į naudotojo akių judesius ir rankų gestus, o vienas ausinių prototipas taip pat turėjo fizinį ratuką skydelio šone. „Apple“ taip pat išbandė „Siri“ įvestį.

Apple nori sukurti „App Store“. ausinėms, daugiausia dėmesio skiriant žaidimams, vaizdo turinio srautiniam perdavimui ir vaizdo konferencijoms. Jį aprašė Bloombergas kaip „visa apimanti 3-D skaitmeninė aplinka“, skirta žaidimams, vaizdo įrašų žiūrėjimui ir bendravimui.

Dabartiniai ausinių prototipai sakoma sverti apie 200–300 gramų, tačiau „Apple“ siekia sumažinti galutinį svorį iki 100–200 gramų, jei pavyks išspręsti technines problemas, todėl ausinės būtų lengvesnės nei esami VR įrenginiai. Ausinės bus nešiojamos su nepriklausoma maitinimu ir saugykla, tačiau jos nebus „mobilios“ kaip „iPhone“. Tai suteiks „įtraukiančią patirtį“, pranokstančią šiuo metu turimus VR produktus, ir ji gali būti integruota su „Apple TV+“ ir „Apple Arcade“.

Ausinių papildytos realybės funkcijos yra „labiau ribotos“, ir nors planuojama išleisti 2022 m., teigiama, kad „Apple“ susidūrė su keliomis plėtros kliūtimis ir turi „konservatyvius“ įrenginio pardavimo įvertinimus. „Apple“ tikisi parduoti maždaug 180 000 vienetų, o tai prilygsta brangesniems prietaisams, tokiems kaip „Mac Pro“. Tikimasi, kad ausinės bus daug brangesnės nei kitų įmonių ausinės ir Informacija sako, kad Apple aptarė ausinių kainą apie 3000 USD.

Pradiniame projekte buvo ventiliatorius ir galingi procesoriai, todėl įrenginys buvo per sunkus. „Apple“ tariamai nusprendė priartinti ausines prie veido, kad sumažintų jų dydį. Naudodami laisvų rankų įrangą vartotojai negalės nešioti akinių, todėl „Apple“ sukūrė sistemą, pagal kurią virš VR ekranų galima įdėti pasirinktinius receptinius lęšius.

Kuo mano, kad ausinės naudos hibridinį Frenelio lęšių dizainą , apimantis tris vienai akiai sudėtus lęšius, pagamintus iš lengvo plastiko. Dizaino tikslas – užtikrinti itin trumpus židinio nuotolius ir geresnes optines charakteristikas, taip pat platų matymo lauką ir išlaikyti ausinių svorį iki 150 gramų.

Kalbant apie galią, būsimos AR/VR ausinės turės a aukščiausios klasės pagrindinis procesorius tai panašu į M1 lustą, kurį Apple debiutavo savo Apple silicio Mac kompiuteriuose praėjusiais metais, kartu su žemesnės klasės procesoriumi, skirta su jutikliu susijusiems įrenginio aspektams valdyti.

„Apple“ analitikas Ming-Chi Kuo teigia, kad ji galės veikti savarankiškai, nepasitikėdamas „Mac“ ar „iPhone“, o tai nukrypsta nuo ankstesnių gandų, teigiančių, kad reikalauti pririšimo prie iPhone. Didelės galios lustas, esantis ausinėse, valdys porą 4K Micro OLED ekranų iš Sony ir šešių iki aštuonių optinių modulių, kad užtikrintų AR pagrįstą funkciją. Apple turi baigtas darbas AR/VR ausinių SoC ir optimizuos belaidžiam duomenų perdavimui, vaizdo įrašų suspaudimui ir išglaudinimui bei energijos vartojimo efektyvumui, kad maksimaliai tarnautų baterija, be to, jis neturi neuroninio variklio, kaip kai kurie kiti Apple lustai.

Būsimos „Apple“ mišrios realybės ausinės bus pasiūlyti WiFi 6E palaikymas, kuris yra naujausia „WiFi“ specifikacija. Teigiama, kad „Apple“ planuoja įdiegti „WiFi 6E“, kad su tvirtu belaidžiu ryšiu suteiktų aukščiausios klasės, įtraukiančios patirties. „WiFi 6E“ turi visus „WiFi 6“ privalumus, tačiau be 2,4 GHz ir 5 GHz juostų prideda 6 GHz spektrą, kad padidėtų pralaidumas ir būtų mažiau trukdžių tarp įrenginių.

Mišrios realybės ausinės

Dizaineris Antonio De Rosa turi sukurti 3D atvaizdai remiantis informacija, kuria pasidalino Informacija , leidžiantis pažvelgti į tai, kaip gali atrodyti Apple mišrios realybės ausinės, remiantis dabartiniais gandais.

Informacija apibūdino ausines kaip „aptakų, lenktą skydelį, pritvirtintą prie veido tinklelio medžiaga ir keičiamomis galvos juostelėmis“, siūlomą įvairių spalvų.

Ankstyvieji ausinių prototipai

Ankstesni gandai iš CNET 2018 m. pasiūlė, kad „Apple“ kuria galingas AR/VR ausines su 8K ekranu kiekvienai akiai, kuri būtų atsieta nuo kompiuterio ar išmaniojo telefono ir veiktų tiek su virtualiosios, tiek su papildytosios realybės programomis.

Užuot pasikliavę ryšiu su išmaniuoju telefonu ar kompiuteriu, laisvų rankų įranga CNET aprašytas prisijungtų prie „skirtos dėžutės“, naudodamas didelės spartos trumpojo nuotolio belaidžio ryšio technologiją, vadinamą 60 GHz WiGig. Dėžutė būtų maitinama pasirinktiniu 5 nanometrų „Apple“ procesoriumi, kuris yra „galingesnis už bet ką šiuo metu turimą“. Dėžutė, matyt, primena kompiuterio bokštą, bet „tai nebus tikrasis Mac kompiuteris“. Šis į dėžutę panašus dizainas buvo ankstyvųjų gandų objektas ir gali būti prototipas, kuris nuo to laiko buvo atsisakyta aptakesnės versijos, kurią dabar aprašo gandai.

Teigiama, kad vidiniai nesutarimai ilgainiui suformavo ir pakeitė „Apple“ tikslus dėl AR ausinių. Apple buvo iš pradžių taikosi itin galingai sistemai, kuri buvo su šakotuvu procesoriui laikyti, kaip aprašyta aukščiau, tačiau Jony Ive'as, kuris nuo to laiko paliko įmonę, nenorėjo parduoti įrenginio, kuriam reikalingas atskiras stacionarus įrenginys visam funkcionalumui.

Vietoj to norėjau ausinių su mažiau galinga technologija, kurią būtų galima įterpti tiesiai į įrenginį, tačiau AR / VR komandos vadovas Mike'as Rockwellas norėjo galingesnio įrenginio. Tai buvo priešprieša, kuri truko mėnesius, ir Timas Cookas galiausiai stojo į Ive'ą. Teigiama, kad Ive pirmenybę teikia AR išmaniesiems akiniams, kurie taip pat yra kuriami.

AR išmanieji akiniai

„Apple“ kuria papildytosios realybės akinių rinkinį, kurį nutekėjo Jonas Prosseris pasiūlė „Apple“ vadins „Apple Glass“. Šis pavadinimas būtų neįprastas pasirinkimas, atsižvelgiant į panašumą į „Google Glass“ – produkto, kuris egzistavo ilgai prieš tai, kai pasirodė „Apple“ darbas su AR akiniais, pavadinimas, todėl jis gali būti netikslus.

Teigiama, kad akiniai atrodo panašiai kaip įprasti akiniai, o abu lęšiai turi ekranus, su kuriais galima sąveikauti naudojant gestus. Bus galimybė įsigyti akinius be receptinių lęšių už pradinę 499 USD kainą, o receptinius lęšius galima įsigyti už papildomą mokestį.

Pagal Bloombergas , akiniai yra ankstyvas vystymosi etapas , net anksčiau nei AR/VR ausinės, su kuriomis dirba „Apple“. Akiniai buvo apibūdinami kaip „po kelių metų“, nors „Apple“ iš pradžių planavo juos išleisti jau 2023 m. Dabartinis prototipas primena aukščiausios klasės akinius nuo saulės storais rėmeliais, kuriuose yra baterija ir lustai.

„Apple“ tariamai planuoja naudoti „Pažangiausi“ OLED mikroekranai, kuriuos „Sony“ tiekia papildytos realybės akiniams, apie kuriuos kalbama gandų. „Sony“ OLED mikrovaizdžiai pasižymi itin greitu atsako dažniu, itin dideliu kontrastu, plačia spalvų gama, dideliu skaisčiu, mažu atspindžiu ir integruotomis tvarkyklėmis, užtikrinančiomis ploną ir lengvą dizainą. Teigiama, kad akiniai turi 0,5 colio ekraną, kurio skiriamoji geba yra 1280 x 960.

Kuo tikisi, kad AR akiniai bus parduodami kaip „iPhone“ priedas ir pirmiausia atliks ekrano vaidmenį, perkeldamas skaičiavimus, tinklų kūrimą ir padėties nustatymą į „iPhone“ kartu su akiniais. teikiant pirmiausia mobiliesiems skirta „optinė permatoma AR patirtis“. Siūlydami AR akinius kaip „iPhone“ priedą, „Apple“ išliks ploni ir lengvi. Prosseris teigia, kad akiniai atrodys panašiai kaip „Ray-Ban Wayfarers“ arba akiniai, kuriuos nešioja Timas Cookas.

Bloombergas teigė, kad „Apple“ akiniai veiks su „rOS“ arba „realybės“ operacine sistema. Teigiama, kad „rOS“ yra pagrįsta „iOS“ – operacine sistema, kuri veikia „iPhone“. AR ausinėms „Apple“ kuria „sistemos pakete“ lustą, panašų į „Apple Watch“, nors, kaip minėta pirmiau, ji priklausys nuo „iPhone“.

Kurdama AR ausines, Apple laikė jutiklinius skydelius, aktyvinimą balsu ir galvos gestus kaip įvesties metodus, o įvairių programų, nuo žemėlapių sudarymo iki žinučių siuntimo, prototipai. Virtualios posėdžių salės ir 360 laipsnių vaizdo įrašų atkūrimas taip pat yra nagrinėjamos koncepcijos.

Manė, kad iš pradžių sklando gandai 2020 m. paleidimo , Bloombergas tiki AR akiniais galėtų ateiti Iki išleidimo liko metai, o VR ausinės pasirodys 2022 m. Ataskaita iš „DigiTimes“. pasiūlė, kad „Apple“ AR akiniai pasirodys 2021 m., o „Apple“ analitikas Ming-Chi Kuo tikisi, kad 2022 m. anksciausiai .

Nutekėjęs Jonas Prosseris mano, kad „Apple“ pristatys savo AR akinius 2021 m. kovo arba birželio mėn., tačiau tai atrodo netikslu, atsižvelgiant į skaičiavimus. Bloombergas ir Kuo.

Prosseris taip pat teigia, kad „Apple“ kuria riboto leidimo „Steve Jobs Heritage“ išmaniųjų akinių versiją, kuri yra sukurta taip, kad atrodytų kaip apvalūs berėmės akiniai, kuriuos anksčiau nešiojo Steve'as Jobsas, tačiau Bloombergas Markas Gurmanas pavadino šį gandą „visiška fikcija“.

Apple yra darbas su TSMC sukurti „itin pažangius“ mikro OLED ekranus, kurie bus naudojami būsimuose „Apple“ papildytos realybės įrenginiuose, pavyzdžiui, išmaniuosiuose akiniuose. Teigiama, kad ekranai yra mažesni nei vieno colio dydžio.

Mikro OLED ekranai yra pastatyti tiesiai ant plokštelių, o ne ant stiklo pagrindo, todėl ekranai yra plonesni, mažesni ir efektyvesni. Teigiama, kad mikro OLED ekranų kūrimas yra bandomosios gamybos stadijoje ir praeis keleri metai, kol Apple ir TSMC bus pasiruošę masinei gamybai, todėl šie ekranai bus tinkami Apple Glasses akiniams, kurie, kaip gandai, bus išleisti maždaug 2023 m.

2021 m. pradžioje „Apple“. sakoma, kad yra įžengia į papildytos realybės akinių prototipo „antrąjį kūrimo etapą“. Trečiąjį akinių kūrimo etapą numatoma atlikti po kelių mėnesių, o tada, kai bus baigtas prototipo dizainas, nešiojami akiniai bus per šešių iki devynių mėnesių inžinerinės patikros laikotarpį.

iOS 14 AR nutekėjimai

Kodas ir vaizdai rasta iOS 14 patvirtinkite „Apple“ darbą su AR arba VR ausinėmis su aptikta nuotrauka, kurioje pavaizduotas bendrai atrodantis ausinių valdiklis, savo dizainu panaši į „HTC Vive Focus“ ausines. „Apple“ vidiniams bandymams naudojo „HTC Vive“ aparatinę įrangą.

„Apple“ išbando savo AR įrangą naudodama „iOS 14“ programą „Gobi“ kartu su QR kodais, kad išbandytų papildytos realybės patirtį. Viena iš šių papildytosios realybės patirčių yra boulingo žaidimas per pėsčiųjų perėją, suaktyvinamas tam tikroje perėjoje Sanivale, Kalifornijoje.

AR Xcode

Kodas Xcode 11 patvirtina Apple darbas tam tikrose AR ausinėse. Yra nuorodų į kodinius testavimo įrenginius ir sistemas bei su šiais įrenginiais susijusį sistemos apvalkalą. Nuorodos rodo, kad „Apple“ kuria palaikymą ant veido montuojamoms AR, panašioms į „Google Daydream“.

Valve partnerystė?

Pagal Taivano svetainę „DigiTimes“. , „Apple“ bendradarbiauja su žaidimų kūrėjas Valve dėl gandų sklindančių AR ausinių. „Valve“ išleido savo pirmąsias VR ausines „Valve Index“ 2019 m. balandžio mėn.

„Valve“ anksčiau bendradarbiavo su „Apple“, kad „macOS High Sierra“ sukurtų savo VR ausinių palaikymą, panaudodama „eGPU“ palaikymą su „Mac“ „SteamVR“ programinės įrangos versija.

Kiti gandai

2017 m. lapkritį „Apple“ įsigijo Vrvana – bendrovę, kuri sukūrė mišrios realybės ausines pavadinimu „Totem“. „Vrvana“ technologija gali būti naudojama būsimose „Apple“ ausinėse. „Apple“ įsigijo „Vrvana“ ir įsigijo „Akonia Holographics“ – įmonę, gaminančią AR išmaniųjų akinių lęšius.

Gandai taip pat rodo, kad „Apple“ galėtų įtraukti papildytosios realybės tyrimus į savo vykdomą automobilių projektą kaip automobilio programinės įrangos sistemos dalį, kuri galėtų apimti „heads-up“ ekraną ar kitas funkcijas.

Pastaba: Matote klaidą šioje apžvalgoje arba norite pateikti atsiliepimą? .

Papildyta realybė prieš virtualią realybę

Papildyta realybė (AR) ir virtualioji realybė (VR) yra panašios technologijos, tačiau jos labai skiriasi, o galimos jų taikymo galimybės labai skiriasi. Virtuali realybė reiškia visapusišką įtraukiantį potyrį virtualiame pasaulyje, o papildyta realybė reiškia modifikuotą realaus pasaulio vaizdą.

Skirtumą galbūt geriausiai galima apibendrinti palyginus du produktus, vieną AR ir vieną VR. Google akiniai , nebenaudojamas „Google“ išmaniųjų akinių rinkinys, yra papildytos realybės pavyzdys. „Google Glass“, kurį dėvėjo akys, leido vartotojams matyti pasaulį tokį, koks jis yra, tačiau jame buvo rodomas ekranas, perdengęs atitinkamą kompiuterio pateiktą informaciją apie realų pasaulio vaizdą, pvz., vietinius orus, žemėlapius ir pranešimus.

Tai panašu į tai, ką sakoma, kad „Apple“ dirba su savo „išmaniaisiais akiniais“, apie kuriuos kalbama gandų.

Palyginimui, „Facebook“. Oculus Rift yra virtualios realybės ausinės, siūlančios įtraukiančią vizualinę patirtį, kuri realaus pasaulio nepapildo papildoma jutimine informacija – jos visiškai pakeičia realų pasaulį imituotu pasauliu.

Papildyta realybė suteikia kompiuteriu sukurtą kontekstą ir informaciją apie mus supantį pasaulį, kartu leidžia mums bendrauti su mus supančia aplinka, o virtualioji realybė skirta izoliuoti mus nuo aplinkos, kad galėtume bendrauti su fiktyviais pasauliais.

kaip užrakinti apps iphone

Galimos jų pritaikymo galimybės labai skiriasi. Virtualioji realybė daugiausia dėmesio skiria įtraukiam turinio vartojimui, nes naudotojas jaučiasi taip, lyg iš tikrųjų patirtų tai, kas vyksta imituojamame pasaulyje, pasitelkus vaizdinį, lytėjimo ir garso grįžtamąjį ryšį. Šiuo metu virtuali realybė iš esmės yra susijusi su žaidimais, tačiau ji taip pat gali atkurti realaus pasaulio patirtį švietimo ar mokymo tikslais.

Papildyta realybė nepriklauso nuo įtraukiančio turinio ir, nors ir mažiau jaudinanti, nes ji papildo realybę, o ne ją pakeičia, ji turi platesnį galimų pritaikymų spektrą. Tiesą sakant, papildytos realybės programos ir žaidimai yra lengvai prieinami iOS 11 Ačiū ARKit.

Naudodamas ARKit, iOS įrenginys gali atpažinti paviršių, pavyzdžiui, lentelę, ir tada prie jo galima pridėti virtualių objektų. Dėl „iPhone“ ir „iPad“ skaičiavimo galios „ARKit“ papildytos realybės galimybės yra įspūdingos. ARKit jau naudojamas kuriant daugybę programų ir žaidimų, sujungiant skaitmeninius objektus su realiu pasauliu.

žaisti

„Apple“ gali siekti produkto, kuris veiktų tiek su papildyta, tiek su virtualia realybe, kaip rodo naujausi gandai, rodantys, kad dirbama su AR/VR ausinėmis. Toks produktas galėtų būti naudojamas rimtoms virtualios realybės programoms, taip pat papildytosios realybės patirčiai, ir jis būtų panašus į „Microsoft HoloLens“.

„Apple“ VR/AR komanda

„Apple“ darbas su virtualia ir papildyta realybe siekia keletą metų, tačiau gandai pasklido nuo 2015 m. kovo mėn., kai pasklido žinia, kad „Apple“ turi nedidelę komandą, kuri dirba su papildyta realybe. 2015 m. ir 2016 m. pradžioje „Apple“ komanda augo, nes bendrovė samdė darbuotojus, turinčius AR/VR technologijų patirties, ir kelis kartus įsigijo susijusių įsigijimų.

„Apple“ AR/VR komandą sudaro keli šimtai inžinierių iš visos „Apple“, kurie visi turi patirties virtualios ir papildytos realybės srityje. Komanda dirba biurų parkuose tiek Cupertino, tiek Sunnyvale, o „Apple“ tiria keletą techninės ir programinės įrangos projektų kodiniu pavadinimu „T288“.

„Apple“ papildytos realybės komanda sujungia „savo techninės ir programinės įrangos veteranų stipriąsias puses“ ir jai vadovauja Mike'as Rockwellas, atvykęs iš Dolby. Buvę tokių įmonių kaip „Oculus“, „HoloLens“, „Amazon“ (iš VR komandos), 3D animacijos įmonės „Weta Digital“ ir „Lucasfilm“ darbuotojai „Apple“ dirba su AR.

Buvęs „Apple“ techninės įrangos inžinierių vadovas Danas Riccio 2021 m. sausį pasikeitė į naują vaidmenį kur jis yra prižiūri „Apple“ darbą AR/VR ausinėse. Projektas susidūrė su plėtros iššūkiais, o „Apple“ vadovai mano, kad Riccio dėmesys gali padėti.

Nuomoja

Vienas žinomiausių „Apple“ AR/VR samdomų darbuotojų buvo kompiuterių mokslų profesorius Dougas Bowmanas, anksčiau vadovavęs Virdžinijos technikos žmogaus ir kompiuterio sąveikos centrui. Jis specializuojasi trimatės vartotojo sąsajos kūrime ir parašė šia tema knygą apie 3D sąsajas ir įtraukiančių virtualių aplinkų privalumus. Jis turi patirties tiek su virtualia, tiek su papildyta realybe.

„Apple“ taip pat pasamdė darbuotojus, dirbusius su virtualios arba papildytos realybės produktais „Microsoft“ ir „Lytro“. Teigiama, kad kai kurie neseniai pasamdyti asmenys buvo iš „Microsoft“ HoloLens komandos, o kiti dirbo „Lytro“ įmonėje, kuri gamina kamerą, galinčią sujungti tiesioginį veiksmą ir kompiuterinę grafiką, kad būtų galima mėgautis tiesioginio veiksmo VR patirtimi. „HoloLens“ komandos darbuotojai turėtų patirties kuriant pažangias papildytos realybės ausines.

Lytro Immerge 360 ​​laipsnių kamera

Zeyu Li , kuris dirbo pagrindiniu kompiuterinės vizijos inžinieriumi Magic Leap (paleidimo įmonėje, kuriančioje ant galvos montuojamą AR/VR ekraną), dabar dirba „Apple“ kaip „vyresnysis kompiuterinės vizijos algoritmo inžinierius“.

Jurijus Petrovas, buvęs „Facebook“ priklausančios „Oculus“ mokslininkas, dabar dirba „Apple“ „tyrėju“. Pasak jo „LinkedIn“ profilio, Petrovas studijavo virtualios realybės patirtį, kūrė optikos prototipus ir kūrė kompiuterinio modeliavimo programinę įrangą.

Papildytos realybės ekspertas Jeffas Norrisas prie „Apple“ prisijungė 2017 m. balandžio mėn., būdamas vyresniuoju vadovu, dirbančiu bendrovės papildytos realybės komandoje. Norrisas NASA įkūrė Mission Operations Innovation Office ir JPL Ops Lab. Jis vadovavo keliems projektams, skirtiems žmogaus ir sistemos sąveikai, akcentuojant virtualią ir papildytą realybę.

2018 m. gegužę „Apple“ pasamdė Sterlingą Crispiną, kuris sukūrė piešimo programą mobiliesiems VR ausinėms. „Cyber ​​Paint“ leidžia VR ausinių naudotojams kurti 2D 260 laipsnių nuotraukas „Oculus Go“, „Daydream“, „GearVR“ ir „Vive Focus“. Crispino „LinkedIn“ puslapyje rašoma, kad jis dirba „prototipų kūrimo tyrėju“, o tai rodo, kad jis prisijungė prie komandos, kuri, kaip gandai, dirba su VR/AR ausinių technologija.

„Apple“ 2018 m. gruodį pasamdė buvusį vyresnįjį „Tesla“ ir „Microsoft HoloLens“ dizainerį Andrew Kimą ir, atsižvelgiant į jo istoriją, jis galėtų dirbti su „Apple“ gandų skleidžiamu AR akinių projektu arba būsimu „Apple“ automobiliu, kuris, kaip teigiama, bus kuriamas.

„Jaunt VR“ įkūrėjas Arthuras van Hoffas 2019 m. balandžio mėn. prisijungė prie „Apple“ vyresniuoju architektu. Prieš dirbdamas „Apple“, jo įmonė sukurta VR aparatinė įranga , įskaitant 100 000 USD vertės 3D VR kamerą, pavadintą Jaunt One. Prieš tai, kai van Hoffas paliko įmonę, Jauntas patyrė nesėkmę ir pasirinko AR patirtį.

„Apple“ komandą sudaro šimtai darbuotojų, todėl daugelis kitų virtualios realybės ekspertų samdomų darbuotojų buvo pastebėti. „LinkedIn“ yra keli programinės įrangos inžinieriai, turintys virtualios realybės patirties, kuriuos įdarbina „Apple“, tačiau neaišku, ar jie dirba slaptoje AR/VR komandoje.

„Apple“ 2019 m. liepą perkėlė Kimą Vorrathą, vieną iš savo programinės įrangos vadovų, papildytos realybės ausinės padalinys, kad „įvestų tam tikrą tvarką“ komandoje. Vorrathas 15 metų prižiūrėjo programų valdymą programinės įrangos kūrimo komandoje ir buvo apibūdinamas kaip „galinga jėga“, užtikrinanti, kad darbuotojai laikytųsi terminų, o taip pat pašalintų klaidas.

Įsigijimai

Daugelis „Apple“ AR / VR komandos narių galėjo prisijungti prie bendrovės per įsigijimus. Nuo 2015 m. „Apple“ įsigijo kelias įmones, kūrusias su AR / VR susijusius produktus, o kai kurie jos AR / VR įsigijimai siekia net keletą metų.

2018 m. rugpjūčio mėn. „Apple“ įsigijo „Akonia Holographics“ – startuolį, gaminantį papildytos realybės akinių lęšius. „Akonia Holographics“ reklamuoja „pirmąją pasaulyje parduodamą tūrinę holografinę atspindinčią ir bangolaidžio optiką, skirtą skaidriems išmaniųjų akinių ekrano elementams“.

Teigiama, kad jos gaminamuose ekranuose naudojama bendrovės „HoloMirror“ technologija, užtikrinanti „ypač aiškų, visų spalvų veikimą“, kad būtų galima sukurti „ploniausius, lengviausius nešiojamus ekranus pasaulyje“.

2017 m. lapkritį „Apple“ įsigijo Vrvana – bendrovę, kuri sukūrė mišrios realybės ausines pavadinimu „Totem“. Totem, kuris niekada nebuvo išleistas visuomenei, buvo sukurtas taip, kad vienoje ausinėje būtų sujungtos ir papildytos, ir virtualiosios realybės technologijos, sujungiant visas VR galimybes su praleidžiamomis kameromis, kad būtų galima naudoti ekrane pagrįstas papildytos realybės funkcijas.

Totemas iš esmės naudojo kamerų rinkinį, kad projektuotų realaus pasaulio vaizdus į savo integruotą 1440p OLED ekraną. Tai šiek tiek unikalus metodas, išskiriantis jį iš konkuruojančių produktų, tokių kaip Microsoft HoloLens, kuris naudoja skaidrų ekraną virtualiajai ir papildytajai realybei sujungti. „Apple“ gali planuoti panaudoti kai kurias „Totem“ technologijas būsimame gaminyje.

„Apple“ 2013 m. įsigijo Izraelyje įsikūrusią 3D kūno jutimo įmonę „PrimeSense“, sukeldama spėliones, kad „Apple TV“ bus įdiegtos judesio funkcijos. PrimeSense 3D gylio technologija ir judesio jutimo galimybės buvo naudojamos pradinėje Microsoft Kinect platformoje.

„PrimeSense“ naudojo beveik IR šviesą, kad į kambarį ar sceną projektuotų nematomą šviesą, kurią vėliau nuskaito CMOS vaizdo jutiklis, kad būtų sukurtas virtualus objekto ar asmens vaizdas. Tai įgalina programinės įrangos sąsajų valdymą judesiais, bet taip pat gali atlikti tokius veiksmus, kaip matuoti virtualius objektus ir pateikti santykinius atstumus ar dydžius, naudingus papildytosios realybės programoms, pvz., interaktyviems žaidimams, patalpų žemėlapiams ir kt. „PrimeSense“ technologija taip pat gali sukurti labai tikslius 360 laipsnių žmonių ir objektų nuskaitymus, kurie gali būti naudingi virtualios realybės programoms.

2015 m. gegužę „Apple“ įsigijo papildytosios realybės startuolį „Metaio“. „Metaio“ sukūrė produktą, pavadintą „Metaio Creator“, kurį naudojant tik per kelias minutes buvo galima sukurti papildytos realybės scenarijus. Prieš įsigyjant „Apple“, „Metaio“ programinę įrangą naudojo tokios kompanijos kaip „Ferrari“, sukūrusios papildytos realybės saloną.

„Metaio“ technologija taip pat buvo naudojama Berlyne, kad Berlyno sienos vietoje besilankantiems žmonėms būtų suteikta galimybė naudotis išmaniuoju telefonu ar planšetiniu kompiuteriu, kad pamatytų, kaip ta vieta atrodė, kai Berlyno siena vis dar stovėjo. „Metaio“ technologija yra tokia, kurią galima panaudoti papildytos realybės galimybėms įdiegti „Apple“ programose, pvz., „Maps“.

„Apple“ įsigijo „Faceshift“ 2015 m. rugpjūčio mėn. 2015 m. tai buvo antrasis papildytos realybės pirkimas. Prieš įsigydama „Apple“, „Faceshift“ dirbo su žaidimų ir animacijos studijomis kurdama technologijas, skirtas greitai ir tiksliai užfiksuoti veido išraiškas naudojant 3D jutiklius, paverčiant jas animuotais veidais. realiu laiku. „Faceshift“ taip pat kūrė į vartotoją orientuotą produktą, kuris leistų žmonėms „Skype“ realiuoju laiku paversti savo veidus animacinių filmų ar monstrų veidais.

„Faceshift“ technologija turi daugybę galimų naudojimo atvejų, ir atrodo, kad „Apple“ naudoja šią funkciją „Animoji“ maitinimui „iPhone X“.

Kompaniją „Emotient“, kuri sukūrė veido išraiškos analizės įrankius, 2016 m. sausio mėn. įsigijo „Apple“. „Emotient“ technologija naudoja dirbtinį intelektą ir mašininį mokymąsi, kad nuskaitytų žmogaus emocijas – funkcijas, kurias reklamuotojai naudojo realiame pasaulyje, kad nustatytų emocines reakcijas. skelbimai.

„Apple“ gali atlikti daugybę dalykų su „Emotient“ – nuo ​​geresnio veido aptikimo programoje „Photos“ iki klientų jausmų analizės „Apple“ mažmeninės prekybos parduotuvėse iki „iOS“ įrenginių atrakinimo, tačiau ji taip pat gali būti naudojama AR/VR. Kaip ir „Faceshift“, „Emotient“ technologija galėtų būti naudojama veido išraiškoms analizuoti ir transformuoti kuriant virtualius avatarus, naudingus socialinės žiniasklaidos tikslams ir žaidimams. Tikėtina, kad „Animoji“ buvo naudojama emocijų technologija.

2016 m. pradžioje įsigyta „Flyby Media“ yra kita bendrovė, kuri dirbo su papildyta realybe. Praskristi sukūrė programėlę kuris veikė su „Google“ 3D jutikliu aprūpintu „Project Tango“ išmaniuoju telefonu, leidžiančiu prisegti pranešimus prie realaus pasaulio objektų ir peržiūrėti kitus vienu iš „Google“ įrenginių.

Pavyzdžiui, asmuo gali „nuskaityti“ orientyrą, pvz., San Francisko Auksinių vartų tiltą, ir parašyti prie jo pridėtą pranešimą. Vėliau prie tilto apsilankęs asmuo galės nuskaityti tiltą naudodamas „Flyby“ programą, kad pamatytų pranešimą. „Flyby“ programa tikriausiai atkreipė „Apple“ dėmesį, nes ji sugebėjo atpažinti ir suprasti įvairius nuskaitytus objektus – technologiją, kurią „Apple“ galėjo įvairiais būdais naudoti tokiose programose kaip nuotraukos ir žemėlapiai.

2017 m. vasario mėn. „Apple“ įsigijo „RealFace“ – kibernetinio saugumo ir mašininio mokymosi įmonę, kuri specializuojasi veido atpažinimo technologijoje, kuri gali būti panaudota būsimoms papildytosios realybės funkcijoms.

„RealFace“ sukūrė veido atpažinimo technologiją, integruojančią dirbtinį intelektą, kad būtų galima atpažinti veidą be trinties. Tikėtina, kad buvo naudojama „Realface“ technologija „iPhone X“. , pirmasis „Apple“ išmanusis telefonas su veido atpažinimo funkcija „Face ID“ forma.

„Apple“ 2020 m. gegužės mėn įsigijo NextVR , Kalifornijoje įsikūrusi įmonė, kuri sujungė virtualią realybę su sportu, muzika ir pramogomis, siūlanti VR patirtį žiūrint tiesioginius įvykius VR ausinėse iš PlayStation, HTC, Oculus, Google, Microsoft ir kitų gamintojų.

„Apple“ 2020 m. rugpjūčio mėn įsigijo VR startup Spaces , įmonė, kuri sukūrė virtualios realybės patirtį, kurią žmonės galėtų patirti prekybos centruose ir kitose vietose, pvz., „Terminatoriaus išsigelbėjimas: kova už ateitį“. „Spaces“ taip pat sukūrė virtualios realybės patirtį vaizdo komunikacijos programoms, tokioms kaip „Zoom“, o tai yra kažkas, ką „Apple“ galėtų įtraukti į būsimą AR / VR produktą.

AR / VR patentai

„Apple“ pateikė kelis patentus, tiesiogiai susijusius su virtualios realybės ausinėmis, ir visi jie buvo pateikti kelerius metus. Nors technologijos tikriausiai šiek tiek pažengė į priekį, jos suteikia įdomių idėjų, kurias Apple tyrinėjo praeityje.

2008 m. patento paraiška apėmė gana paprastą „asmeninę rodymo sistemą“, skirtą imituoti buvimo kino teatre patirtį žiūrint vaizdo įrašą.

Antrajame patente buvo aprašyta „Head Mounted Display System“ su „lazerio varikliu“, kuris vaizdus projektuoja ant skaidraus stiklo ekrano, nešiojamo ant akių, panašiai kaip akiniai. Šioje konfigūracijoje ausinės prijungtos prie nešiojamojo vaizdo grotuvo, pvz., „iPod“, kad būtų suteikta apdorojimo galia.

Trečiasis patentas, iš pradžių pateiktas 2008 m., buvo panašaus dizaino, apimantis į akinius panašias vaizdo ausines, skirtas leisti vartotojams žiūrėti filmus ir kitą turinį. Jame buvo išdėstyti du reguliuojami optiniai moduliai, išdėstyti kartu su vartotojo akimi, kurie gali atlikti regėjimo korekciją ir leisti žiūrėti 3D turinį. „Apple“ tai apibūdino kaip asmeninę žiniasklaidos žiūrėjimo patirtį.

KAM ketvirtasis patentas nuo 2008 m. dengė vaizdo ausinių rėmelį, panašų į „Google Glass“, kuris leistų vartotojui įstumti „iPhone“ ar „iPod“ į ausines, kad būtų rodomas vaizdas. Ausinės buvo apibūdintos kaip papildytos realybės produktas, leidžiantis vartotojams žiūrėti vaizdo įrašus ar tikrinti el. paštą stebint aplinką.

Be patentų, susijusių su ausinėmis, „Apple“ taip pat pateikė patentų, kuriuose aprašomi kiti būdai, kaip virtualios ir papildytos realybės funkcijos galėtų būti įdiegtos jos įrenginiuose. Pavyzdžiui, 2009 m. patento paraiška apėmė fotoaparatais aprūpintus 3D ekranus, kurių perspektyva pasikeistų, atsižvelgiant į santykinę vartotojo padėtį.

Toks ekranas aptiktų galvos judesius, leisdamas vartotojui pajudinti galvą ir pažvelgti į 3D vaizdą iš skirtingų kampų, kartu įtraukdamas vartotojo aplinkos elementus.

2010 ir 2012 m. patentuose aprašytas judesio jutiklių naudojimas kuriant 3D sąsają iOS įrenginiams naudojant papildytosios realybės metodus. „Apple“ sąsają apibūdino kaip „virtualią patalpą“, kurioje valdoma įrenginio orientacija įtaisytaisiais jutikliais arba gestais.

2011 m. „Apple“ pateikė patentą išplėstinės realybės funkcijai Žemėlapių programoje, susijusiai su atstumo iki žymių orientyrų nustatymu. Naudodamas fotoaparatą, vartotojas gali pažvelgti į juos supančią zoną ir realiuoju laiku gauti atstumo tarp dviejų taškų įvertinimus bei atitinkamos informacijos perdangas.

2014 m. pateiktas ir 2017 m. išduotas patentas apima mobiliąją papildytosios realybės sistemą, galinčią aptikti aplinkoje esančius objektus ir perdengti juos virtualia informacija, naudojant kameras, ekraną ir vartotojo sąsają. „Apple“ apibūdina sistemą kaip idealią prie galvos pritvirtintam ekranui, tačiau taip pat rodo, kad ji naudojama išmaniuosiuose telefonuose.

„Apple“ kuria virtualios realybės technologiją, kuri galėtų būti naudojami autonominėse transporto priemonėse . Keli „Apple“ patentai aprašo sistemą, apimančią automobilyje esančią virtualios realybės sistemą su VR ausinėmis, skirtomis pramogoms ir palengvinti ligą, atsirandančią dėl tokių užduočių kaip skaitymas ir darbas, kai transporto priemonė juda.

KAM 2020 m. liepos mėn. patento paraiška apima galimus Apple Glasses įvesties būdus, aprašant sistemą, kurioje akiniai naudoja infraraudonųjų spindulių šilumos jutiklį, kad aptiktų, kada kas nors paliečia realaus pasaulio objektą, todėl akiniai gali projektuoti valdiklius į realų paviršių.

Taikant šį metodą, „Apple Glasses“ AR valdymo sąsajoje galėtų projektuoti bet kurį faktinį objektą realiame pasaulyje, kad būtų sukurtas mišrios realybės perdangos efektas.

„Apple“ 2021 m. vasario mėn pateikė keletą patentų susijęs su jos darbu kuriant mišrios realybės ausines, apie kurias sklinda gandai, kurių patentai apima dizaino elementus, objektyvo reguliavimą, akių sekimo technologiją ir programinę įrangą.

„Apple“ sukūrė kelis metodus, kaip padaryti ausines patogesnes nešioti, tuo pačiu išlaikyti jas saugias ir apsaugoti nuo šviesos, be to, yra išsami objektyvo reguliavimo sistema, kuri naudoja skystį, kad sklandžiai perstumtų lęšius, kad būtų pritaikytas kiekvienam vartotojui.

„Apple“ taip pat išsamiai aprašo akių sekimo sistemą, kuri naudoja infraraudonųjų spindulių šviesą padėties aptikimui, taip pat yra patentas, kaip dokumentus galima redaguoti virtualioje 3D erdvėje naudojant ausines ir gestų aptikimą.

Apple turi patentuotos sistemos įrašyti vaizdo įrašą iš ausinių, kur įtaisyti žvilgsnio sekimo jutikliai gali parodyti, kur žmogus šiuo metu žiūri, o tai gali nukreipti įtaisytąją kamerą, kad įrašytų sceną, kurioje yra vartotojo akys, o ne tiesiog įrašinėja. kas yra priešais vartotoją.

Dar viena patento paraiška Pateikta 2021 m. vasario mėn. parodė, kad „Apple“ tiria ant pirštų tvirtinamą įrenginį su daugybe jutiklių ir haptinio grįžtamojo ryšio, kuris būtų naudojamas kaip mišrios realybės ausinių valdymo įrenginys.

Valdymo įtaisas turi tokią formą, kuri leidžia vartotojams natūraliai jausti aplink esančius objektus ir gali tiksliai nustatyti, kaip vartotojas judina pirštą ir sąveikauja su paviršiais. Teigiama, kad sistema yra tokia tiksli, kad gali aptikti, kaip stipriai vartotojas spaudžia paviršių ir tikslią šios jėgos kryptį, reaguodama į jutimo grįžtamąjį ryšį.

Kartu su AR arba VR ausinėmis, „Apple“ teigia, kad šis ant pirštų tvirtinamas įrenginys gali „suteikti vartotojui pojūtį, kaip sąveikauja su fizine klaviatūra, kai vartotojas bakstelėja pirštu į stalo paviršių“ arba „leisti vartotojui tiekti vairasvirtę“. -tipo įvestis“, skirta žaidimams naudojant tik vartotojo pirštų galiukų judesį.

Paleidimo data

„Apple“ analitikas Ming-Chi Kuo 2021 m. spalį sakė, kad būsimos mišrios realybės ausinės buvo atidėtas ne anksčiau kaip iki 2022 m. pabaigos, o gamyba prasidės 2022 m. ketvirtąjį ketvirtį.

Bloombergas taip pat mano, kad AR/VR ausinės, prie kurių „Apple“ kuria, bus išleistos 2022 m., o kuriami AR akiniai – vėliau. Informacija pasiūlė, kad AR/VR ausinės bus išleistos 2022 m., o išmanieji akiniai – 2023 m., tačiau tai yra ankstesnis laikas, nei kiti šaltiniai nurodė akinių gaminiui.

„Apple“ tariamai atsilieka nuo ruošiamų išmaniųjų akinių bandymų, todėl galbūt tai gali vėluoti. „Apple“ turėjo pradėti antrąjį akinių kūrimo etapą 2021 m. pradžioje, tačiau antrojo etapo bandymai dar neprasidėjo, todėl masinė gamyba pirmąjį 2022 m. ketvirtį nesitikima .

Morgan Stanley analitikai neseniai teigė, kad AR ausinės artėja prie pakilimo, remiantis patentų skaičius „Apple“ paskelbė. Analitikai mano, kad „Apple“ patentų portfelis AR/VR ausinėms yra panašus į patentų portfelį, kurį ji sukūrė prieš „Apple Watch“ pristatymą.

Ateities AR/VR planai

„Apple“ analitikas Ming-Chi Kuo mano, kad „Apple“ gali planuoti papildytos realybės „kontaktinius lęšius“, kurie galėtų paleisti kažkada 2030-aisiais.

Kuo, anot Kuo, lęšiai perkels elektroniką iš „matomo skaičiavimo“ eros į „nematomą skaičiavimą“. Šiuo metu kontaktiniai lęšiai nėra matomi, ir tai nėra garantuotas produktas, kurį „Apple“ sukurs.