bicchieri di mela

Si dice che Apple abbia un team segreto di centinaia di dipendenti che lavorano su progetti di realtà virtuale e aumentata.

• sì
• No

Il progetto segreto di realtà aumentata e virtuale di Apple

Contenuti

1. Il progetto segreto di realtà aumentata e virtuale di Apple
• Cuffie per realtà mista
• Occhiali intelligenti AR
• Perdite AR di iOS 14
• AR in Xcode
• Partnership con le valvole?
• Altre voci
2. Realtà aumentata contro realtà virtuale
3. Il team VR/AR di Apple
• assunzioni
• acquisizioni
4. Brevetti AR/VR
5. Ora di pranzo
6. Piani AR/VR futuri
7. Cronologia degli occhiali Apple

Apple ha esplorato la realtà virtuale e le tecnologie di realtà aumentata per più di 10 anni sulla base di depositi di brevetti, ma con la realtà virtuale e aumentata che sta esplodendo in popolarità con il lancio di ARKit, il dilettarsi di Apple sta diventando più serio e si prevede che porterà a un AR/ Prodotto VR nel 2022.

Si dice che Apple abbia un'unità di ricerca segreta con centinaia di dipendenti che lavorano su AR e VR ed esplorano i modi in cui le tecnologie emergenti potrebbero essere utilizzate nei futuri prodotti Apple. L'assunzione di VR/AR è aumentata negli ultimi anni e Apple ha acquisito diverse società di AR/VR mentre promuove il suo lavoro nello spazio AR/VR.

Si dice che almeno Apple ci stia lavorando Due Progetti AR che includono un set di cuffie per realtà aumentata che verrà rilasciato intorno al 2022, seguito da un paio di occhiali per realtà aumentata più eleganti che arriveranno in un secondo momento. Molte voci si sono concentrate esclusivamente sugli occhiali, tuttavia, portando a una certa confusione sui piani di Apple, ma sembra che l'auricolare AR/VR sarà il primo prodotto lanciato.

L'analista di Apple Ming-Chi Kuo crede che l'auricolare della 'realtà mista' di Apple uscira alla fine del 2022 o all'inizio del 2023, con gli Apple Glass che seguiranno nel 2025, anche se altre fonti hanno affermato che gli occhiali arriveranno nel 2023. L'auricolare è AR/VR, noto anche come realtà mista, mentre gli occhiali di Apple sono la realtà aumentata.

Cuffie per realtà mista

L'informazione e Bloomberg entrambi hanno affermato che Apple sta lavorando su occhiali intelligenti E su un visore AR/VR (noto anche come realtà mista), con l'auricolare che uscirà per primo seguito dagli occhiali. Si dice che il visore sia simile al visore per realtà virtuale Oculus Quest di Facebook, ma con un design più elegante che utilizza tessuti e materiali leggeri per garantire il comfort del visore.

Si dice che sia caratterizzato due display 8K ad alta risoluzione e telecamere a rilevamento visivo che consentiranno agli utenti di 'leggere caratteri piccoli' e 'vedere altre persone in piedi davanti e dietro gli oggetti virtuali'. L'auricolare sarà in grado di mappare superfici, bordi e dimensioni delle stanze con 'maggiore precisione rispetto ai dispositivi esistenti sul mercato'. Avrà un display più avanzato e un chip ancora più veloce del processore M1 nei Mac 2020.

L'informazione a febbraio ha detto che sarà dotato di più di una dozzina di telecamere per tracciare i movimenti della mano oltre alle telecamere per vedere il mondo esterno, e il design blocca la visione periferica per evitare che la luce penetri nel campo visivo di chi lo indossa. Potrebbe anche esserci una visiera rivolta verso l'esterno integrata nel display per consentire a chi lo indossa di mostrare la grafica agli altri.

L'Elec afferma che il visore VR sarà caratterizzato da un display micro OLED ad alta risoluzione con un massimo di 3.000 pixel per pollice. In precedenza si vociferava di un display micro OLED per gli occhiali intelligenti, ma non per il visore VR.

L'analista di Apple Ming-Chi Kuo ha affermato che il prossimo visore per realtà mista di Apple conterrà 15 moduli per fotocamere ottiche in totale. Otto dei 15 moduli della fotocamera verranno utilizzati per esperienze di realtà aumentata trasparenti, sei moduli verranno utilizzati per la 'biometria innovativa' e un modulo della fotocamera verrà utilizzato per il rilevamento ambientale.

Kuo crede anche che l'auricolare di Apple sarà dotato di un avanzato sistema di tracciamento oculare utilizzato per fornire un'esperienza visiva intuitiva che interagisce perfettamente con l'ambiente esterno, insieme a un funzionamento più intuitivo che può essere controllato con i movimenti oculari e un carico computazionale ridotto sotto forma di un ridotto risoluzione in cui l'utente non sta guardando.

Dal punto di vista del design, l'auricolare è stato descritto come dotato di 'un'elegante visiera curva attaccata al viso da un materiale a rete e fasce intercambiabili'. Una fascia presumibilmente presenta una tecnologia audio spaziale come AirPods Pro per un'esperienza simile al suono surround, mentre un'altra fornisce una maggiore durata della batteria durante gli spostamenti. Apple sta lavorando su più metodi di controllo, incluso un 'dispositivo simile a un ditale da indossare sul dito di una persona'. L'auricolare sarebbe anche in grado di rispondere ai movimenti oculari e ai gesti delle mani di chi lo indossa, mentre un prototipo dell'auricolare presentava anche un quadrante fisico sul lato della visiera. Apple ha anche testato l'input di Siri.

Apple vuole creare un App Store per l'auricolare, con particolare attenzione ai giochi, allo streaming di contenuti video e alle videoconferenze. È stato descritto da Bloomberg come un 'ambiente digitale 3D onnicomprensivo' progettato per il gioco, la visione di video e la comunicazione.

Prototipi attuali di cuffie sono detti pesare intorno ai 200-300 grammi, ma Apple punta a ridurre il peso finale a 100-200 grammi se si possono risolvere problemi tecnici, il che renderebbe il visore più leggero rispetto ai dispositivi VR esistenti. L'auricolare sarà portatile con alimentazione e memoria indipendenti, ma non sarà 'mobile' come un iPhone. Fornirà un''esperienza immersiva' che supera i prodotti VR attualmente disponibili e potrebbe essere integrato con Apple TV+ e Apple Arcade.

La funzionalità di realtà aumentata per l'auricolare è 'più limitata' e, sebbene sia prevista una versione per il 2022, si dice che Apple abbia incontrato diversi ostacoli allo sviluppo e abbia stime di vendita 'prudenziali' per il dispositivo. Apple prevede di vendere circa 180.000 unità, che è alla pari con dispositivi più costosi come il Mac Pro. Si prevede che le cuffie siano molto più costose delle cuffie di altre società e L'informazione afferma che Apple ha discusso di un prezzo per l'auricolare di circa $ 3.000.

Il progetto iniziale includeva una ventola e potenti processori, risultando in un dispositivo troppo pesante. Apple avrebbe deciso di avvicinare l'auricolare al viso per ridurne le dimensioni. Gli utenti non saranno in grado di indossare gli occhiali durante l'utilizzo dell'auricolare, quindi Apple ha creato un sistema in cui è possibile inserire lenti graduate personalizzate sugli schermi VR.

Kuo crede che l'auricolare utilizzerà una lente di Fresnel ibrida , che comprende tre lenti impilate per occhio in plastica leggera. Lo scopo è che il design sia quello di consentire lunghezze focali ultracorte e prestazioni ottiche migliorate, nonché un ampio campo visivo e mantenere il peso dell'auricolare al di sotto dei 150 grammi.

In termini di potenza, il prossimo visore AR/VR presenterà un processore principale di fascia alta è simile al chip M1 che Apple ha debuttato per i suoi Mac in silicio Apple l'anno scorso, insieme a un processore di fascia bassa per la gestione degli aspetti relativi ai sensori del dispositivo.

L'analista di Apple Ming-Chi Kuo afferma che sarà in grado di operare in modo indipendente senza fare affidamento su un Mac o iPhone, il che si discosta da una precedente voce che diceva che sarebbe richiedono una legatura a un iPhone. Il chip ad alta potenza nell'auricolare guiderà una coppia di display Micro OLED 4K di Sony e da sei a otto moduli ottici per fornire funzionalità basate su AR. Apple ha lavoro completato sul SoC per l'auricolare AR/VR e ottimizzerà per la trasmissione dati wireless, la compressione e la decompressione dei video e l'efficienza energetica per la massima durata della batteria, e non ha un motore neurale come alcuni degli altri chip Apple.

Il prossimo visore per realtà mista di Apple lo farà offerta WiFi 6E supporto, che è l'ultima specifica WiFi. Si dice che Apple stia pianificando di implementare il WiFi 6E per fornire un'esperienza immersiva di fascia alta con una solida connettività wireless. WiFi 6E ha tutti i vantaggi del WiFi 6 ma aggiunge lo spettro di 6 GHz oltre alle bande da 2,4 GHz e 5 GHz per una maggiore larghezza di banda e una minore interferenza tra i dispositivi.

Rendering di cuffie con realtà mista

Il designer Antonio De Rosa ha rendering 3D sviluppati in base ai dettagli condivisi da L'informazione , dandoci uno sguardo a come potrebbero apparire le cuffie per realtà mista di Apple in base alle voci attuali.

L'informazione ha descritto l'auricolare come una 'visiera elegante e curva attaccata al viso da un materiale a rete e fasce intercambiabili' offerte in più colori.

Primi prototipi di cuffie

Voci precedenti da CNET nel 2018 ha suggerito che Apple stava lavorando a un potente auricolare AR/VR con un display 8K per ciascun occhio che sarebbe stato svincolato da un computer o da uno smartphone e avrebbe funzionato con applicazioni di realtà virtuale e aumentata.

Piuttosto che fare affidamento su una connessione a uno smartphone o un computer, l'auricolare CNET descritto si connetterebbe a una 'scatola dedicata' utilizzando una tecnologia wireless a corto raggio ad alta velocità chiamata WiGig a 60 GHz. La scatola sarebbe alimentata da un processore Apple personalizzato a 5 nanometri che è 'più potente di qualsiasi cosa attualmente disponibile'. Apparentemente la scatola assomiglia a una torre per PC, ma 'non sarà un vero computer Mac'. Questo design simile a una scatola è stato oggetto delle prime indiscrezioni e potrebbe essere un prototipo che da allora è stato abbandonato per la versione più elegante che le voci ora descrivono.

Si dice che i disaccordi interni abbiano plasmato e cambiato gli obiettivi di Apple per le sue cuffie AR nel tempo. la mela era inizialmente mirando per un sistema ultra potente fornito con un hub per ospitare il processore come descritto sopra, ma Jony Ive, che da allora ha lasciato l'azienda, non voleva vendere un dispositivo che richiedesse un dispositivo fisso separato per la piena funzionalità.

Volevo invece un visore con una tecnologia meno potente che potesse essere incorporato direttamente nel dispositivo, ma il leader del team AR/VR, Mike Rockwell, voleva il dispositivo più potente. È stato uno stallo che è durato per mesi e alla fine Tim Cook si è schierato con Ive. Si dice che Ive preferisca gli occhiali intelligenti AR che sono anche in lavorazione.

Occhiali intelligenti AR

Apple sta lavorando a un set di occhiali per realtà aumentata, che il leaker Jon Prosser ha suggerito Apple chiamerà 'Apple Glass'. Quel nome sarebbe una scelta insolita data la somiglianza con il nome di Google Glass, un prodotto che esisteva molto prima che il lavoro di Apple sugli occhiali AR venisse alla luce, quindi potrebbe non essere accurato.

Si dice che gli occhiali assomiglino agli occhiali normali, con entrambi gli obiettivi dotati di display con cui è possibile interagire utilizzando i gesti. Ci sarà un'opzione per ottenere gli occhiali senza lenti graduate a un possibile prezzo di partenza di $ 499, con lenti graduate disponibili a un costo aggiuntivo.

Secondo Bloomberg , i bicchieri sono dentro una fase iniziale di sviluppo , anche prima del visore AR/VR su cui sta lavorando Apple. Gli occhiali sono stati descritti come 'diversi anni di distanza', sebbene Apple avesse inizialmente pianificato di rilasciarli già nel 2023. L'attuale prototipo assomiglia a occhiali da sole di fascia alta con montature spesse che ospitano la batteria e i chip.

Apple è presumibilmente intenzione di usare microdisplay OLED 'all'avanguardia' forniti da Sony per i suoi presunti occhiali per realtà aumentata. I microdisplay OLED di Sony sono caratterizzati da un tasso di risposta ultrarapido, contrasto ultra elevato, un'ampia gamma di colori, elevata luminanza, bassa riflettanza e driver integrati per un design sottile e leggero. Si dice che gli occhiali siano dotati di un display da 0,5 pollici con una risoluzione di 1280x960.

Kuo si aspetta che gli occhiali AR vengano commercializzati come accessori per iPhone e svolgeranno principalmente un ruolo di visualizzazione scaricando l'elaborazione, il networking e il posizionamento sull'iPhone, con gli occhiali fornendo un'esperienza AR ottica trasparente per la prima volta su dispositivi mobili. Offrire gli occhiali AR come accessorio per iPhone consentirà ad Apple di mantenerli sottili e leggeri. Prosser dice che gli occhiali saranno simili ai Ray-Ban Wayfarers o agli occhiali che indossa Tim Cook.

Bloomberg ha detto che gli occhiali Apple eseguiranno il 'rOS' o il sistema operativo della realtà. Si dice che rOS sia basato su iOS, il sistema operativo che gira su iPhone. Per l'auricolare AR, Apple sta sviluppando un chip 'system-on-a-package' simile a quello dell'Apple Watch, anche se si baserà sull'iPhone come menzionato sopra.

Nel corso dello sviluppo di un auricolare AR, Apple ha considerato come metodi di input i pannelli touch, l'attivazione vocale e i gesti della testa e sono in fase di prototipazione una serie di applicazioni, dalla mappatura ai messaggi di testo. Anche le sale riunioni virtuali e la riproduzione di video a 360 gradi sono concetti che vengono esplorati.

Pensavo ci fossero voci iniziali di un lancio nel 2020 , Bloomberg crede agli occhiali AR potrebbe venire Mancano anni al rilascio, con il visore VR che uscirà nel 2022. Un rapporto di DigiTimes ha suggerito che gli occhiali AR di Apple verranno lanciati nel 2021 e l'analista Apple Ming-Chi Kuo prevede un lancio nel 2022 al più presto .

Il leaker Jon Prosser crede che Apple svelerà i suoi occhiali AR a marzo o giugno del 2021, ma questo sembra impreciso date le stime di Bloomberg e Kuo.

Prosser afferma anche che Apple sta lavorando a una versione 'Steve Jobs Heritage' in edizione limitata degli occhiali intelligenti progettati per assomigliare agli occhiali rotondi e senza cornice che indossava Steve Jobs, ma Bloomberg Mark Gurman ha definito questa voce 'finzione completa'.

la mela è lavorare con TSMC per sviluppare display micro OLED 'ultra-avanzati' che verranno utilizzati nei prossimi dispositivi di realtà aumentata di Apple come gli occhiali intelligenti. Si dice che i display abbiano una dimensione inferiore a un pollice.

I display Micro OLED sono costruiti direttamente su wafer di chip anziché su un substrato di vetro, il che si traduce in display più sottili, più piccoli e più efficienti dal punto di vista energetico. Si dice che lo sviluppo su display micro OLED sia in fase di produzione di prova e ci vorranno diversi anni prima che Apple e TSMC siano pronti per la produzione di massa, il che renderebbe questi display appropriati per gli Apple Glass che si dice verranno lanciati intorno al 2023.

All'inizio del 2021, Apple si dice che sia entrando in una 'seconda fase di sviluppo' su un prototipo di occhiali per realtà aumentata. Gli occhiali sono destinati a passare attraverso una terza fase di sviluppo in pochi mesi e poi, quando il design del prototipo sarà completato, il wearable passerà attraverso un periodo di verifica ingegneristica da sei a nove mesi.

Perdite AR di iOS 14

Codice e immagini trovato in iOS 14 confermare il lavoro di Apple su un auricolare AR o VR, con una foto scoperta che raffigura un controller dall'aspetto generico per un auricolare che è simile nel design all'auricolare HTC Vive Focus. Apple ha utilizzato l'hardware HTC Vive per scopi di test interni.

Apple sta testando la sua attrezzatura AR con un'app iOS 14 chiamata Gobi insieme a codici QR per testare esperienze di realtà aumentata. Una di queste esperienze di realtà aumentata è un gioco di bowling sulle strisce pedonali attivato in uno specifico passaggio pedonale a Sunnyvale, in California.

AR in Xcode

Il codice in Xcode 11 conferma Il lavoro di Apple su una sorta di auricolare AR. Ci sono riferimenti a dispositivi di test con nome in codice più framework e una shell di sistema relativi a questi dispositivi. I riferimenti suggeriscono che Apple sta sviluppando il supporto per un'esperienza AR montata sul viso simile a Daydream di Google.

Partnership con le valvole?

Secondo il sito taiwanese DigiTimes , Apple sta collaborando con sviluppatore di giochi Valve per il suo rumoroso auricolare AR. Valve ha rilasciato il suo primo visore VR, Valve Index, nell'aprile 2019.

Valve ha precedentemente collaborato con Apple per portare il supporto nativo per le cuffie VR su macOS High Sierra, sfruttando il supporto eGPU con una versione Mac del software SteamVR.

Altre voci

Nel novembre del 2017, Apple ha acquistato Vrvana, una società che ha sviluppato un visore per realtà mista chiamato Totem. La tecnologia di Vrvana potrebbe essere potenzialmente utilizzata in un futuro auricolare Apple. Apple ha seguito l'acquisto di Vrvana con l'acquisizione di Akonia Holographics, una società che produce lenti per occhiali intelligenti AR.

Le voci hanno anche suggerito che Apple potrebbe incorporare la sua ricerca sulla realtà aumentata nel suo progetto automobilistico in corso come parte di un sistema software per auto che potrebbe includere un display heads-up o altre funzionalità.

Nota: Vedi un errore in questa raccolta o vuoi offrire un feedback? .

Realtà aumentata contro realtà virtuale

La realtà aumentata (AR) e la realtà virtuale (VR) sono tecnologie simili, ma c'è una grande differenza tra loro e le loro potenziali applicazioni variano ampiamente. La realtà virtuale si riferisce a un'esperienza completamente immersiva in un mondo virtuale, mentre la realtà aumentata si riferisce a una visione modificata del mondo reale.

La differenza può forse essere riassunta al meglio da un confronto tra due prodotti, uno AR e uno VR. occhiali Google , l'ormai defunto set di occhiali intelligenti di Google, è un esempio di realtà aumentata. I Google Glass, indossati dagli occhi, consentivano agli utenti di visualizzare il mondo così com'è, ma offrivano un display heads-up che sovrapponeva le informazioni pertinenti fornite dal computer a quella visione del mondo reale, come il meteo locale, le mappe e le notifiche.

Questo è simile a ciò su cui si dice che Apple stia lavorando con i suoi cosiddetti 'occhiali intelligenti'.

In confronto, Facebook Oculus Rift è un visore per realtà virtuale che offre un'esperienza visiva coinvolgente che non aumenta il mondo reale con informazioni sensoriali aggiuntive: sostituisce completamente il mondo reale con un mondo simulato.

La realtà aumentata fornisce il contesto e le informazioni generati dal computer sul mondo che ci circonda, consentendoci di interagire con l'ambiente circostante, mentre la realtà virtuale è progettata per isolarci dall'ambiente circostante in modo da poter interagire con mondi fittizi.

come cambiare l'obiettivo di attività apple watch

Le potenziali applicazioni per i due sono molto diverse. La realtà virtuale è focalizzata singolarmente sul consumo di contenuti immersivi perché fa sentire chi lo indossa come se stesse effettivamente sperimentando cosa sta succedendo nel mondo simulato attraverso feedback visivi, tattili e audio. La realtà virtuale è in gran parte legata al gioco in questo momento, ma ha anche il potenziale per ricreare esperienze del mondo reale per scopi educativi o formativi.

La realtà aumentata non dipende da contenuti immersivi e, sebbene meno entusiasmante perché aumenta la realtà invece di sostituirla, ha una gamma più ampia di potenziali applicazioni. In effetti, le app e i giochi di realtà aumentata sono prontamente disponibili in iOS 11 grazie ad ARKit.

Con ARKit, un dispositivo iOS è in grado di identificare una superficie come un tavolo e quindi aggiungere oggetti virtuali. Grazie alla potenza di calcolo dell'iPhone e dell'iPad, le capacità di realtà aumentata di ARKit sono impressionanti. ARKit è già utilizzato per creare una vasta gamma di app e giochi, fondendo oggetti digitali con il mondo reale.

giocare a

Apple potrebbe puntare a un prodotto che funzioni sia con la realtà aumentata che con quella virtuale, come suggerito da recenti indiscrezioni che indicano il lavoro su un visore AR/VR. Un prodotto del genere potrebbe essere utilizzato per applicazioni di realtà virtuale serie e per esperienze di realtà aumentata e sarebbe simile a Microsoft HoloLens.

Il team VR/AR di Apple

Il lavoro di Apple sulla realtà virtuale e aumentata risale a diversi anni, ma le voci sono iniziate a marzo del 2015, quando è arrivata la notizia che Apple aveva un piccolo team di persone che lavoravano sulla realtà aumentata. Nel 2015 e all'inizio del 2016, il team di Apple è cresciuto poiché l'azienda ha assunto dipendenti con esperienza nella tecnologia AR/VR e ha effettuato molteplici acquisizioni correlate.

Il team AR/VR di Apple comprende diverse centinaia di ingegneri di tutta Apple, tutti esperti nella realtà virtuale e aumentata. Il team lavora nei parchi di uffici sia a Cupertino che a Sunnyvale e Apple sta esplorando diversi progetti hardware e software con il nome in codice 'T288'.

Il team di realtà aumentata di Apple combina 'i punti di forza dei suoi veterani hardware e software' ed è guidato da Mike Rockwell, che proveniva da Dolby. Ex dipendenti di aziende come Oculus, HoloLens, Amazon (del team VR), la società di animazione 3D Weta Digital e Lucasfilm stanno lavorando su AR presso Apple.

L'ex capo dell'ingegneria hardware di Apple Dan Riccio nel gennaio 2021 è passato a un nuovo ruolo dov'è supervisionare il lavoro di Apple su un visore AR/VR. Il progetto ha dovuto affrontare sfide di sviluppo e i dirigenti Apple ritengono che l'attenzione di Riccio possa aiutare.

assunzioni

Una delle più importanti assunzioni AR/VR di Apple è stata il professore di informatica Doug Bowman, che in precedenza era a capo del Centro per l'interazione uomo-macchina del Virginia Tech. È specializzato nella progettazione di interfacce utente tridimensionali e ha scritto un libro sull'argomento che tratta delle interfacce 3D e dei vantaggi degli ambienti virtuali immersivi. Ha esperienza sia con la realtà virtuale che con quella aumentata.

Apple ha anche assunto dipendenti che hanno lavorato su prodotti di realtà virtuale o aumentata presso Microsoft e Lytro. Si dice che alcuni assunti di recente provengano dal team HoloLens di Microsoft, mentre altri hanno lavorato presso Lytro, un'azienda che lavora su una telecamera in grado di fondere azione dal vivo e computer grafica per un'esperienza VR live action. I dipendenti provenienti dal team di HoloLens avrebbero esperienza nella creazione di un visore per realtà aumentata avanzato.

The Lytro Immerge 360 degree camera

Zeyu Li, che ha lavorato come principale ingegnere di visione artificiale presso Magic Leap (una startup che sviluppa un display AR/VR montato sulla testa), ora lavora in Apple come 'Ingegnere senior di algoritmi di visione artificiale'.

Yury Petrov, un ex ricercatore presso Oculus di proprietà di Facebook, ora serve come 'ricercatore ricercatore' presso Apple. Secondo il suo profilo LinkedIn, Petrov ha studiato esperienze di realtà virtuale, prototipi di ottiche e sviluppato software di simulazione al computer.

L'esperto di realtà aumentata Jeff Norris è entrato in Apple nell'aprile 2017 come senior manager che lavorava nel team di realtà aumentata dell'azienda. Norris ha fondato il Mission Operations Innovation Office e il JPL Ops Lab della NASA. Ha guidato numerosi progetti incentrati sull'interazione uomo-sistema con un'enfasi sulla realtà virtuale e aumentata.

Apple nel maggio 2018 ha assunto Sterling Crispin, che ha sviluppato un'app di pittura per visori VR mobili. 'Cyber ​​Paint' consente a chi indossa il visore VR di creare immagini 2D a 260 gradi su Oculus Go, Daydream, GearVR e Vive Focus. La pagina LinkedIn di Crispin afferma che sta lavorando come 'ricercatore di prototipi', suggerendo che si è unito al team che si dice stia lavorando sulla tecnologia delle cuffie VR/AR.

Apple nel dicembre 2018 ha assunto l'ex designer senior di Tesla e Microsoft HoloLens Andrew Kim e, data la sua storia, potrebbe lavorare al progetto di occhiali AR di Apple o alla sua prossima auto Apple che si dice sia in fase di sviluppo.

Il fondatore di Jaunt VR Arthur van Hoff è entrato in Apple come architetto senior nell'aprile 2019. Prima di lavorare in Apple, la sua azienda hardware VR creato , inclusa una fotocamera 3D VR da $ 100.000 chiamata Jaunt One. Prima di quando van Hoff ha lasciato l'azienda, Jaunt ha fallito e si è concentrato sulle esperienze AR.

Con il team di Apple che comprende centinaia di dipendenti, ci sono molte altre assunzioni di esperti di realtà virtuale che sono passate inosservate. Su LinkedIn, ci sono più ingegneri del software con esperienza di realtà virtuale che sono impiegati da Apple, ma non è chiaro se lavorino nel team segreto di AR/VR.

Apple nel luglio 2019 ha trasferito Kim Vorrath, uno dei suoi dirigenti software, a il visore per la realtà aumentata divisione per 'portare un po' di ordine' alla squadra. Vorrath ha supervisionato la gestione del programma nel team di sviluppo software per 15 anni ed è stato descritto come una 'forza potente' che assicura che i dipendenti rispettino le scadenze e allo stesso tempo scopra i bug.

acquisizioni

Molti membri del team AR/VR di Apple potrebbero essere entrati a far parte dell'azienda tramite acquisizioni. Dal 2015, Apple ha acquistato diverse aziende che hanno creato prodotti relativi all'AR/VR e alcune delle sue acquisizioni AR/VR risalgono addirittura a diversi anni.

Apple nell'agosto 2018 ha acquistato Akonia Holographics, una startup che produce lenti per occhiali a realtà aumentata. Akonia Holographics pubblicizza 'la prima ottica olografica a guida d'onda e riflettente volumetrica disponibile in commercio per elementi di visualizzazione trasparenti in occhiali intelligenti'.

Si dice che i display che produce utilizzino la tecnologia HoloMirror dell'azienda per 'prestazioni ultra-chiare e a colori' per consentire i 'display più sottili e leggeri al mondo'.

Nel novembre del 2017, Apple ha acquistato Vrvana, una società che ha sviluppato un visore per realtà mista chiamato Totem. Totem, che non è mai stato rilasciato al pubblico, è stato progettato per combinare le tecnologie di realtà aumentata e virtuale in un singolo visore, unendo funzionalità VR complete con telecamere pass-through per abilitare funzionalità di realtà aumentata basate su schermo.

Totem ha essenzialmente utilizzato un set di telecamere per proiettare immagini del mondo reale nel suo display OLED 1440p integrato, un approccio un po' unico che lo distingue dai prodotti concorrenti come HoloLens di Microsoft, che utilizza un display trasparente per combinare realtà virtuale e aumentata. Apple potrebbe pensare di utilizzare parte della tecnologia di Totem in un prodotto futuro.

Apple ha acquistato la società israeliana di rilevamento del corpo 3D PrimeSense nel 2013, scatenando la speculazione che le funzionalità basate sul movimento sarebbero state implementate in Apple TV. La tecnologia di profondità 3D di PrimeSense e le capacità di rilevamento del movimento sono state utilizzate nella piattaforma Kinect iniziale di Microsoft.

PrimeSense ha utilizzato la luce del vicino IR per proiettare una luce invisibile in una stanza o in una scena, che viene poi letta da un sensore di immagine CMOS per creare un'immagine virtuale di un oggetto o di una persona. Ciò consente controlli basati sul movimento per le interfacce software, ma è anche in grado di eseguire operazioni come misurare oggetti virtuali e fornire distanze o dimensioni relative, utili per applicazioni di realtà aumentata come giochi interattivi, mappatura di interni e altro ancora. La tecnologia PrimeSense può anche creare scansioni a 360 gradi estremamente accurate di persone e oggetti, potenzialmente utili per le applicazioni di realtà virtuale.

Apple ha acquisito la startup di realtà aumentata Metaio nel maggio del 2015. Metaio ha creato un prodotto chiamato Metaio Creator, che potrebbe essere utilizzato per creare scenari di realtà aumentata in pochi minuti. Prima di essere acquistato da Apple, il software di Metaio è stato utilizzato da aziende come Ferrari, che hanno creato uno showroom di realtà aumentata.

La tecnologia Metaio è stata utilizzata anche a Berlino per consentire alle persone che visitano il sito del muro di Berlino di utilizzare uno smartphone o un tablet per vedere com'era l'area quando il muro di Berlino era ancora in piedi. La tecnologia di Metaio potrebbe essere potenzialmente utilizzata per implementare funzionalità di realtà aumentata in app Apple come Maps.

Apple ha acquisito Faceshift nell'agosto del 2015, segnando il suo secondo acquisto di realtà aumentata nel 2015. Prima di essere acquisita da Apple, Faceshift ha lavorato con studi di giochi e animazione su una tecnologia progettata per catturare rapidamente e accuratamente le espressioni facciali utilizzando sensori 3D, trasformandole in volti animati in tempo reale. Faceshift stava anche lavorando a un prodotto orientato al consumatore che avrebbe permesso alle persone di trasformare i loro volti in cartoni animati o volti di mostri in tempo reale su Skype.

La tecnologia di Faceshift ha una vasta gamma di possibili casi d'uso e sembra che Apple stia utilizzando la funzione per alimentare Animoji nell'iPhone X.

Emotient, una società che ha creato strumenti per l'analisi delle espressioni facciali, è stata acquisita da Apple nel gennaio 2016. La tecnologia di Emotient utilizza l'intelligenza artificiale e l'apprendimento automatico per leggere le emozioni umane, caratteristiche che sono state utilizzate nel mondo reale dagli inserzionisti per determinare le reazioni emotive a annunci.

Ci sono dozzine di cose che Apple potrebbe fare con Emotient, che vanno da un migliore rilevamento facciale nell'app Foto all'analisi dei sentimenti dei clienti nei negozi Apple allo sblocco dei dispositivi iOS, ma ha anche potenziali usi AR/VR. Come Faceshift, la tecnologia di Emotient potrebbe essere utilizzata per analizzare e trasformare le espressioni facciali per la creazione di avatar virtuali, utili per scopi di social media e giochi. La tecnologia emoticon è stata probabilmente utilizzata per Animoji.

Acquistata all'inizio del 2016, Flyby Media è un'altra azienda che ha lavorato sulla realtà aumentata. sorvolo ha creato un'app che funzionava con lo smartphone 'Project Tango' dotato di sensore 3D di Google, consentendo di allegare messaggi a oggetti del mondo reale e di visualizzarli da altri con uno dei dispositivi di Google.

Ad esempio, una persona potrebbe 'scansionare' un punto di riferimento come il Golden Gate Bridge di San Francisco e scrivere un messaggio allegato. Una persona che visita il ponte in seguito sarà quindi in grado di scansionare il ponte con l'app Flyby per vedere il messaggio. L'app Flyby probabilmente ha attirato l'attenzione di Apple perché è stata in grado di riconoscere e comprendere diversi oggetti che sono stati scansionati, tecnologia che potrebbe essere utilizzata da Apple in diversi modi in app come Foto e Mappe.

Nel febbraio 2017, Apple ha acquistato RealFace, una società di sicurezza informatica e apprendimento automatico specializzata nella tecnologia di riconoscimento facciale, che potrebbe essere potenzialmente utilizzata per future funzionalità di realtà aumentata.

RealFace ha sviluppato la tecnologia di riconoscimento facciale che integra l'intelligenza artificiale per un riconoscimento facciale senza attriti. Probabilmente è stata utilizzata la tecnologia Realface nell'iPhone X , il primo smartphone di Apple con funzionalità di riconoscimento facciale sotto forma di Face ID.

Mela a maggio 2020 acquisito NextVR , una società con sede in California che combinava la realtà virtuale con sport, musica e intrattenimento, offrendo esperienze VR per guardare eventi dal vivo su visori VR di PlayStation, HTC, Oculus, Google, Microsoft e altri produttori.

Mela ad agosto 2020 acquistato Spaces startup VR , un'azienda che ha progettato esperienze di realtà virtuale che le persone potrebbero sperimentare nei centri commerciali e in altri luoghi, come 'Terminator Salvation: Fight for the Future'. Spaces ha anche creato esperienze di realtà virtuale per app di comunicazione video come Zoom, che è qualcosa che Apple potrebbe potenzialmente incorporare in un futuro prodotto AR/VR.

Brevetti AR/VR

Apple ha depositato più brevetti che riguardano direttamente un visore per realtà virtuale, tutti risalenti a diversi anni. Sebbene la tecnologia sia probabilmente avanzata in qualche modo oltre questi, forniscono uno sguardo interessante alle idee che Apple ha esplorato in passato.

Una domanda di brevetto del 2008 riguardava un 'sistema di visualizzazione personale' abbastanza semplice progettato per imitare l'esperienza di essere in un cinema quando si guarda un video.

Un secondo brevetto descriveva un 'sistema di visualizzazione montato sulla testa' con un 'motore laser' che proiettava immagini su un display di vetro trasparente indossato sopra gli occhi, simile agli occhiali. In questa configurazione, l'auricolare è collegato a un lettore video portatile come un iPod per fornire potenza di elaborazione.

Un terzo brevetto originariamente depositato nel 2008 era simile nel design, coprendo un auricolare video simile a una maschera progettata per consentire agli utenti di guardare film e altri contenuti. Ha delineato due moduli ottici regolabili allineati con l'occhio dell'utente, che potrebbero fornire la correzione della vista e consentire la visualizzazione di contenuti 3D. Apple ha descritto questo come un'esperienza personale di visualizzazione dei media.

A quarto brevetto dal 2008 copriva una cornice per cuffie video simile a Google Glass, che consentiva a un utente di far scorrere il proprio iPhone o iPod nelle cuffie per fornire video. L'auricolare è stato descritto come un prodotto di realtà aumentata che avrebbe consentito agli utenti di fare cose come guardare un video o controllare la posta elettronica tenendo d'occhio l'ambiente circostante.

Oltre ai brevetti relativi alle cuffie, Apple ha anche presentato domanda di brevetto che descrive altri modi in cui le funzionalità di realtà virtuale e aumentata potrebbero essere implementate nei suoi dispositivi. Una domanda di brevetto del 2009, ad esempio, riguardava display 3D dotati di fotocamera che cambiavano prospettiva in base alla posizione relativa dell'utente.

Tale display rileverebbe il movimento della testa, consentendo a un utente di muovere la testa per guardare un'immagine 3D da diverse angolazioni, incorporando anche elementi dell'ambiente dell'utente.

I brevetti del 2010 e del 2012 descrivono l'uso di sensori di movimento per creare un'interfaccia 3D per dispositivi iOS utilizzando tecniche di realtà aumentata. Apple ha descritto l'interfaccia come una 'stanza virtuale' in cui è possibile navigare manipolando l'orientamento del dispositivo tramite sensori integrati o gesti.

Nel 2011, Apple ha depositato un brevetto per una funzionalità di realtà aumentata nell'app Maps relativa alla mappatura della distanza da punti di riferimento importanti. Con la fotocamera, un utente può guardare l'area intorno a loro e ottenere stime in tempo reale della distanza tra due punti insieme a sovrapposizioni di informazioni rilevanti.

Un brevetto depositato nel 2014 e concesso nel 2017 riguarda un sistema mobile di realtà aumentata in grado di rilevare oggetti nell'ambiente e sovrapporli a informazioni virtuali attraverso l'uso di telecamere, uno schermo e un'interfaccia utente. Apple descrive il sistema come ideale per un display montato sulla testa, ma mostra anche che viene utilizzato negli smartphone.

Apple ha lavorato su una tecnologia di realtà virtuale che potrebbe essere utilizzato all'interno di veicoli autonomi . Diversi brevetti Apple descrivono un sistema che include un sistema di realtà virtuale in auto con un auricolare VR indossato per fornire intrattenimento e mitigare il mal d'auto da attività come leggere e lavorare mentre un veicolo è in movimento.

A Domanda di brevetto di luglio 2020 copre i possibili metodi di input con gli occhiali Apple, descrivendo un sistema in cui gli occhiali utilizzano il rilevamento del calore a infrarossi per rilevare quando qualcuno tocca un oggetto del mondo reale, consentendo agli occhiali di proiettare i controlli su una superficie del mondo reale.

Con questo metodo, gli Apple Glasses potrebbero proiettare nell'interfaccia di controllo AR su qualsiasi oggetto reale nel mondo reale per un tipo di effetto di sovrapposizione di realtà mista.

Mela a febbraio 2021 depositato una serie di brevetti relativo al suo lavoro su un visore di realtà mista che si dice, con i brevetti che coprono elementi di design, regolazione dell'obiettivo, tecnologia di tracciamento oculare e software.

Apple ha sviluppato diversi metodi per rendere un auricolare più comodo da indossare, mantenendolo al tempo stesso al sicuro e bloccando la luce, inoltre c'è un dettagliato sistema di regolazione delle lenti che utilizza il fluido per spostare senza soluzione di continuità le lenti per rendere la vestibilità personalizzata per ogni utente.

Apple descrive anche un sistema di tracciamento oculare che utilizza la luce a infrarossi per rilevare la posizione, e c'è anche un brevetto su come i documenti potrebbero essere modificati in uno spazio 3D virtuale utilizzando l'auricolare e il rilevamento dei gesti.

Apple ha sistemi brevettati per la registrazione di video da un auricolare, in cui i sensori di tracciamento dello sguardo integrati potrebbero fornire un'indicazione di dove sta guardando una persona, che potrebbe dirigere una fotocamera integrata per registrare la scena in cui sono posizionati gli occhi dell'utente, invece di registrare semplicemente cosa c'è di fronte all'utente.

Un'altra domanda di brevetto depositata nel febbraio 2021 ha mostrato che Apple sta ricercando un dispositivo montato sulle dita con una serie di sensori e feedback tattile da utilizzare come dispositivo di controllo per un auricolare in realtà mista.

Il dispositivo di controllo ha una forma che consente agli utenti di sentire gli oggetti nell'ambiente circostante in modo naturale e può accertare con precisione il modo in cui l'utente muove il dito e interagisce con le superfici. Si dice che il sistema sia così preciso da poter rilevare la forza con cui un utente sta premendo su una superficie e l'esatta direzione di questa forza, fornendo un feedback tattile in risposta.

Abbinato a un visore AR o VR, Apple afferma che questo dispositivo montato sulle dita potrebbe 'fornire all'utente la sensazione di interagire su una tastiera fisica quando l'utente tocca la superficie di un tavolo' o 'consentire a un utente di fornire il joystick -type input' per il gioco utilizzando solo il movimento delle dita dell'utente.

Ora di pranzo

L'analista di Apple Ming-Chi Kuo ha dichiarato nell'ottobre 2021 che il prossimo visore per realtà mista ha stato ritardato non prima della fine del 2022, con l'inizio della produzione nel quarto trimestre del 2022.

Bloomberg crede anche che l'auricolare AR/VR su cui Apple sta lavorando uscirà nel 2022, mentre gli occhiali AR che sono in fase di sviluppo usciranno in un secondo momento. L'informazione ha suggerito che un auricolare AR/VR sarà rilasciato nel 2022, seguito da occhiali intelligenti nel 2023, ma questa è una cronologia precedente rispetto a quanto indicato da altre fonti per il prodotto degli occhiali.

Si presume che Apple sia in ritardo sui test per gli occhiali intelligenti in lavorazione, il che potrebbe forse portare a ritardi. Apple avrebbe dovuto entrare nella seconda fase di sviluppo degli occhiali all'inizio del 2021, ma i test della fase due non sono ancora iniziati, quindi la produzione in volume nel primo trimestre del 2022 è inatteso .

Gli analisti di Morgan Stanley hanno recentemente affermato che l'auricolare AR si sta 'avvicinando al decollo' in base al numero di brevetti Apple ha pubblicato. Gli analisti ritengono che il portafoglio di brevetti di Apple per il suo visore AR/VR sia simile al portafoglio di brevetti che ha creato prima del lancio di Apple Watch.

Piani AR/VR futuri

L'analista di Apple Ming-Chi Kuo ritiene che Apple potrebbe pianificare 'lenti a contatto' di realtà aumentata che potrebbe lanciare qualche volta negli anni 2030.

Secondo Kuo, gli obiettivi porteranno l'elettronica dall'era del 'calcolo visibile' al 'calcolo invisibile'. Al momento non c'è 'visibilità' per le lenti a contatto e non è un prodotto garantito che Apple svilupperà.