Cermin Mata Epal

Apple dikhabarkan mempunyai pasukan rahsia ratusan pekerja yang bekerja pada projek realiti maya dan tambahan.

• ya
• Tidak

Projek Rahsia Ditambah dan Realiti Maya Apple

kandungan

1. Projek Rahsia Ditambah dan Realiti Maya Apple
• Alat dengar Realiti Campuran
• Cermin Mata Pintar AR
• iOS 14 AR Bocor
• AR dalam Xcode
• Perkongsian Injap?
• Khabar angin lain
2. Realiti Ditambah lwn Realiti Maya
3. Pasukan VR/AR Apple
• Mengupah
• Pemerolehan
4. Paten AR / VR
5. Tarikh pelancaran
6. Rancangan AR/VR Masa Depan
7. Garis Masa Apple Glasses

Apple telah meneroka realiti maya dan teknologi realiti tambahan selama lebih daripada 10 tahun berdasarkan pemfailan paten, tetapi dengan realiti maya dan tambahan yang semakin popular dengan pelancaran ARKit, usaha Apple semakin serius dan dijangka membawa kepada AR/ Produk VR pada tahun 2022.

Apple dikhabarkan mempunyai unit penyelidikan rahsia dengan beratus-ratus pekerja bekerja pada AR dan VR dan meneroka cara teknologi baru muncul boleh digunakan dalam produk Apple masa hadapan. Pengambilan VR/AR telah meningkat sejak beberapa tahun kebelakangan ini, dan Apple telah memperoleh berbilang syarikat AR/VR kerana ia meneruskan kerjanya dalam ruang AR/VR.

Apple dikhabarkan akan berusaha sekurang-kurangnya dua Projek AR yang menyertakan set kepala realiti tambahan yang ditetapkan untuk dikeluarkan tepat pada tahun 2022 diikuti oleh sepasang cermin mata realiti tambahan yang lebih licin yang akan datang kemudian. Banyak khabar angin tertumpu semata-mata pada cermin mata, bagaimanapun, membawa kepada beberapa kekeliruan tentang rancangan Apple, tetapi nampaknya AR/VRheadset akan menjadi produk pertama yang dilancarkan.

Penganalisis Apple Ming-Chi Kuo percaya alat dengar 'realiti campuran' Apple akan keluar pada penghujung 2022 atau awal 2023, dengan Apple Glasses akan menyusul pada 2025, walaupun sumber lain mengatakan cermin mata itu akan datang pada 2023. Set kepala adalah AR/VR, aka realiti campuran, manakala Kacamata Apple adalah realiti tambahan.

Alat dengar Realiti Campuran

Maklumat dan Bloomberg kedua-duanya mengatakan bahawa Apple sedang mengusahakan cermin mata pintar DAN set kepala AR/VR (alias realiti campuran), dengan set kepala keluar dahulu diikuti dengan cermin mata. Alat dengar itu dikhabarkan serupa dengan alat dengar realiti maya Facebook Oculus Quest, tetapi dengan reka bentuk yang lebih licin yang menggunakan fabrik dan bahan ringan untuk memastikan set kepala itu selesa.

Ia dikatakan ciri dua paparan 8K resolusi tinggi dan kamera pengesan mata yang akan membolehkan pengguna 'membaca jenis kecil' dan 'melihat orang lain berdiri di hadapan dan di belakang objek maya.' Alat dengar akan dapat memetakan permukaan, tepi dan dimensi bilik dengan 'ketepatan yang lebih tinggi daripada peranti sedia ada di pasaran.' Ia akan mempunyai paparan yang lebih maju dan cip yang lebih pantas daripada pemproses M1 pada Mac 2020.

Maklumat pada Februari berkata itu akan dilengkapi dengan lebih daripada sedozen kamera untuk menjejaki pergerakan tangan selain kamera untuk melihat dunia luar, dan reka bentuk menghalang penglihatan persisian untuk mengelakkan cahaya daripada bocor ke dalam bidang pandangan pemakai. Terdapat juga visor yang menghadap ke luar dibina pada paparan untuk membolehkan pemakai menunjukkan grafik kepada orang lain.

Elec mendakwa bahawa set kepala VR akan menampilkan paparan OLED mikro resolusi tinggi dengan sehingga 3,000 piksel per inci. Paparan OLED mikro sebelum ini dikhabarkan untuk cermin mata pintar, tetapi bukan set kepala VR.

Penganalisis Apple Ming-Chi Kuo telah berkata bahawa alat dengar realiti campuran Apple yang akan datang akan menampilkan 15 modul kamera optik dalam jumlah. Lapan daripada 15 modul kamera akan digunakan untuk pengalaman realiti diperkukuh tembus pandang, enam modul akan digunakan untuk 'biometrik inovatif' dan satu modul kamera akan digunakan untuk pengesanan alam sekitar.

Kuo juga percaya bahawa set kepala Apple akan dilengkapi dengan sistem penjejakan mata termaju yang digunakan untuk menyediakan pengalaman visual intuitif yang berinteraksi dengan lancar dengan persekitaran luaran, bersama-sama dengan operasi yang lebih intuitif yang boleh dikawal dengan pergerakan mata dan mengurangkan beban pengiraan dalam bentuk pengurangan resolusi di mana pengguna tidak melihat.

Dari segi reka bentuk, set kepala telah digambarkan sebagai mempunyai 'visor melengkung yang licin yang dilekatkan pada muka dengan bahan berjaring dan ikat kepala yang boleh ditukar ganti.' Satu ikat kepala didakwa menampilkan teknologi audio spatial seperti AirPods Pro untuk pengalaman seperti bunyi sekeliling, manakala satu lagi menyediakan hayat bateri tambahan semasa dalam perjalanan. Apple sedang mengusahakan pelbagai kaedah kawalan, termasuk 'peranti seperti bidal untuk dipakai pada jari seseorang.' Alat dengar juga akan dapat bertindak balas terhadap pergerakan mata dan gerak isyarat tangan pemakai, manakala satu prototaip set kepala juga menampilkan dail fizikal pada bahagian visor. Apple juga telah menguji input Siri.

Apple mahu buat App Store untuk set kepala, dengan tumpuan pada permainan, penstriman kandungan video dan persidangan video. Ia telah diterangkan oleh Bloomberg sebagai 'persekitaran digital 3-D yang merangkumi semua' yang direka untuk permainan, menonton video dan berkomunikasi.

Prototaip set kepala semasa dikatakan untuk menimbang sekitar 200 hingga 300 gram, tetapi Apple menyasarkan untuk mengurangkan berat akhir kepada 100 hingga 200 gram jika masalah teknikal dapat diselesaikan, yang akan menjadikan set kepala lebih ringan daripada peranti VR sedia ada. Alat dengar akan mudah alih dengan kuasa dan storan bebas, tetapi ia tidak akan menjadi 'mudah alih' seperti iPhone. Ia akan memberikan 'pengalaman mendalam' yang mengatasi produk VR yang tersedia pada masa ini, dan ia boleh disepadukan dengan Apple TV+ dan Apple Arcade.

Fungsi realiti diperkukuh untuk set kepala adalah 'lebih terhad,' dan sementara keluaran dirancang untuk 2022, Apple dikatakan telah menghadapi beberapa halangan pembangunan dan mempunyai anggaran jualan 'konservatif' untuk peranti itu. Apple menjangkakan untuk menjual kira-kira 180,000 unit, yang setanding dengan peranti yang lebih mahal seperti Mac Pro. Alat dengar dijangka jauh lebih mahal daripada alat dengar dari syarikat lain, dan Maklumat mengatakan bahawa Apple telah membincangkan harga alat dengar sekitar ,000.

Reka bentuk awal termasuk kipas dan pemproses berkuasa, menghasilkan peranti yang terlalu berat. Apple didakwa memutuskan untuk mendekatkan set kepala ke muka untuk mengurangkan saiz. Pengguna tidak akan dapat memakai cermin mata semasa menggunakan set kepala, jadi Apple telah mencipta sistem di mana kanta preskripsi tersuai boleh dimasukkan ke atas skrin VR.

Kuo percaya bahawa set kepala akan menggunakan reka bentuk kanta Fresnel hibrid , merangkumi tiga kanta bertindan bagi setiap mata yang diperbuat daripada plastik ringan. Tujuannya ialah reka bentuk adalah untuk membolehkan jarak fokus ultra-pendek dan prestasi optik yang dipertingkatkan, serta bidang pandangan yang luas, dan mengekalkan berat set kepala di bawah 150 gram.

Dari segi kuasa, set kepala AR/VR yang akan datang akan menampilkan a pemproses utama mewah itu serupa dengan cip M1 yang diperkenalkan oleh Apple untuk Mac silikon Apple tahun lepas, bersama-sama dengan pemproses yang lebih rendah untuk mengurus aspek berkaitan penderia peranti.

Penganalisis Apple Ming-Chi Kuo mendakwa bahawa ia akan dapat beroperasi secara bebas tanpa bergantung pada Mac atau iPhone, yang merupakan penyimpangan daripada khabar angin sebelumnya yang mengatakan ia akan memerlukan tambatan kepada iPhone. Cip berkuasa tinggi dalam set kepala akan memacu sepasang paparan OLED Mikro 4K daripada Sony dan enam hingga lapan modul optik untuk menyediakan kefungsian berasaskan AR. Apple mempunyai kerja siap pada SoC untuk set kepala AR/VR, dan akan mengoptimumkan untuk penghantaran data tanpa wayar, memampatkan dan menyahmampat video, dan kecekapan kuasa untuk hayat bateri maksimum, dan ia tidak mempunyai enjin saraf seperti beberapa cip Apple yang lain.

Alat dengar realiti campuran Apple akan datang akan menawarkan WiFi 6E sokongan, yang merupakan spesifikasi WiFi terkini. Apple dikatakan merancang untuk melaksanakan WiFi 6E untuk menyediakan pengalaman yang mendalam dan mewah dengan sambungan wayarles yang kukuh. WiFi 6E mempunyai semua kelebihan WiFi 6 tetapi menambah spektrum 6GHz sebagai tambahan kepada jalur 2.4GHz dan 5GHz untuk lebar jalur yang lebih tinggi dan kurang gangguan antara peranti.

Render Headset Realiti Campuran

Pereka Antonio De Rosa telah render 3D yang dibangunkan berdasarkan butiran yang dikongsi oleh Maklumat , memberi kita gambaran tentang rupa alat dengar realiti campuran Apple berdasarkan khabar angin semasa.

Maklumat telah menyifatkan set kepala itu sebagai 'visor melengkung licin yang dilekatkan pada muka dengan bahan berjaring dan ikat kepala boleh tukar' yang ditawarkan dalam pelbagai warna.

Prototaip Alat Dengar Awal

Khabar angin sebelum ini daripada CNET pada 2018 mencadangkan bahawa Apple sedang mengusahakan set kepala AR/VR yang berkuasa dengan paparan 8K untuk setiap mata yang akan dilepaskan sama ada daripada komputer atau telefon pintar, dan ia akan berfungsi dengan aplikasi realiti maya dan tambahan.

Daripada bergantung pada sambungan ke telefon pintar atau komputer, set kepala CNET yang diterangkan akan menyambung ke 'kotak khusus' menggunakan teknologi wayarles jarak dekat berkelajuan tinggi yang dipanggil WiGig 60GHz. Kotak itu akan dikuasakan oleh pemproses Apple 5-nanometer tersuai yang 'lebih berkuasa daripada apa-apa yang tersedia pada masa ini.' Kotak itu nampaknya menyerupai menara PC, tetapi ia 'tidak akan menjadi komputer Mac sebenar.' Reka bentuk seperti kotak ini menjadi subjek khabar angin awal dan mungkin prototaip yang sejak itu telah ditinggalkan untuk versi yang lebih anggun yang kini diterangkan oleh khabar angin.

Perselisihan dalaman dikatakan telah membentuk dan mengubah matlamat Apple untuk set kepala ARnya dari semasa ke semasa. Apple adalah awalnya bertujuan untuk sistem ultra berkuasa yang disertakan dengan hab untuk menempatkan pemproses seperti yang diterangkan di atas, tetapi Jony Ive, yang telah meninggalkan syarikat itu, tidak mahu menjual peranti yang memerlukan peranti pegun berasingan untuk kefungsian penuh.

Saya sebaliknya mahukan set kepala dengan teknologi kurang berkuasa yang boleh dibenamkan terus dalam peranti, tetapi ketua pasukan AR/VR, Mike Rockwell, mahukan peranti yang lebih berkuasa. Ia adalah kebuntuan yang berlarutan selama berbulan-bulan, dan Tim Cook akhirnya memihak kepada Ive. Ive dikatakan lebih suka cermin mata pintar AR yang juga dalam kerja-kerja.

Cermin Mata Pintar AR

Apple sedang mengusahakan satu set cermin mata realiti tambahan, yang Leaker Jon Prosser telah mencadangkan Apple akan memanggil 'Apple Glass.' Nama itu akan menjadi pilihan yang luar biasa memandangkan persamaan dengan nama Google Glass, produk yang wujud lama sebelum kerja Apple pada cermin mata AR mula diketahui, jadi ia mungkin tidak tepat.

Cermin mata itu dikatakan kelihatan serupa dengan cermin mata biasa, dengan kedua-dua kanta menampilkan paparan yang boleh berinteraksi dengan menggunakan gerak isyarat. Akan ada pilihan untuk mendapatkan cermin mata tanpa kanta preskripsi pada kemungkinan harga permulaan 9, dengan kanta preskripsi tersedia dengan kos tambahan.

mengikut Bloomberg , cermin mata dah masuk peringkat awal perkembangan , malah lebih awal daripada set kepala AR/VR yang sedang diusahakan oleh Apple. Cermin mata itu telah digambarkan sebagai 'beberapa tahun lagi,' walaupun Apple pada mulanya merancang untuk mengeluarkannya seawal 2023. Prototaip semasa menyerupai cermin mata hitam mewah dengan bingkai tebal yang menempatkan bateri dan cip.

Apple kononnya merancang untuk digunakan Paparan mikro OLED 'termaju' yang dibekalkan oleh Sony untuk cermin mata realiti tambahan yang dikhabarkan. Paparan mikro OLED Sony menampilkan kadar tindak balas ultra-pantas, kontras ultra-tinggi, gamut warna yang luas, pencahayaan tinggi, pemantulan rendah dan pemacu bersepadu untuk reka bentuk yang nipis dan ringan. Cermin mata itu dikatakan menampilkan paparan 0.5 inci dengan resolusi 1280x960.

Kuo menjangkakan cermin mata AR akan dipasarkan sebagai aksesori iPhone dan terutamanya akan mengambil peranan paparan memunggah pengkomputeran, rangkaian dan kedudukan ke iPhone, dengan cermin mata menyediakan 'pengalaman AR tembus optik yang mengutamakan mudah alih.' Menawarkan cermin mata AR sebagai aksesori iPhone akan membolehkan Apple mengekalkannya langsing dan ringan. Prosser mengatakan bahawa cermin mata akan kelihatan serupa dengan Ray-Ban Wayfarers atau cermin mata yang dipakai oleh Tim Cook.

Bloomberg telah berkata cermin mata Apple akan menjalankan 'rOS' atau sistem pengendalian realiti. rOS dikatakan berasaskan iOS, sistem pengendalian yang berjalan pada iPhone. Untuk set kepala AR, Apple sedang membangunkan cip 'sistem-pada-pakej' yang serupa dengan apa yang ada dalam Apple Watch, walaupun ia akan bergantung pada iPhone seperti yang dinyatakan di atas.

Sepanjang membangunkan set kepala AR, Apple telah menganggap panel sentuh, pengaktifan suara dan gerak isyarat kepala sebagai kaedah input, dan pelbagai aplikasi daripada pemetaan kepada penghantaran teks sedang dibuat prototaip. Bilik mesyuarat maya dan main balik video 360 darjah juga merupakan konsep yang sedang diterokai.

Fikirkan ada khabar angin awal daripada pelancaran 2020 , Bloomberg percaya cermin mata AR boleh datang masih bertahun-tahun sebelum dikeluarkan, dengan set kepala VR akan dikeluarkan pada tahun 2022. Laporan daripada DigiTimes mencadangkan cermin mata AR Apple akan dilancarkan pada 2021, dan penganalisis Apple Ming-Chi Kuo menjangkakan pelancaran 2022 paling awal .

Pembocor Jon Prosser percaya Apple akan memperkenalkan cermin mata ARnya pada Mac atau Jun 2021, tetapi ini nampaknya tidak tepat memandangkan anggaran daripada Bloomberg dan Kuo.

Prosser juga mengatakan bahawa Apple sedang mengusahakan versi cermin mata pintar 'Steve Jobs Heritage' edisi terhad yang direka bentuk untuk kelihatan seperti cermin mata bulat tanpa bingkai yang pernah dipakai oleh Steve Jobs, tetapi Bloomberg 's Mark Gurman telah memanggil khabar angin ini 'fiksyen lengkap.'

Apple adalah bekerja dengan TSMC untuk membangunkan paparan OLED mikro 'ultra-maju' yang akan digunakan dalam peranti realiti tambahan Apple yang akan datang seperti cermin mata pintar. Paparan dikatakan bersaiz kurang daripada satu inci.

Paparan OLED mikro dibina terus pada wafer cip dan bukannya substrat kaca, yang menghasilkan paparan yang lebih nipis, lebih kecil dan lebih cekap kuasa. Pembangunan pada paparan OLED mikro dikatakan sedang dalam peringkat pengeluaran percubaan dan akan mengambil masa beberapa tahun sebelum Apple dan TSMC bersedia untuk pengeluaran besar-besaran, yang akan menjadikan paparan ini sesuai untuk Kacamata Apple yang dikhabarkan akan dilancarkan sekitar 2023.

Mulai awal 2021, Apple dikatakan memasuki 'fasa kedua pembangunan' pada prototaip cermin mata realiti tambahan. Cermin mata ditetapkan untuk melalui fasa ketiga pembangunan dalam beberapa bulan, dan kemudian apabila reka bentuk prototaip siap, boleh pakai akan melalui tempoh enam hingga sembilan bulan pengesahan kejuruteraan.

iOS 14 AR Bocor

Kod dan imej ditemui dalam iOS 14 mengesahkan kerja Apple pada set kepala AR atau VR, dengan foto ditemui yang menggambarkan pengawal yang kelihatan generik untuk set kepala yang serupa dalam reka bentuk kepada set kepala HTC Vive Focus. Apple telah menggunakan perkakasan HTC Vive untuk tujuan ujian dalaman.

Apple sedang menguji peralatan ARnya dengan apl iOS 14 yang dipanggil Gobi bersama kod QR untuk menguji pengalaman realiti tambahan. Salah satu pengalaman realiti tambahan ini ialah permainan boling lintasan yang dicetuskan di lintasan pejalan kaki tertentu di Sunnyvale, California.

AR dalam Xcode

Kod dalam Xcode 11 mengesahkan kerja Apple pada sejenis alat dengar AR. Terdapat rujukan kepada peranti ujian yang diberi nama kod serta rangka kerja dan cangkerang sistem yang berkaitan dengan peranti ini. Rujukan mencadangkan Apple sedang membangunkan sokongan untuk pengalaman AR yang dipasang pada muka yang serupa dengan Daydream Google.

Perkongsian Injap?

Menurut laman web Taiwan DigiTimes , Apple bekerjasama dengan pembangun permainan Valve untuk alat dengar AR yang dikhabarkan. Valve mengeluarkan set kepala VR pertamanya, Indeks Valve, pada April 2019.

Valve sebelum ini bekerjasama dengan Apple untuk membawa sokongan set kepala VR asli kepada macOS High Sierra, memanfaatkan sokongan eGPU dengan versi Mac perisian SteamVR.

Khabar angin lain

Pada November 2017, Apple membeli Vrvana , sebuah syarikat yang membangunkan set kepala realiti campuran yang dipanggil Totem. Teknologi Vrvana berpotensi digunakan dalam set kepala Apple masa depan. Apple mengikuti pembelian Vrvana dengan pemerolehan Akonia Holographics , sebuah syarikat yang membuat kanta untuk cermin mata pintar AR.

Khabar angin juga telah mencadangkan Apple boleh memasukkan penyelidikan realiti tambahannya ke dalam projek keretanya yang sedang berjalan sebagai sebahagian daripada sistem perisian dalam kereta yang boleh termasuk paparan kepala atau ciri lain.

Catatan: Lihat ralat dalam pusingan ini atau ingin menawarkan maklum balas? .

Realiti Ditambah lwn Realiti Maya

Realiti diperkukuh (AR) dan realiti maya (VR) adalah teknologi yang serupa, tetapi terdapat perbezaan besar antara mereka dan aplikasi potensinya berbeza-beza secara meluas. Realiti maya merujuk kepada pengalaman mendalam penuh dalam dunia maya, manakala realiti tambahan merujuk kepada pandangan yang diubah suai tentang dunia nyata.

Perbezaannya mungkin boleh disimpulkan dengan baik dengan perbandingan antara dua produk, satu AR dan satu VR. Google Glass , set cermin mata pintar Google yang kini tidak berfungsi, ialah contoh realiti tambahan. Google Glass yang lusuh mata membolehkan pengguna melihat dunia sebagaimana adanya, tetapi ia menawarkan paparan utama yang menindih maklumat yang disediakan komputer berkaitan dengan paparan dunia sebenar itu, seperti cuaca tempatan, peta dan pemberitahuan.

Ini serupa dengan apa yang dikatakan sedang diusahakan oleh Apple dengan 'cermin mata pintar' yang dikhabarkan.

Sebagai perbandingan, Facebook Oculus Rift ialah set kepala realiti maya yang menawarkan pengalaman visual yang mengasyikkan yang tidak menambah dunia sebenar dengan maklumat deria tambahan -- ia menggantikan sepenuhnya dunia sebenar dengan dunia simulasi.

Realiti diperkukuh menyediakan konteks dan maklumat yang dijana komputer tentang dunia di sekeliling kita sambil membenarkan kita berinteraksi dengan persekitaran kita, manakala realiti maya direka untuk mengasingkan kita daripada persekitaran kita supaya kita boleh berinteraksi dengan dunia rekaan.

cara menyemak cas pada airpods

Permohonan yang berpotensi untuk kedua-duanya adalah jauh berbeza. Realiti maya secara khusus tertumpu pada penggunaan kandungan yang mengasyikkan kerana ia membuatkan pemakai berasa seolah-olah mereka benar-benar mengalami apa yang berlaku dalam dunia simulasi melalui maklum balas visual, sentuhan dan audio. Realiti maya sebahagian besarnya dikaitkan dengan permainan sekarang, tetapi ia juga berpotensi untuk mencipta semula pengalaman dunia sebenar untuk tujuan pendidikan atau latihan.

Realiti diperkukuh tidak bergantung pada kandungan yang mengasyikkan dan walaupun kurang menarik kerana ia menambah realiti dan bukannya menggantikannya, ia mempunyai rangkaian aplikasi yang lebih luas. Malah, apl dan permainan realiti tambahan tersedia dengan mudah dalam iOS 11 terima kasih kepada ARKit.

Dengan ARKit, peranti iOS dapat mengenal pasti permukaan seperti jadual, dan kemudian objek maya boleh ditambahkan padanya. Kerana kuasa pengkomputeran iPhone dan iPad, keupayaan realiti tambahan ARKit sangat mengagumkan. ARKit sudah digunakan untuk mencipta rangkaian besar apl dan permainan, menggabungkan objek digital dengan dunia sebenar.

bermain

Apple mungkin menyasarkan produk yang berfungsi dengan realiti tambahan dan maya, seperti yang dicadangkan oleh khabar angin baru-baru ini yang menunjukkan berfungsi pada set kepala AR/VR. Produk sedemikian boleh digunakan untuk aplikasi realiti maya yang serius serta pengalaman realiti tambahan, dan ia akan serupa dengan Microsoft HoloLens.

Pasukan VR/AR Apple

Kerja-kerja Apple mengenai realiti maya dan dipertingkatkan bermula sejak beberapa tahun lalu, tetapi khabar angin mula berbangkit bermula pada Mac 2015 apabila berita melanda bahawa Apple mempunyai sekumpulan kecil orang yang bekerja pada realiti tambahan. Pada 2015 dan ke awal 2016, pasukan Apple berkembang apabila syarikat itu mengupah pekerja yang mempunyai kepakaran dalam teknologi AR/VR dan membuat pelbagai pemerolehan berkaitan.

Pasukan AR/VR Apple termasuk beberapa ratus jurutera dari seluruh Apple, yang kesemuanya mempunyai kepakaran dalam realiti maya dan tambahan. Pasukan ini bekerja merentasi taman pejabat di Cupertino dan Sunnyvale, dan Apple sedang meneroka beberapa projek perkakasan dan perisian di bawah nama kod 'T288.'

Pasukan realiti tambahan Apple menggabungkan 'kekuatan perkakasan dan perisian veterannya,' dan diketuai oleh Mike Rockwell, yang berasal dari Dolby. Bekas pekerja syarikat seperti Oculus, HoloLens, Amazon (daripada pasukan VR), syarikat animasi 3D Weta Digital dan Lucasfilm sedang mengusahakan AR di Apple.

Bekas ketua kejuruteraan perkakasan Apple Dan Riccio pada Januari 2021 telah bertukar kepada peranan baru di mana dia berada mengawasi kerja Apple pada set kepala AR/VR. Projek ini telah menghadapi cabaran pembangunan, dan eksekutif Apple percaya bahawa tumpuan Riccio boleh membantu.

Mengupah

Salah seorang pekerja AR/VR Apple yang paling menonjol ialah profesor sains komputer Doug Bowman, yang sebelum ini mengetuai Pusat Interaksi Manusia-Komputer Virginia Tech. Beliau pakar dalam reka bentuk antara muka pengguna tiga dimensi dan telah menulis buku mengenai subjek yang meliputi antara muka 3D dan faedah persekitaran maya yang mengasyikkan. Beliau mempunyai kepakaran dengan kedua-dua realiti maya dan tambahan.

Apple juga telah mengupah pekerja yang telah bekerja pada produk realiti maya atau tambahan di Microsoft dan Lytro. Beberapa pekerja baru-baru ini dikatakan daripada pasukan HoloLens Microsoft, manakala yang lain bekerja di Lytro, sebuah syarikat yang bekerja pada kamera yang dapat menggabungkan aksi langsung dan grafik komputer untuk pengalaman VR tindakan langsung. Pekerja yang datang daripada pasukan HoloLens akan mempunyai pengalaman mencipta set kepala realiti tambahan termaju.

Kamera Lytro Immerge 360 ​​darjah

Zeyu Li , yang berkhidmat sebagai jurutera penglihatan komputer utama di Magic Leap (pemula yang membangunkan paparan AR/VR yang dipasang di kepala), kini bekerja di Apple sebagai 'Jurutera Algoritma Penglihatan Komputer Kanan.'

Yury Petrov, bekas saintis penyelidikan di Oculus milik Facebook, kini berkhidmat sebagai 'saintis penyelidikan' di Apple. Menurut profil LinkedInnya, Petrov mempelajari pengalaman realiti maya, prototaip optik, dan membangunkan perisian simulasi komputer.

Pakar realiti tambahan Jeff Norris menyertai Apple pada April 2017 sebagai pengurus kanan yang bekerja di pasukan realiti tambahan syarikat. Norris mengasaskan Pejabat Inovasi Operasi Misi dan Makmal Ops JPL di NASA. Beliau mengetuai pelbagai projek yang memfokuskan pada interaksi sistem manusia dengan penekanan pada realiti maya dan tambahan.

Apple pada Mei 2018 2018 mengupah Sterling Crispin , yang membangunkan aplikasi lukisan untuk set kepala VR mudah alih. 'Cyber ​​Paint' membenarkan pemakai set kepala VR mencipta gambar 2D 260 darjah pada Oculus Go, Daydream, GearVR dan Vive Focus. Halaman LinkedIn Crispin mengatakan dia bekerja sebagai 'penyelidik prototaip,' mencadangkan dia telah bergabung dengan pasukan yang dikhabarkan akan mengusahakan teknologi set kepala VR/AR.

Apple pada Disember 2018 mengupah bekas senior Tesla dan pereka Microsoft HoloLens Andrew Kim, dan berdasarkan sejarahnya, dia mungkin sedang mengusahakan projek cermin mata AR Apple yang dikhabarkan atau kereta Apple yang akan datang yang dikatakan sedang dalam pembangunan.

Pengasas Jaunt VR Arthur van Hoff menyertai Apple sebagai arkitek kanan pada April 2019. Sebelum bekerja di Apple, syarikatnya mencipta perkakasan VR , termasuk kamera VR 3D bernilai 0,000 yang dipanggil Jaunt One. Sebelum van Hoff meninggalkan syarikat itu, Jaunt gagal dan beralih kepada pengalaman AR.

Dengan pasukan Apple yang merangkumi beratus-ratus pekerja, terdapat banyak lagi pekerja pakar realiti maya yang telah berada di bawah radar. Di LinkedIn, terdapat berbilang jurutera perisian dengan pengalaman realiti maya yang digunakan oleh Apple, tetapi tidak jelas sama ada mereka bekerja pada pasukan AR/VR rahsia.

Apple pada Julai 2019 memindahkan Kim Vorrath, salah seorang eksekutif perisiannya, ke set kepala realiti tambahan bahagian untuk 'membawa pesanan' kepada pasukan. Vorrath telah menyelia pengurusan program dalam pasukan pembangunan perisian selama 15 tahun, dan telah disifatkan sebagai 'kuasa yang berkuasa' memastikan pekerja memenuhi tarikh akhir sambil juga mengelak pepijat.

Pemerolehan

Ramai ahli pasukan AR/VR Apple mungkin telah menyertai syarikat itu melalui pengambilalihan. Sejak 2015, Apple telah membeli beberapa syarikat yang mencipta produk berkaitan AR/VR, dan beberapa pemerolehan AR/VRnya telah pun wujud sejak beberapa tahun lalu.

Apple pada Ogos 2018 membeli Akonia Holographics , sebuah syarikat permulaan yang membuat kanta untuk cermin mata realiti tambahan. Akonia Holographics mengiklankan 'optik reflektif dan pandu gelombang holografik volum yang pertama di dunia tersedia secara komersial untuk elemen paparan lutsinar dalam cermin mata pintar.'

Paparan yang dibuatnya dikatakan menggunakan teknologi HoloMirror syarikat untuk 'prestasi ultra-jelas, penuh warna' bagi membolehkan 'pameran haus kepala paling nipis dan paling ringan di dunia.'

Pada November 2017, Apple membeli Vrvana , sebuah syarikat yang membangunkan set kepala realiti campuran yang dipanggil Totem. Totem, yang tidak pernah dikeluarkan kepada umum, telah direka bentuk untuk menggabungkan kedua-dua teknologi realiti ditambah dan maya dalam satu set kepala, menggabungkan keupayaan VR penuh dengan kamera lulus untuk mendayakan ciri realiti tambahan berasaskan skrin.

Totem pada asasnya menggunakan set kamera untuk menayangkan imej dunia sebenar ke dalam paparan OLED 1440p terbina dalamnya, pendekatan yang agak unik yang membezakannya daripada produk pesaing seperti HoloLens Microsoft, yang menggunakan paparan lutsinar untuk menggabungkan realiti maya dan tambahan. Apple mungkin merancang untuk menggunakan beberapa teknologi Totem dalam produk masa depan.

Apple membeli firma pengesan badan 3D yang berpangkalan di Israel PrimeSense pada 2013, mencetuskan spekulasi bahawa keupayaan berasaskan gerakan akan dilaksanakan ke dalam Apple TV. Teknologi kedalaman 3D PrimeSense dan keupayaan penderiaan gerakan digunakan dalam platform Kinect awal Microsoft.

PrimeSense menggunakan cahaya berhampiran-IR untuk menayangkan cahaya yang tidak kelihatan ke dalam bilik atau pemandangan, yang kemudiannya dibaca oleh penderia imej CMOS untuk mencipta imej maya objek atau orang. Ini membolehkan kawalan berasaskan gerakan untuk antara muka perisian, tetapi ia juga dapat melakukan perkara seperti mengukur objek maya dan menyediakan jarak atau saiz relatif, berguna untuk aplikasi realiti tambahan seperti permainan interaktif, pemetaan dalaman dan banyak lagi. Teknologi PrimeSense juga boleh mencipta imbasan 360 darjah orang dan objek yang sangat tepat, yang berpotensi berguna untuk aplikasi realiti maya.

Apple memperoleh Metaio permulaan realiti tambahan pada Mei 2015. Metaio membina produk yang dipanggil Metaio Creator, yang boleh digunakan untuk mencipta senario realiti tambahan dalam beberapa minit sahaja. Sebelum dibeli oleh Apple, perisian Metaio telah digunakan oleh syarikat seperti Ferrari, yang mencipta bilik pameran realiti tambahan.

Teknologi Metaio juga digunakan di Berlin untuk membolehkan orang ramai yang melawat tapak Tembok Berlin menggunakan telefon pintar atau tablet untuk melihat rupa kawasan itu ketika Tembok Berlin masih berdiri. Teknologi Metaio ialah teknologi yang berpotensi digunakan untuk melaksanakan keupayaan realiti tambahan ke dalam apl Apple seperti Peta.

Apple memperoleh Faceshift pada Ogos 2015, menandakan pembelian realiti tambahan kedua pada 2015. Sebelum diperoleh oleh Apple, Faceshift bekerja dengan studio permainan dan animasi pada teknologi yang direka untuk menangkap ekspresi muka dengan cepat dan tepat menggunakan penderia 3D, mengubahnya menjadi wajah animasi dalam waktu sebenar. Faceshift juga sedang mengusahakan produk berorientasikan pengguna yang membolehkan orang ramai mengubah wajah mereka menjadi wajah kartun atau raksasa dalam masa nyata dalam Skype.

Teknologi Faceshift mempunyai pelbagai kemungkinan kes penggunaan, dan Apple nampaknya menggunakan ciri ini untuk menghidupkan Animoji dalam iPhone X.

Emotient, sebuah syarikat yang membina alat untuk analisis ekspresi muka, telah diperoleh oleh Apple pada Januari 2016. Teknologi Emotient menggunakan kecerdasan buatan dan pembelajaran mesin untuk membaca emosi manusia, ciri yang telah digunakan dalam dunia nyata oleh pengiklan untuk menentukan reaksi emosi terhadap iklan.

Terdapat berpuluh-puluh perkara yang Apple boleh lakukan dengan Emotient, bermula daripada pengesanan muka yang lebih baik dalam apl Foto kepada menganalisis perasaan pelanggan di kedai runcit Apple hingga membuka kunci peranti iOS, tetapi ia juga mempunyai potensi penggunaan AR/VR. Seperti Faceshift, teknologi Emotient boleh digunakan untuk menganalisis dan mengubah ekspresi muka untuk penciptaan avatar maya, berguna untuk tujuan media sosial dan permainan. Teknologi emosi mungkin digunakan untuk Animoji.

Dibeli pada awal 2016, Flyby Media ialah syarikat lain yang mengusahakan realiti tambahan. Terbang dengan mencipta aplikasi yang berfungsi dengan telefon pintar 'Project Tango' yang dilengkapi penderia 3D Google, membolehkan mesej dilampirkan pada objek dunia sebenar dan dilihat oleh orang lain menggunakan salah satu peranti Google.

Sebagai contoh, seseorang boleh 'mengimbas' tanda tempat seperti Jambatan Golden Gate San Francisco dan menulis mesej yang dilampirkan padanya. Seseorang yang melawat jambatan kemudian akan dapat mengimbas jambatan dengan aplikasi Flyby untuk melihat mesej. Apl Flyby berkemungkinan menarik perhatian Apple kerana ia dapat mengecam dan memahami objek berbeza yang diimbas, teknologi yang boleh digunakan oleh Apple dalam beberapa cara dalam apl seperti Foto dan Peta.

Pada Februari 2017, Apple membeli RealFace , sebuah syarikat keselamatan siber dan pembelajaran mesin yang pakar dalam teknologi pengecaman muka, yang berpotensi digunakan untuk ciri realiti tambahan pada masa hadapan.

RealFace membangunkan teknologi pengecaman muka yang menyepadukan kecerdasan buatan untuk pengecaman muka tanpa geseran. Teknologi Realface mungkin digunakan dalam iPhone X , telefon pintar pertama Apple dengan keupayaan pengecaman muka dalam bentuk Face ID.

Apple pada Mei 2020 memperoleh NextVR , sebuah syarikat yang berpangkalan di California yang menggabungkan realiti maya dengan sukan, muzik dan hiburan, menawarkan pengalaman VR untuk menonton acara langsung pada set kepala VR daripada PlayStation, HTC, Oculus, Google, Microsoft dan pengeluar lain.

Apple pada Ogos 2020 telah membeli Spaces permulaan VR , sebuah syarikat yang mereka bentuk pengalaman realiti maya yang boleh dialami oleh orang ramai di pusat membeli-belah dan lokasi lain, seperti 'Terminator Salvation: Fight for the Future.' Spaces juga mencipta pengalaman realiti maya untuk apl komunikasi video seperti Zoom, yang merupakan sesuatu yang berpotensi untuk dimasukkan oleh Apple ke dalam produk AR/VR masa hadapan.

Paten AR / VR

Apple telah memfailkan berbilang paten yang berkaitan terus dengan set kepala realiti maya, semuanya sejak beberapa tahun lalu. Walaupun teknologi mungkin telah maju agak melampaui ini, mereka memberikan pandangan yang menarik pada idea yang telah diterokai oleh Apple pada masa lalu.

Permohonan paten 2008 meliputi 'sistem paparan peribadi' yang agak asas yang direka untuk meniru pengalaman berada di panggung wayang apabila menonton video.

Paten kedua menggambarkan 'Sistem Paparan Dipasang Kepala' dengan 'enjin laser' yang menayangkan imej pada paparan kaca jernih yang dipakai di atas mata, sama seperti cermin mata. Dalam konfigurasi ini, set kepala disambungkan kepada pemain video pegang tangan seperti iPod untuk memberikan kuasa pemprosesan.

Paten ketiga yang asalnya difailkan pada tahun 2008 adalah serupa dalam reka bentuk, meliputi set kepala video seperti goggle yang direka untuk membenarkan pengguna menonton filem dan kandungan lain. Ia menggariskan dua modul optik boleh laras yang dibarisi dengan mata pengguna, yang boleh memberikan pembetulan penglihatan dan membolehkan tontonan kandungan 3D. Apple menyifatkan ini sebagai menawarkan pengalaman menonton media peribadi.

KEPADA paten keempat dari 2008 meliputi bingkai set kepala video yang serupa dengan Google Glass, yang membolehkan pengguna meluncurkan iPhone atau iPod mereka ke dalam set kepala untuk menyediakan video. Alat dengar itu digambarkan sebagai produk realiti tambahan yang membolehkan pengguna melakukan perkara seperti menonton video atau menyemak e-mel sambil memerhatikan persekitaran mereka.

Selain paten berkaitan set kepala, Apple juga telah memfailkan paten yang menerangkan cara lain ciri realiti maya dan tambahan boleh dilaksanakan ke dalam perantinya. Aplikasi paten 2009, contohnya, paparan 3D yang dilengkapi kamera tertutup yang akan beralih dalam perspektif berdasarkan kedudukan relatif pengguna.

Paparan sedemikian akan mengesan pergerakan kepala, membolehkan pengguna mengalihkan kepala mereka untuk melihat imej 3D dari sudut yang berbeza sambil turut memasukkan elemen persekitaran pengguna.

Paten 2010 dan 2012 menerangkan penggunaan penderia gerakan untuk mencipta antara muka 3D untuk peranti iOS menggunakan teknik realiti tambahan. Apple menyifatkan antara muka sebagai 'bilik maya' yang dilayari dengan memanipulasi orientasi peranti melalui penderia terbina dalam atau melalui gerak isyarat.

Pada tahun 2011, Apple memfailkan paten untuk ciri realiti tambahan dalam apl Peta yang berkaitan dengan pemetaan jarak ke tanda tempat yang ketara. Dengan kamera, pengguna boleh melihat kawasan di sekeliling mereka dan mendapatkan anggaran masa nyata jarak antara dua titik bersama-sama dengan tindanan maklumat yang berkaitan.

Paten yang difailkan pada 2014 dan diberikan pada 2017 meliputi sistem realiti tambahan mudah alih yang dapat mengesan objek dalam persekitaran dan menindihnya dengan maklumat maya melalui penggunaan kamera, skrin dan antara muka pengguna. Apple menerangkan sistem sebagai ideal untuk paparan yang dipasang di kepala, tetapi ia juga menunjukkan ia digunakan dalam telefon pintar.

Apple telah mengusahakan teknologi realiti maya yang mungkin digunakan dalam kenderaan autonomi . Beberapa paten Apple menerangkan sistem yang merangkumi sistem realiti maya dalam kereta dengan set kepala VR yang dipakai untuk memberikan hiburan dan untuk mengurangkan mabuk kereta daripada tugas seperti membaca dan bekerja semasa kenderaan sedang bergerak.

KEPADA Permohonan paten Julai 2020 meliputi kaedah input yang mungkin dengan Cermin Mata Apple, menerangkan sistem di mana cermin mata menggunakan penderiaan haba inframerah untuk mengesan apabila seseorang menyentuh objek dunia sebenar, membenarkan cermin mata kemudiannya menayangkan kawalan ke permukaan dunia sebenar.

Dengan kaedah ini, Apple Glasses boleh menayangkan antara muka kawalan AR ke mana-mana objek sebenar di dunia nyata untuk jenis kesan tindanan realiti bercampur.

Apple pada Februari 2021 memfailkan beberapa paten berkaitan dengan kerjanya pada set kepala realiti campuran yang dikhabarkan, dengan paten meliputi elemen reka bentuk, pelarasan lensa, teknologi penjejakan mata dan perisian.

Apple telah membangunkan beberapa kaedah untuk menjadikan set kepala lebih selesa dipakai sambil memastikan ia selamat dan menghalang cahaya, serta terdapat sistem pelarasan kanta terperinci yang menggunakan bendalir untuk mengalihkan kanta dengan lancar untuk menjadikan muat disesuaikan untuk setiap pengguna.

Apple juga memperincikan sistem penjejakan mata yang menggunakan cahaya inframerah untuk mengesan kedudukan, dan terdapat juga paten tentang cara dokumen mungkin boleh disunting dalam ruang 3D maya menggunakan set kepala dan pengesanan gerak isyarat.

Apple mempunyai sistem yang dipatenkan untuk merakam video daripada set kepala, di mana penderia penjejakan pandangan terbina dalam boleh memberikan petunjuk tempat seseorang sedang melihat, yang boleh mengarahkan kamera terbina dalam untuk merakam pemandangan di mana mata pengguna diletakkan, bukannya hanya merakam apa yang ada di hadapan pengguna.

Satu lagi permohonan paten yang difailkan pada Februari 2021 menunjukkan bahawa Apple sedang menyelidik peranti yang dipasang dengan jari dengan pelbagai penderia dan maklum balas haptik untuk digunakan sebagai peranti kawalan untuk set kepala realiti campuran.

Peranti kawalan mempunyai bentuk yang membolehkan pengguna merasakan objek di persekitaran mereka secara semula jadi dan boleh memastikan dengan tepat cara pengguna menggerakkan jari mereka dan berinteraksi dengan permukaan. Sistem itu dikatakan begitu tepat sehingga dapat mengesan betapa kerasnya pengguna menekan pada permukaan dan arah tepat daya ini, menyampaikan maklum balas haptik sebagai tindak balas.

Ditambah dengan set kepala AR atau VR, Apple mengatakan bahawa peranti yang dilekapkan jari ini boleh 'menyediakan pengguna dengan sensasi berinteraksi pada papan kekunci fizikal apabila pengguna membuat ketik jari pada permukaan meja' atau 'membenarkan pengguna membekalkan kayu bedik. -type input' untuk permainan menggunakan hanya pergerakan hujung jari pengguna.

Tarikh pelancaran

Penganalisis Apple Ming-Chi Kuo berkata pada Oktober 2021 bahawa alat dengar realiti campuran yang akan datang ada telah ditangguhkan sehingga akhir 2022 paling awal, dengan pengeluaran ditetapkan untuk bermula pada suku keempat 2022.

Bloomberg juga percaya set kepala AR/VR yang sedang diusahakan oleh Apple akan keluar pada tahun 2022, manakala cermin mata AR yang sedang dibangunkan akan keluar kemudian. Maklumat telah mencadangkan set kepala AR/VR akan dikeluarkan pada tahun 2022, diikuti oleh cermin mata pintar pada tahun 2023, tetapi ini adalah garis masa yang lebih awal daripada sumber lain yang dinyatakan untuk produk cermin mata.

Apple dikatakan ketinggalan dalam ujian untuk cermin mata pintar yang sedang dalam kerja-kerja, yang mungkin boleh menyebabkan kelewatan. Apple sepatutnya memasuki fasa kedua pembangunan pada cermin mata pada awal 2021, tetapi ujian fasa dua belum bermula jadi pengeluaran volum pada suku pertama 2022 adalah tidak dijangka .

Penganalisis Morgan Stanley baru-baru ini berkata bahawa alat dengar AR 'mendekati lepas landas' berdasarkan bilangan paten Apple telah menerbitkan. Penganalisis percaya portfolio paten Apple untuk set kepala AR/VRnya adalah serupa dengan portfolio paten yang dibinanya sebelum pelancaran Apple Watch.

Rancangan AR/VR Masa Depan

Penganalisis Apple Ming-Chi Kuo percaya bahawa Apple boleh merancang 'kanta sentuh' realiti tambahan yang boleh dilancarkan pada tahun 2030-an.

Menurut Kuo, kanta itu akan membawa elektronik daripada era 'pengkomputeran kelihatan' kepada 'pengkomputeran tidak kelihatan.' Tiada 'keterlihatan' untuk kanta sentuh pada masa semasa, dan ia bukan produk terjamin yang akan dibangunkan oleh Apple.