Kính táo

Apple được đồn đại có một đội ngũ bí mật gồm hàng trăm nhân viên làm việc trong các dự án thực tế ảo và thực tế tăng cường.

• đúng
• Không

Dự án thực tế ảo và tăng cường bí mật của Apple

Nội dung

1. Dự án thực tế ảo và tăng cường bí mật của Apple
• Tai nghe thực tế hỗn hợp
• Kính thông minh AR
• Rò rỉ AR trên iOS 14
• AR trong Xcode
• Đối tác Valve?
• Tin đồn khác
2. Thực tế tăng cường so với Thực tế ảo
3. Nhóm VR / AR của Apple
• Thuê mướn
• Mua lại
4. Bằng sáng chế AR / VR
5. Ngày ra mắt
6. Các kế hoạch AR / VR trong tương lai
7. Dòng thời gian của Apple Glasses

Apple đã khám phá công nghệ thực tế ảo và thực tế tăng cường trong hơn 10 năm dựa trên các hồ sơ bằng sáng chế, nhưng với thực tế ảo và thực tế tăng cường bùng nổ phổ biến với sự ra mắt của ARKit, việc thử nghiệm của Apple ngày càng nghiêm trọng hơn và dự kiến ​​sẽ dẫn đến AR / Sản phẩm VR vào năm 2022.

Apple được đồn đại là có một đơn vị nghiên cứu bí mật với hàng trăm nhân viên làm việc về AR và VR và khám phá các cách thức mà các công nghệ mới nổi có thể được sử dụng trong các sản phẩm của Apple trong tương lai. Việc tuyển dụng VR / AR đã tăng lên trong vài năm qua và Apple đã mua lại nhiều công ty AR / VR khi họ tăng cường công việc của mình trong không gian AR / VR.

Apple được cho là đang làm việc trên ít nhất hai Các dự án AR bao gồm bộ tai nghe thực tế tăng cường sẽ được phát hành vào khoảng năm 2022, sau đó là một cặp kính thực tế tăng cường kiểu dáng đẹp hơn sẽ ra mắt vào một ngày sau đó. Tuy nhiên, nhiều tin đồn chỉ tập trung vào kính, dẫn đến một số nhầm lẫn về kế hoạch của Apple, nhưng có vẻ như AR / VRheadset sẽ là sản phẩm đầu tiên được tung ra thị trường.

Nhà phân tích Ming-Chi Kuo của Apple tin rằng tai nghe 'thực tế hỗn hợp' của Apple sẽ đi ra vào cuối năm 2022 hoặc đầu năm 2023, với Kính Apple sẽ tiếp nối vào năm 2025, mặc dù các nguồn tin khác cho biết kính sẽ ra mắt vào năm 2023. Tai nghe là AR / VR, hay còn gọi là thực tế hỗn hợp, trong khi Kính của Apple là thực tế tăng cường.

Tai nghe thực tế hỗn hợp

Thông tin và Bloomberg cả hai đều nói rằng Apple đang làm việc trên kính thông minh VÀ tai nghe AR / VR (hay còn gọi là thực tế hỗn hợp), với tai nghe ra mắt trước, sau đó là kính. Tai nghe này được đồn đoán là giống với tai nghe thực tế ảo Oculus Quest của Facebook, nhưng có thiết kế đẹp hơn, sử dụng các loại vải và vật liệu nhẹ để đảm bảo tai nghe được thoải mái.

Nó được cho là có tính năng hai màn hình 8K độ phân giải cao và camera phát hiện mắt cho phép người dùng 'đọc loại nhỏ' và 'nhìn thấy những người khác đang đứng trước và sau vật thể ảo.' Tai nghe sẽ có thể lập bản đồ bề mặt, cạnh và kích thước của các phòng với 'độ chính xác cao hơn các thiết bị hiện có trên thị trường.' Nó sẽ có màn hình hiển thị tiên tiến hơn và chip thậm chí còn nhanh hơn bộ xử lý M1 trên máy Mac 2020.

Thông tin trong tháng Hai cho biết sẽ được trang bị hơn một chục camera để theo dõi chuyển động của tay ngoài camera để nhìn thế giới bên ngoài và thiết kế chặn tầm nhìn ngoại vi để ngăn ánh sáng rò rỉ vào trường nhìn của người đeo. Cũng có thể có một tấm che mặt hướng ra ngoài được tích hợp trong màn hình để cho phép người đeo hiển thị hình ảnh đồ họa cho người khác.

The Elec tuyên bố rằng Tai nghe VR sẽ có màn hình micro OLED độ phân giải cao lên đến 3.000 pixel mỗi inch. Một màn hình micro OLED trước đây đã được đồn đại cho kính thông minh, nhưng không phải là tai nghe VR.

Nhà phân tích Ming-Chi Kuo của Apple đã nói rằng tai nghe thực tế hỗn hợp sắp ra mắt của Apple sẽ có 15 mô-đun camera quang học Tổng cộng. Tám trong số 15 mô-đun máy ảnh sẽ được sử dụng cho trải nghiệm thực tế tăng cường nhìn xuyên thấu, sáu mô-đun sẽ được sử dụng cho 'sinh trắc học sáng tạo' và một mô-đun máy ảnh sẽ được sử dụng để phát hiện môi trường.

Kuo cũng tin tưởng rằng tai nghe của Apple sẽ được trang bị hệ thống theo dõi mắt tiên tiến được sử dụng để cung cấp trải nghiệm hình ảnh trực quan tương tác liền mạch với môi trường bên ngoài, cùng với hoạt động trực quan hơn có thể được kiểm soát bằng chuyển động của mắt và giảm gánh nặng tính toán dưới dạng giảm độ phân giải mà người dùng không nhìn vào.

Về mặt thiết kế, tai nghe được mô tả là có 'tấm che mặt cong, kiểu dáng đẹp được gắn vào mặt bằng vật liệu lưới và băng đô có thể thay thế'. Một chiếc băng đô được cho là có công nghệ âm thanh không gian như AirPods Pro để có trải nghiệm âm thanh vòm, trong khi một chiếc băng đô khác cung cấp thêm thời lượng pin khi đang di chuyển. Apple đang nghiên cứu nhiều phương pháp điều khiển, bao gồm cả một thiết bị giống như một thiết bị có thể đeo trên ngón tay của một người. Tai nghe cũng có thể phản hồi chuyển động mắt và cử chỉ tay của người đeo, trong khi một nguyên mẫu của tai nghe cũng có mặt số vật lý ở mặt của tấm che mặt. Apple cũng đã thử nghiệm đầu vào Siri.

Apple muốn tạo một App Store cho tai nghe, tập trung vào chơi game, phát trực tuyến nội dung video và hội nghị truyền hình. Nó đã được mô tả bởi Bloomberg như một 'môi trường kỹ thuật số 3-D toàn diện' được thiết kế để chơi game, xem video và giao tiếp.

Nguyên mẫu tai nghe hiện tại được nói nặng khoảng 200 đến 300 gam, nhưng Apple đang nhắm đến việc giảm trọng lượng cuối cùng xuống 100 đến 200 gam nếu các vấn đề kỹ thuật có thể được giải quyết, điều này sẽ làm cho tai nghe nhẹ hơn các thiết bị VR hiện có. Tai nghe sẽ có thể di động với nguồn điện và bộ lưu trữ độc lập, nhưng nó sẽ không 'di động' như iPhone. Nó sẽ cung cấp một 'trải nghiệm nhập vai' vượt qua các sản phẩm VR hiện có và nó có thể được tích hợp với Apple TV + và Apple Arcade.

Chức năng thực tế tăng cường cho tai nghe 'hạn chế hơn' và trong khi dự kiến ​​phát hành vào năm 2022, Apple được cho là đã gặp phải một số trở ngại phát triển và có ước tính doanh số bán hàng 'thận trọng' cho thiết bị này. Apple dự kiến ​​sẽ bán được khoảng 180.000 chiếc, ngang bằng với các thiết bị đắt tiền hơn như Mac Pro. Tai nghe dự kiến ​​sẽ đắt hơn nhiều so với tai nghe của các công ty khác, và Thông tin nói rằng Apple đã thảo luận về việc định giá tai nghe vào khoảng 3.000 USD.

Thiết kế ban đầu bao gồm một quạt và bộ vi xử lý mạnh mẽ, dẫn đến thiết bị quá nặng. Apple được cho là đã quyết định đưa tai nghe vào gần mặt để cắt giảm kích thước. Người dùng sẽ không thể đeo kính trong khi sử dụng tai nghe, vì vậy Apple đã tạo ra một hệ thống có thể lắp thấu kính theo toa tùy chỉnh qua màn hình VR.

Kuo tin rằng tai nghe sẽ sử dụng thiết kế thấu kính Fresnel lai , bao gồm ba thấu kính xếp chồng lên nhau cho mỗi mắt được làm bằng nhựa nhẹ. Mục đích của thiết kế là cho phép tiêu cự cực ngắn và cải thiện hiệu suất quang học, cũng như trường nhìn rộng và giữ cho trọng lượng của tai nghe dưới 150 gram.

Về sức mạnh, tai nghe AR / VR sắp tới sẽ có bộ xử lý chính cao cấp tương tự như chip M1 mà Apple đã ra mắt cho các máy Mac silicon của Apple vào năm ngoái, cùng với một bộ xử lý cấp thấp hơn để quản lý các khía cạnh liên quan đến cảm biến của thiết bị.

Nhà phân tích Ming-Chi Kuo của Apple tuyên bố rằng nó sẽ có thể hoạt động độc lập mà không cần dựa vào máy Mac hoặc iPhone, điều này khác với một tin đồn trước đó nói rằng nó sẽ yêu cầu một dây buộc sang iPhone. Con chip năng lượng cao trong tai nghe sẽ điều khiển một cặp màn hình 4K Micro OLED của Sony và sáu đến tám mô-đun quang học để cung cấp chức năng dựa trên AR. Apple có công việc đã hoàn thành trên SoC dành cho tai nghe AR / VR và sẽ tối ưu hóa cho việc truyền dữ liệu không dây, nén và giải nén video cũng như tiết kiệm năng lượng để có tuổi thọ pin tối đa và nó không có động cơ thần kinh như một số chip khác của Apple.

Tai nghe thực tế hỗn hợp sắp tới của Apple sẽ cung cấp WiFi 6E hỗ trợ, là thông số kỹ thuật WiFi mới nhất. Apple được cho là đang có kế hoạch triển khai WiFi 6E để cung cấp trải nghiệm cao cấp, đắm chìm với kết nối không dây vững chắc. WiFi 6E có tất cả các lợi ích của WiFi 6 nhưng bổ sung thêm phổ tần 6GHz bên cạnh các băng tần 2.4GHz và 5GHz để tăng băng thông và ít nhiễu hơn giữa các thiết bị.

Kết xuất tai nghe thực tế hỗn hợp

Nhà thiết kế Antonio De Rosa đã kết xuất 3D được phát triển dựa trên chi tiết được chia sẻ bởi Thông tin , cho chúng ta xem tai nghe thực tế hỗn hợp của Apple có thể trông như thế nào dựa trên những tin đồn hiện tại.

Thông tin đã mô tả tai nghe như một 'tấm che mặt cong, kiểu dáng đẹp được gắn vào mặt bằng vật liệu lưới và băng đô có thể thay thế' được cung cấp với nhiều màu sắc.

Nguyên mẫu tai nghe ban đầu

Tin đồn trước đó từ CNET vào năm 2018 gợi ý rằng Apple đang làm việc trên một tai nghe AR / VR mạnh mẽ với màn hình 8K cho mỗi mắt mà không cần kết nối với máy tính hoặc điện thoại thông minh và nó sẽ hoạt động với cả ứng dụng thực tế ảo và thực tế tăng cường.

Thay vì dựa vào kết nối với điện thoại thông minh hoặc máy tính, tai nghe CNET được mô tả sẽ kết nối với 'hộp chuyên dụng' bằng công nghệ không dây tầm ngắn tốc độ cao được gọi là WiGig 60GHz. Chiếc hộp sẽ được trang bị bộ vi xử lý Apple 5 nanomet tùy chỉnh 'mạnh hơn bất cứ thứ gì hiện có'. Hộp có vẻ giống một tháp PC, nhưng nó 'không phải là một máy tính Mac thực sự.' Thiết kế dạng hộp này là chủ đề của những tin đồn ban đầu và có thể là một nguyên mẫu đã bị bỏ rơi cho phiên bản kiểu dáng đẹp hơn như những tin đồn hiện nay mô tả.

Những bất đồng nội bộ được cho là đã định hình và thay đổi mục tiêu của Apple đối với tai nghe AR của mình theo thời gian. Apple là mục tiêu ban đầu cho một hệ thống cực mạnh đi kèm với một trung tâm để chứa bộ xử lý như mô tả ở trên, nhưng Jony Ive, người đã rời công ty, không muốn bán một thiết bị đòi hỏi một thiết bị cố định riêng biệt để có đầy đủ chức năng.

Thay vào đó, Ive muốn một chiếc tai nghe có công nghệ kém mạnh mẽ hơn có thể được nhúng trực tiếp vào thiết bị, nhưng trưởng nhóm AR / VR, Mike Rockwell, lại muốn thiết bị mạnh mẽ hơn. Đó là một bế tắc kéo dài trong nhiều tháng, và cuối cùng Tim Cook đã đứng về phía Ive. Ive được cho là thích kính thông minh AR đang được sản xuất.

Kính thông minh AR

Apple đang làm việc trên một bộ kính thực tế tăng cường, mà Leaker Jon Prosser đã gợi ý Apple sẽ gọi là 'Apple Glass'. Cái tên đó sẽ là một lựa chọn bất thường vì nó giống với tên của Google Glass, một sản phẩm đã tồn tại rất lâu trước khi công trình nghiên cứu kính AR của Apple được đưa ra ánh sáng, vì vậy nó có thể không chính xác.

Chiếc kính này được cho là trông tương tự như kính thông thường, với cả hai thấu kính đều có màn hình hiển thị có thể tương tác bằng cử chỉ. Sẽ có một lựa chọn để mua kính không có kính theo toa với giá khởi điểm có thể là $ 499, với kính theo toa có sẵn với một khoản phụ phí.

Dựa theo Bloomberg , kính ở trong giai đoạn đầu của sự phát triển , thậm chí còn sớm hơn cả tai nghe AR / VR mà Apple đang phát triển. Chiếc kính này đã được mô tả là 'vài năm nữa', mặc dù ban đầu Apple đã có kế hoạch phát hành chúng sớm nhất là vào năm 2023. Nguyên mẫu hiện tại giống như kính râm cao cấp với gọng dày chứa pin và chip.

Apple bị cáo buộc dự định sử dụng Màn hình hiển thị siêu nhỏ OLED 'tiên tiến' do Sony cung cấp cho kính thực tế tăng cường được đồn đại của hãng. Màn hình vi màn hình OLED của Sony có tốc độ phản hồi cực nhanh, độ tương phản cực cao, gam màu rộng, độ sáng cao, độ phản xạ thấp và trình điều khiển tích hợp cho thiết kế mỏng và nhẹ. Kính được cho là có màn hình 0,5 inch với độ phân giải 1280x960.

Kuo hy vọng kính AR sẽ được bán trên thị trường như một phụ kiện iPhone và chủ yếu sẽ đóng vai trò hiển thị giúp giảm tải tính toán, mạng và định vị cho iPhone cùng với kính cung cấp trải nghiệm AR 'nhìn xuyên thấu quang học' trên thiết bị di động đầu tiên. Cung cấp kính AR như một phụ kiện iPhone sẽ cho phép Apple giữ chúng mỏng và nhẹ. Prosser nói rằng chiếc kính này sẽ giống với kính Ray-Ban Wayfarers hoặc chiếc kính mà Tim Cook đeo.

Bloomberg đã cho biết kính Apple sẽ chạy hệ điều hành 'rOS' hoặc hệ điều hành thực tế. rOS được cho là dựa trên iOS, hệ điều hành chạy trên iPhone. Đối với tai nghe AR, Apple đang phát triển một con chip 'hệ thống trên một gói' tương tự như những gì trong Apple Watch, mặc dù nó sẽ dựa trên iPhone như đã đề cập ở trên.

Trong quá trình phát triển tai nghe AR, Apple đã coi các bảng điều khiển cảm ứng, kích hoạt bằng giọng nói và cử chỉ bằng đầu là phương thức nhập liệu và một loạt các ứng dụng từ lập bản đồ đến nhắn tin đang được tạo mẫu. Phòng họp ảo và phát lại video 360 độ cũng là những khái niệm đang được khám phá.

Tưởng có những tin đồn ban đầu ra mắt năm 2020 , Bloomberg tin rằng kính AR có thể đến Còn nhiều năm nữa mới được phát hành, với tai nghe VR sẽ ra mắt vào năm 2022. Một báo cáo từ DigiTimes gợi ý kính AR của Apple sẽ ra mắt vào năm 2021 và nhà phân tích Ming-Chi Kuo của Apple dự kiến ​​ra mắt vào năm 2022 thời gian sớm nhất .

Leaker Jon Prosser tin rằng Apple sẽ công bố kính AR của mình vào tháng 3 hoặc tháng 6 năm 2021, nhưng điều này có vẻ không chính xác khi đưa ra các ước tính từ Bloomberg và Kuo.

Prosser cũng nói rằng Apple đang làm việc trên một phiên bản giới hạn 'Di sản của Steve Jobs' của chiếc kính thông minh được thiết kế để trông giống như chiếc kính tròn, không gọng mà Steve Jobs từng đeo, nhưng Bloomberg Mark Gurman của ông đã gọi tin đồn này là 'hư cấu hoàn toàn.'

Apple là làm việc với TSMC để phát triển màn hình micro OLED 'cực kỳ tiên tiến' sẽ được sử dụng trong các thiết bị thực tế tăng cường sắp tới của Apple như kính thông minh. Các màn hình được cho là có kích thước nhỏ hơn một inch.

Màn hình micro OLED được tích hợp trực tiếp vào tấm lót chip thay vì tấm nền thủy tinh, dẫn đến màn hình mỏng hơn, nhỏ hơn và tiết kiệm điện hơn. Việc phát triển màn hình micro OLED được cho là đang trong giai đoạn sản xuất thử nghiệm và sẽ mất vài năm trước khi Apple và TSMC sẵn sàng sản xuất hàng loạt, điều này sẽ làm cho những màn hình này phù hợp với Apple Glasses được đồn đại sẽ ra mắt vào khoảng năm 2023.

Đầu năm 2021, Apple được cho là bước vào 'giai đoạn phát triển thứ hai' trên nguyên mẫu kính thực tế tăng cường. Chiếc kính này được thiết lập để trải qua giai đoạn phát triển thứ ba trong vài tháng, và sau đó khi thiết kế nguyên mẫu được hoàn thành, thiết bị đeo được sẽ trải qua giai đoạn xác minh kỹ thuật từ sáu đến chín tháng.

Rò rỉ AR trên iOS 14

Mã và hình ảnh tìm thấy trong iOS 14 xác nhận công việc của Apple trên tai nghe AR hoặc VR, với một bức ảnh được phát hiện mô tả một bộ điều khiển nhìn chung cho một tai nghe có thiết kế tương tự như tai nghe HTC Vive Focus. Apple đã sử dụng phần cứng HTC Vive cho mục đích thử nghiệm nội bộ.

Apple đang thử nghiệm thiết bị AR của mình với ứng dụng iOS 14 có tên Gobi cùng với mã QR để kiểm tra trải nghiệm thực tế tăng cường. Một trong những trải nghiệm thực tế tăng cường này là trò chơi bowling dành cho người băng qua đường được kích hoạt tại một lối đi bộ cụ thể ở Sunnyvale, California.

AR trong Xcode

Mã trong Xcode 11 xác nhận Công việc của Apple trên một số loại tai nghe AR. Có các tham chiếu đến các thiết bị thử nghiệm được đặt tên mã cộng với các khuôn khổ và vỏ hệ thống liên quan đến các thiết bị này. Các tài liệu tham khảo cho thấy Apple đang phát triển hỗ trợ cho trải nghiệm AR gắn trên khuôn mặt tương tự như Daydream của Google.

Đối tác Valve?

Theo trang Đài Loan DigiTimes , Apple đang hợp tác với nhà phát triển trò chơi Valve cho tai nghe AR được đồn đại của nó. Valve đã phát hành tai nghe VR đầu tiên của mình, Valve Index, vào tháng 4 năm 2019.

Valve trước đây đã làm việc với Apple để đưa hỗ trợ tai nghe VR nguyên bản lên macOS High Sierra, tận dụng hỗ trợ eGPU với phiên bản Mac của phần mềm SteamVR.

Tin đồn khác

Vào tháng 11 năm 2017, Apple đã mua Vrvana, một công ty phát triển tai nghe thực tế hỗn hợp có tên là Totem. Công nghệ của Vrvana có khả năng được sử dụng trong một chiếc tai nghe của Apple trong tương lai. Apple tiếp nối thương vụ mua Vrvana bằng việc mua lại Akonia Holographics, một công ty sản xuất thấu kính cho kính thông minh AR.

Các tin đồn cũng cho thấy Apple có thể kết hợp nghiên cứu thực tế tăng cường vào dự án xe hơi đang thực hiện của mình như một phần của hệ thống phần mềm trên xe hơi có thể bao gồm màn hình hiển thị head-up hoặc các tính năng khác.

Ghi chú: Bạn thấy lỗi trong vòng kết thúc này hoặc muốn cung cấp phản hồi? .

Thực tế tăng cường so với Thực tế ảo

Thực tế tăng cường (AR) và thực tế ảo (VR) là những công nghệ tương tự nhau, nhưng có sự khác biệt chính giữa chúng và các ứng dụng tiềm năng của chúng rất khác nhau. Thực tế ảo đề cập đến trải nghiệm nhập vai hoàn toàn trong thế giới ảo, trong khi thực tế tăng cường đề cập đến chế độ xem được sửa đổi về thế giới thực.

Sự khác biệt có lẽ có thể được tóm tắt tốt nhất bằng cách so sánh giữa hai sản phẩm, một AR và một VR. mắt kính thông minh của Google , Bộ kính thông minh hiện không còn tồn tại của Google, là một ví dụ về thực tế tăng cường. Google Glass đeo mắt cho phép người dùng xem thế giới như hiện tại, nhưng nó cung cấp màn hình hiển thị trực diện che phủ thông tin liên quan do máy tính cung cấp lên thế giới thực đó, chẳng hạn như thời tiết địa phương, bản đồ và thông báo.

Điều này tương tự như những gì Apple được cho là đang làm việc với 'kính thông minh' được đồn đại của mình.

Trong khi đó, Facebook của Oculus Rift là một tai nghe thực tế ảo cung cấp trải nghiệm hình ảnh sống động mà không làm tăng thêm thông tin giác quan trong thế giới thực - nó thay thế hoàn toàn thế giới thực bằng thế giới giả lập.

Thực tế tăng cường cung cấp bối cảnh và thông tin do máy tính tạo ra về thế giới xung quanh chúng ta đồng thời cho phép chúng ta tương tác với môi trường xung quanh, trong khi thực tế ảo được thiết kế để cách ly chúng ta với môi trường xung quanh để chúng ta có thể tương tác với thế giới hư cấu.

iphone 11 pro max tắt

Các ứng dụng tiềm năng cho cả hai là rất khác nhau. Thực tế ảo đặc biệt tập trung vào việc tiêu thụ nội dung sống động vì nó khiến người đeo cảm thấy như thể họ đang thực sự trải nghiệm những gì đang diễn ra trong thế giới mô phỏng thông qua phản hồi hình ảnh, xúc giác và âm thanh. Thực tế ảo hiện nay phần lớn được liên kết với trò chơi, nhưng nó cũng có tiềm năng tái tạo trải nghiệm thế giới thực cho các mục đích giáo dục hoặc đào tạo.

Thực tế tăng cường không phụ thuộc vào nội dung nhập vai và mặc dù kém thú vị hơn vì nó tăng cường thực tế thay vì thay thế nó, nhưng nó có nhiều ứng dụng tiềm năng hơn. Trên thực tế, các ứng dụng và trò chơi thực tế tăng cường luôn có sẵn trong iOS 11 cảm ơn ARKit.

Với ARKit, thiết bị iOS có thể xác định một bề mặt như bàn và sau đó các đối tượng ảo có thể được thêm vào đó. Do sức mạnh tính toán của iPhone và iPad, khả năng thực tế tăng cường của ARKit rất ấn tượng. ARKit đã được sử dụng để tạo ra một loạt các ứng dụng và trò chơi, kết hợp các đối tượng kỹ thuật số với thế giới thực.

chơi

Apple có thể nhắm đến một sản phẩm hoạt động với cả thực tế ảo và thực tế tăng cường, như được gợi ý bởi những tin đồn gần đây cho thấy hoạt động trên tai nghe AR / VR. Một sản phẩm như vậy có thể được sử dụng cho các ứng dụng thực tế ảo nghiêm trọng cũng như trải nghiệm thực tế tăng cường và nó sẽ tương tự như Microsoft HoloLens.

Nhóm VR / AR của Apple

Công việc của Apple về thực tế ảo và thực tế tăng cường đã có từ nhiều năm trước, nhưng các tin đồn bắt đầu xuất hiện vào tháng 3 năm 2015 khi có tin tức cho biết Apple có một nhóm nhỏ người làm việc về thực tế tăng cường. Vào năm 2015 và đầu năm 2016, đội ngũ của Apple đã phát triển khi công ty thuê những nhân viên có chuyên môn về công nghệ AR / VR và thực hiện nhiều thương vụ mua lại có liên quan.

Nhóm AR / VR của Apple bao gồm hàng trăm kỹ sư từ khắp Apple, tất cả đều có chuyên môn về thực tế ảo và thực tế tăng cường. Nhóm làm việc trên khắp các khu văn phòng ở Cupertino và Sunnyvale, và Apple đang khám phá một số dự án phần cứng và phần mềm với tên mã 'T288.'

Nhóm thực tế tăng cường của Apple kết hợp 'thế mạnh của những người kỳ cựu về phần cứng và phần mềm' và được dẫn dắt bởi Mike Rockwell, người đến từ Dolby. Các cựu nhân viên của các công ty như Oculus, HoloLens, Amazon (thuộc nhóm VR), công ty hoạt hình 3D Weta Digital và Lucasfilm đang làm việc về AR tại Apple.

Cựu giám đốc kỹ thuật phần cứng của Apple, Dan Riccio, chuyển đổi vào tháng 1 năm 2021 đến một vai trò mới anh ấy ở đâu giám sát công việc của Apple trên tai nghe AR / VR. Dự án đã phải đối mặt với những thách thức phát triển và các nhà điều hành của Apple tin rằng sự tập trung của Riccio có thể giúp ích.

Thuê mướn

Một trong những nhân viên AR / VR nổi tiếng nhất của Apple là giáo sư khoa học máy tính Doug Bowman, người trước đây đã lãnh đạo Trung tâm Tương tác Người-Máy tính của Công ty Virginia. Anh ấy chuyên về thiết kế giao diện người dùng ba chiều và đã viết một cuốn sách về chủ đề này bao gồm giao diện 3D và những lợi ích của môi trường ảo nhập vai. Anh ấy có chuyên môn về cả thực tế ảo và thực tế tăng cường.

Apple cũng đã thuê những nhân viên đã từng làm việc trên các sản phẩm thực tế ảo hoặc thực tế tăng cường tại Microsoft và Lytro. Một số người được thuê gần đây được cho là từ nhóm HoloLens của Microsoft, trong khi những người khác làm việc tại Lytro, một công ty làm việc trên máy ảnh có thể kết hợp giữa hành động trực tiếp và đồ họa máy tính để có trải nghiệm thực tế ảo hành động trực tiếp. Các nhân viên đến từ nhóm HoloLens sẽ có kinh nghiệm tạo ra một chiếc tai nghe thực tế tăng cường tiên tiến.

Máy ảnh Lytro Immerge 360 ​​độ

Zeyu Li, người từng là kỹ sư thị giác máy tính chính tại Magic Leap (một công ty khởi nghiệp phát triển màn hình AR / VR gắn trên đầu), hiện đang làm việc tại Apple với tư cách là 'Kỹ sư thuật toán thị giác máy tính cao cấp'.

Yury Petrov, cựu nhà khoa học nghiên cứu tại Oculus thuộc sở hữu của Facebook, hiện đang là 'nhà khoa học nghiên cứu' tại Apple. Theo hồ sơ LinkedIn của mình, Petrov đã nghiên cứu trải nghiệm thực tế ảo, quang học nguyên mẫu và phát triển phần mềm mô phỏng máy tính.

Chuyên gia thực tế tăng cường Jeff Norris gia nhập Apple vào tháng 4 năm 2017 với tư cách là một quản lý cấp cao làm việc trong nhóm thực tế tăng cường của công ty. Norris thành lập Văn phòng Đổi mới Hoạt động Sứ mệnh và Phòng thí nghiệm JPL Ops tại NASA. Ông đã lãnh đạo nhiều dự án tập trung vào tương tác giữa con người và hệ thống với trọng tâm là thực tế ảo và tăng cường.

Vào tháng 5 năm 2018, Apple đã thuê Sterling Crispin, người đã phát triển một ứng dụng vẽ tranh cho tai nghe VR di động. 'Cyber ​​Paint' cho phép người đeo tai nghe VR tạo hình ảnh 2D 260 độ trên Oculus Go, Daydream, GearVR và Vive Focus. Trang LinkedIn của Crispin cho biết anh ấy đang làm 'nhà nghiên cứu tạo mẫu', cho thấy anh ấy đã hợp tác với nhóm được đồn đại là đang làm việc trên công nghệ tai nghe VR / AR.

Vào tháng 12 năm 2018, Apple đã thuê cựu nhà thiết kế cấp cao của Tesla và Microsoft HoloLens, Andrew Kim và với lý lịch của mình, anh ta có thể đang làm việc trong dự án kính AR được đồn đại của Apple hoặc chiếc xe hơi sắp tới của Apple được cho là đang được phát triển.

Người sáng lập Jaunt VR, Arthur van Hoff, gia nhập Apple với tư cách là kiến ​​trúc sư cấp cao vào tháng 4 năm 2019. Trước khi làm việc tại Apple, công ty của anh ấy đã tạo phần cứng VR , bao gồm một máy ảnh VR 3D trị giá 100.000 đô la được gọi là Jaunt One. Trước khi van Hoff rời công ty, Jaunt đã thất bại và chuyển sang trải nghiệm AR.

Với đội ngũ của Apple bao gồm hàng trăm nhân viên, có rất nhiều việc thuê chuyên gia thực tế ảo khác đã được đưa vào tầm ngắm. Trên LinkedIn, có nhiều kỹ sư phần mềm có kinh nghiệm thực tế ảo được Apple tuyển dụng, nhưng không rõ họ có làm việc trong nhóm AR / VR bí mật hay không.

Apple vào tháng 7 năm 2019 đã chuyển Kim Vorrath, một trong những giám đốc điều hành phần mềm của nó, sang tai nghe thực tế tăng cường bộ phận để 'mang lại một số trật tự' cho đội. Vorrath đã giám sát việc quản lý chương trình của nhóm phát triển phần mềm trong 15 năm và được mô tả là một 'lực lượng mạnh mẽ' đảm bảo nhân viên đáp ứng đúng thời hạn đồng thời khắc phục lỗi.

Mua lại

Nhiều thành viên trong nhóm AR / VR của Apple có thể đã gia nhập công ty thông qua việc mua lại. Kể từ năm 2015, Apple đã mua một số công ty tạo ra các sản phẩm liên quan đến AR / VR và một số thương vụ mua lại AR / VR của họ thậm chí đã có từ vài năm trước.

Apple vào tháng 8 năm 2018 đã mua Akonia Holographics, một công ty khởi nghiệp chuyên sản xuất thấu kính cho kính thực tế tăng cường. Akonia Holographics quảng cáo 'quang học phản xạ hình ảnh ba chiều và ống dẫn sóng có khối lượng thương mại đầu tiên trên thế giới cho các phần tử hiển thị trong suốt trong kính thông minh.'

Các màn hình mà nó sản xuất được cho là sử dụng công nghệ HoloMirror của công ty cho 'hiệu suất siêu rõ ràng, đầy đủ màu sắc' để cho phép 'màn hình đeo trên đầu mỏng nhất, nhẹ nhất trên thế giới.'

Vào tháng 11 năm 2017, Apple đã mua Vrvana, một công ty phát triển tai nghe thực tế hỗn hợp có tên là Totem. Totem, chưa bao giờ ra mắt công chúng, được thiết kế để kết hợp cả công nghệ thực tế ảo và tăng cường trong một tai nghe duy nhất, kết hợp khả năng thực tế ảo đầy đủ với camera xuyên qua để kích hoạt các tính năng thực tế tăng cường dựa trên màn hình.

Về cơ bản, Totem đã sử dụng một bộ camera để chiếu hình ảnh thế giới thực vào màn hình OLED 1440p tích hợp của nó, một cách tiếp cận hơi độc đáo giúp nó khác biệt với các sản phẩm cạnh tranh như HoloLens của Microsoft, sử dụng màn hình trong suốt để kết hợp thực tế ảo và tăng cường. Apple có thể đang lên kế hoạch sử dụng một số công nghệ của Totem trong một sản phẩm trong tương lai.

Apple đã mua công ty cảm biến cơ thể 3D PrimeSense của Israel vào năm 2013, làm dấy lên suy đoán rằng các khả năng dựa trên chuyển động sẽ được triển khai vào Apple TV. Công nghệ chiều sâu 3D PrimeSense và khả năng cảm biến chuyển động đã được sử dụng trong nền tảng Kinect ban đầu của Microsoft.

PrimeSense đã sử dụng ánh sáng gần IR để chiếu một ánh sáng vô hình vào một căn phòng hoặc một cảnh, sau đó được đọc bởi cảm biến hình ảnh CMOS để tạo ra hình ảnh ảo của một vật thể hoặc con người. Điều này cho phép điều khiển dựa trên chuyển động cho các giao diện phần mềm, nhưng nó cũng có thể thực hiện những việc như đo các đối tượng ảo và cung cấp khoảng cách hoặc kích thước tương đối, hữu ích cho các ứng dụng thực tế tăng cường như chơi game tương tác, lập bản đồ trong nhà, v.v. Công nghệ PrimeSense cũng có thể tạo ra các bản quét 360 độ chính xác cao về người và vật thể, có khả năng hữu ích cho các ứng dụng thực tế ảo.

Apple mua lại công ty khởi nghiệp thực tế tăng cường Metaio vào tháng 5 năm 2015. Metaio đã xây dựng một sản phẩm có tên là Metaio Creator, có thể được sử dụng để tạo các kịch bản thực tế tăng cường chỉ trong vài phút. Trước khi được Apple mua, phần mềm của Metaio đã được sử dụng bởi các công ty như Ferrari, những người đã tạo ra một phòng trưng bày thực tế tăng cường.

Công nghệ Metaio cũng được sử dụng ở Berlin để cho phép những người đến thăm địa điểm của Bức tường Berlin sử dụng điện thoại thông minh hoặc máy tính bảng để xem khu vực này trông như thế nào khi Bức tường Berlin vẫn còn đứng vững. Công nghệ của Metaio là công nghệ có thể được sử dụng để triển khai các khả năng thực tế tăng cường vào các ứng dụng của Apple như Maps.

Apple mua lại Faceshift vào tháng 8 năm 2015, đánh dấu thương vụ mua thực tế tăng cường thứ hai vào năm 2015. Trước khi được Apple mua lại, Faceshift đã làm việc với các hãng phim hoạt hình và trò chơi về công nghệ được thiết kế để nắm bắt nhanh chóng và chính xác các biểu cảm khuôn mặt bằng cách sử dụng cảm biến 3D, biến chúng thành các khuôn mặt hoạt hình trong thời gian thực. Faceshift cũng đang làm việc trên một sản phẩm hướng đến người tiêu dùng cho phép mọi người biến khuôn mặt của họ thành khuôn mặt hoạt hình hoặc mặt quái vật trong thời gian thực trong Skype.

Công nghệ của Faceshift có nhiều trường hợp sử dụng có thể xảy ra và Apple dường như đang sử dụng tính năng cung cấp năng lượng cho Animoji trên iPhone X.

Emotient, một công ty chuyên xây dựng các công cụ để phân tích nét mặt, được Apple mua lại vào tháng 1 năm 2016. Công nghệ của Emotient sử dụng trí thông minh nhân tạo và máy học để đọc cảm xúc của con người, các tính năng đã được các nhà quảng cáo sử dụng trong thế giới thực để xác định phản ứng cảm xúc đối với quảng cáo.

Có rất nhiều điều Apple có thể làm với Emotient, từ nhận diện khuôn mặt tốt hơn trong ứng dụng Photos đến phân tích cảm xúc của khách hàng trong các cửa hàng bán lẻ của Apple để mở khóa thiết bị iOS, nhưng nó cũng có khả năng sử dụng AR / VR. Giống như Faceshift, công nghệ của Emotient có thể được sử dụng để phân tích và biến đổi các biểu cảm trên khuôn mặt để tạo hình đại diện ảo, hữu ích cho các mục đích truyền thông xã hội và trò chơi. Công nghệ cảm xúc có thể đã được sử dụng cho Animoji.

Được mua vào đầu năm 2016, Flyby Media là một công ty khác hoạt động trên lĩnh vực thực tế tăng cường. Bay bằng đã tạo một ứng dụng đã hoạt động với điện thoại thông minh 'Project Tango' được trang bị cảm biến 3D của Google, cho phép đính kèm tin nhắn vào các đối tượng trong thế giới thực và những người khác xem bằng một trong các thiết bị của Google.

Ví dụ: một người có thể 'quét' một địa danh như Cầu Cổng Vàng của San Francisco và viết một thông điệp đính kèm vào đó. Một người đến thăm cây cầu sau đó sẽ có thể quét cây cầu bằng ứng dụng Flyby để xem thông báo. Ứng dụng Flyby có thể đã thu hút sự chú ý của Apple vì nó có thể nhận ra và hiểu các đối tượng khác nhau được quét, công nghệ có thể được Apple sử dụng theo một số cách trong các ứng dụng như Ảnh và Bản đồ.

Vào tháng 2 năm 2017, Apple đã mua RealFace, một công ty an ninh mạng và máy học chuyên về công nghệ nhận dạng khuôn mặt, có khả năng được sử dụng cho các tính năng thực tế tăng cường trong tương lai.

RealFace đã phát triển công nghệ nhận dạng khuôn mặt tích hợp trí tuệ nhân tạo để nhận dạng khuôn mặt không ma sát. Công nghệ Realface có thể đã được sử dụng trong iPhone X , Điện thoại thông minh đầu tiên của Apple có khả năng nhận dạng khuôn mặt dưới dạng Face ID.

Apple vào tháng 5 năm 2020 mua lại NextVR , một công ty có trụ sở tại California đã kết hợp thực tế ảo với thể thao, âm nhạc và giải trí, cung cấp trải nghiệm VR để xem các sự kiện trực tiếp trên tai nghe VR của PlayStation, HTC, Oculus, Google, Microsoft và các nhà sản xuất khác.

Apple vào tháng 8 năm 2020 đã mua Không gian khởi động VR , một công ty đã thiết kế trải nghiệm thực tế ảo mà mọi người có thể trải nghiệm trong trung tâm thương mại và các địa điểm khác, chẳng hạn như 'Terminator Salvation: Fight for the Future'. Spaces cũng tạo ra trải nghiệm thực tế ảo cho các ứng dụng giao tiếp video như Zoom, đây là thứ mà Apple có thể đưa vào một sản phẩm AR / VR trong tương lai.

Bằng sáng chế AR / VR

Apple đã nộp nhiều bằng sáng chế liên quan trực tiếp đến tai nghe thực tế ảo, tất cả đều có từ vài năm trước. Mặc dù công nghệ có thể đã tiến bộ hơn một chút so với những điều này, nhưng chúng cung cấp một cái nhìn thú vị về những ý tưởng mà Apple đã khám phá trong quá khứ.

Đơn xin cấp bằng sáng chế năm 2008 đề cập đến một 'hệ thống hiển thị cá nhân' khá cơ bản được thiết kế để bắt chước trải nghiệm như đang ở trong rạp chiếu phim khi xem video.

Bằng sáng chế thứ hai mô tả 'Hệ thống hiển thị gắn trên đầu' với 'động cơ laze' chiếu hình ảnh lên màn hình bằng kính trong suốt đeo trên mắt, tương tự như kính. Trong cấu hình này, tai nghe được kết nối với máy phát video cầm tay như iPod để cung cấp sức mạnh xử lý.

Bằng sáng chế thứ ba ban đầu được nộp vào năm 2008 có thiết kế tương tự, bao gồm một tai nghe video giống như mắt kính được thiết kế để cho phép người dùng xem phim và các nội dung khác. Nó phác thảo hai mô-đun quang học có thể điều chỉnh được xếp thẳng hàng với mắt người dùng, có thể cung cấp hiệu chỉnh thị lực và cho phép xem nội dung 3D. Apple mô tả điều này là cung cấp trải nghiệm xem phương tiện cá nhân.

ĐẾN bằng sáng chế thứ tư từ năm 2008 bao phủ một khung tai nghe video tương tự như Google Glass, cho phép người dùng trượt iPhone hoặc iPod của họ vào tai nghe để cung cấp video. Tai nghe được mô tả là một sản phẩm thực tế tăng cường cho phép người dùng làm những việc như xem video hoặc kiểm tra email trong khi vẫn để ý xung quanh.

Ngoài các bằng sáng chế liên quan đến tai nghe, Apple cũng đã nộp các bằng sáng chế mô tả các cách khác mà các tính năng thực tế ảo và thực tế tăng cường có thể được triển khai vào các thiết bị của mình. Đơn xin cấp bằng sáng chế năm 2009, ví dụ, màn hình 3D được trang bị máy ảnh được che phủ sẽ thay đổi góc nhìn dựa trên vị trí tương đối của người dùng.

Màn hình như vậy sẽ phát hiện chuyển động của đầu, cho phép người dùng di chuyển đầu của họ để xem hình ảnh 3D từ các góc khác nhau đồng thời kết hợp các yếu tố của môi trường của người dùng.

Bằng sáng chế năm 2010 và 2012 mô tả việc sử dụng cảm biến chuyển động để tạo giao diện 3D cho thiết bị iOS bằng kỹ thuật thực tế tăng cường. Apple mô tả giao diện này giống như một 'phòng ảo' được điều hướng bằng cách điều khiển hướng của thiết bị thông qua các cảm biến tích hợp hoặc thông qua cử chỉ.

Năm 2011, Apple đã nộp bằng sáng chế cho một tính năng thực tế tăng cường trong ứng dụng Bản đồ liên quan đến việc lập bản đồ khoảng cách đến các địa danh đáng chú ý. Với máy ảnh, người dùng có thể quan sát khu vực xung quanh họ và nhận được ước tính thời gian thực về khoảng cách giữa hai điểm cùng với các lớp thông tin có liên quan.

Bằng sáng chế được nộp vào năm 2014 và được cấp vào năm 2017 bao gồm một hệ thống thực tế tăng cường di động có thể phát hiện các đối tượng trong môi trường và phủ chúng bằng thông tin ảo thông qua việc sử dụng máy ảnh, màn hình và giao diện người dùng. Apple mô tả hệ thống này là lý tưởng cho màn hình gắn trên đầu, nhưng nó cũng cho thấy nó đang được sử dụng trong điện thoại thông minh.

Apple đã và đang làm việc trên công nghệ thực tế ảo có thể được sử dụng trong xe tự hành . Một số bằng sáng chế của Apple mô tả một hệ thống bao gồm hệ thống thực tế ảo trong xe hơi với tai nghe VR được đeo để cung cấp giải trí và giảm thiểu tình trạng say xe do các tác vụ như đọc và làm việc khi xe đang chuyển động.

ĐẾN Đơn xin cấp bằng sáng chế tháng 7 năm 2020 bao gồm các phương thức nhập liệu có thể có với Apple Glasses, mô tả một hệ thống trong đó kính sử dụng cảm biến nhiệt hồng ngoại để phát hiện khi ai đó chạm vào vật thể trong thế giới thực, cho phép kính chiếu các điều khiển lên bề mặt thế giới thực.

Với phương pháp này, Apple Glasses có thể chiếu trong giao diện điều khiển AR lên bất kỳ đối tượng thực tế nào trong thế giới thực để tạo ra một loại hiệu ứng lớp phủ thực tế hỗn hợp.

Apple vào tháng 2 năm 2021 nộp một số bằng sáng chế liên quan đến công trình nghiên cứu tai nghe thực tế hỗn hợp được đồn đại, với các bằng sáng chế bao gồm các yếu tố thiết kế, điều chỉnh ống kính, công nghệ theo dõi mắt và phần mềm.

Apple đã phát triển một số phương pháp để làm cho tai nghe thoải mái hơn khi đeo trong khi vẫn giữ an toàn và cản ánh sáng, ngoài ra còn có một hệ thống điều chỉnh thấu kính chi tiết sử dụng chất lỏng để dịch chuyển thấu kính một cách liền mạch để làm cho phù hợp tùy chỉnh cho từng người dùng.

Apple cũng nêu chi tiết về hệ thống theo dõi mắt sử dụng ánh sáng hồng ngoại để phát hiện vị trí và cũng có bằng sáng chế về cách có thể chỉnh sửa tài liệu trong không gian 3D ảo bằng cách sử dụng tai nghe và phát hiện cử chỉ.

Apple có hệ thống được cấp bằng sáng chế để quay video từ tai nghe, trong đó cảm biến theo dõi ánh nhìn tích hợp có thể cung cấp chỉ báo về nơi một người hiện đang nhìn, điều này có thể hướng một máy ảnh tích hợp để ghi lại cảnh mà mắt người dùng được định vị, thay vì chỉ ghi lại những gì ở phía trước của người dùng.

Một đơn xin cấp bằng sáng chế khác đệ trình vào tháng 2 năm 2021 cho thấy Apple đang nghiên cứu một thiết bị gắn bằng ngón tay với một loạt các cảm biến và phản hồi xúc giác để được sử dụng như một thiết bị điều khiển cho tai nghe thực tế hỗn hợp.

Thiết bị điều khiển có hình dạng cho phép người dùng cảm nhận các vật thể xung quanh một cách tự nhiên và có thể xác định chính xác cách người dùng di chuyển ngón tay và tương tác với các bề mặt. Hệ thống được cho là chính xác đến mức nó có thể phát hiện mức độ khó của người dùng đang nhấn vào một bề mặt và hướng chính xác của lực này, cung cấp phản hồi xúc giác để phản hồi.

Cùng với tai nghe AR hoặc VR, Apple nói rằng thiết bị gắn bằng ngón tay này có thể 'cung cấp cho người dùng cảm giác tương tác trên bàn phím vật lý khi người dùng chạm ngón tay trên mặt bàn' hoặc 'cho phép người dùng cung cấp phím điều khiển -type input 'để chơi game chỉ bằng chuyển động của đầu ngón tay người dùng.

Ngày ra mắt

Nhà phân tích Ming-Chi Kuo của Apple cho biết vào tháng 10 năm 2021 rằng tai nghe thực tế hỗn hợp sắp tới có bị trì hoãn sớm nhất là đến cuối năm 2022, với việc sản xuất dự kiến ​​bắt đầu vào quý 4 năm 2022.

Bloomberg cũng tin rằng tai nghe AR / VR mà Apple đang nghiên cứu sẽ ra mắt vào năm 2022, trong khi kính AR đang được phát triển sẽ ra mắt vào một ngày sau đó. Thông tin đã gợi ý rằng tai nghe AR / VR sẽ được phát hành vào năm 2022, tiếp theo là kính thông minh vào năm 2023, nhưng đây là mốc thời gian sớm hơn so với các nguồn khác đã chỉ ra cho sản phẩm kính này.

Apple được cho là đã đứng sau quá trình thử nghiệm kính thông minh đang được sản xuất, điều này có thể dẫn đến sự chậm trễ. Apple được cho là sẽ bước vào giai đoạn phát triển thứ hai của kính vào đầu năm 2021, nhưng giai đoạn hai thử nghiệm vẫn chưa bắt đầu nên sản lượng sản xuất lớn trong quý đầu tiên của năm 2022 là Không được trông đợi .

Các nhà phân tích của Morgan Stanley gần đây đã nói rằng tai nghe AR đang 'sắp cất cánh' dựa trên số lượng bằng sáng chế Apple đã xuất bản. Các nhà phân tích tin rằng danh mục bằng sáng chế của Apple cho tai nghe AR / VR của nó tương tự như danh mục bằng sáng chế mà hãng đã xây dựng trước khi ra mắt Apple Watch.

Các kế hoạch AR / VR trong tương lai

Nhà phân tích Ming-Chi Kuo của Apple tin rằng Apple có thể đang lên kế hoạch cho 'kính áp tròng' thực tế tăng cường có thể khởi động vào những năm 2030.

Theo Kuo, các ống kính này sẽ đưa thiết bị điện tử từ kỷ nguyên 'điện toán nhìn thấy' sang 'điện toán vô hình'. Kính áp tròng 'không có khả năng hiển thị tại thời điểm hiện tại, và đây không phải là sản phẩm đảm bảo mà Apple sẽ phát triển.