Bên trong Aria Gen 2- Khám phá công nghệ tiên tiến đằng sau thiết bị

Hôm nay, chúng tôi rất vui mừng được chia sẻ thêm về công nghệ bên trong Aria Gen 2. Điều này bao gồm một cái nhìn tổng quan chuyên sâu về yếu tố hình thức, khả năng âm thanh, thời lượng pin, máy ảnh và cảm biến được nâng cấp, tính toán trên thiết bị, v.v.

  • 7 min read
Bên trong Aria Gen 2- Khám phá công nghệ tiên tiến đằng sau thiết bị
Hôm nay, chúng tôi rất vui mừng được chia sẻ thêm về công nghệ bên trong Aria Gen 2. Điều này bao gồm một cái nhìn tổng quan chuyên sâu về yếu tố hình thức, khả năng âm thanh, thời lượng pin, máy ảnh và cảm biến được nâng cấp, tính toán trên thiết bị, v.v.

Bên trong Aria Gen 2: Khám phá công nghệ tiên tiến đằng sau thiết bị

Đầu năm nay, chúng tôi đã công bố kính nghiên cứu mới nhất của mình, Aria Gen 2, đánh dấu sự tiếp nối sứ mệnh của Dự án Aria trong việc cho phép các nhà nghiên cứu trên toàn thế giới nâng cao trình độ hiện đại trong nhận thức máy móc, AI theo ngữ cảnh và robot học thông qua quyền truy cập vào phần cứng nghiên cứu tiên tiến và các bộ dữ liệu, mô hình và công cụ nguồn mở. Hôm nay, chúng tôi rất vui mừng được chia sẻ thêm về công nghệ bên trong Aria Gen 2. Điều này bao gồm tổng quan chuyên sâu về hệ số hình thức, khả năng âm thanh, thời lượng pin, camera và cảm biến được nâng cấp, tính toán trên thiết bị, v.v.

Aria Gen 2 là gì?

Aria Gen 2 là một thiết bị đeo được kết hợp những tiến bộ mới nhất trong thị giác máy tính, máy học và công nghệ cảm biến. Hệ số hình thức nhỏ gọn và thiết kế nhẹ của Aria Gen 2 khiến nó trở thành lựa chọn lý tưởng cho các nhà nghiên cứu cần thu thập dữ liệu hoặc xây dựng nguyên mẫu trong nhiều cài đặt khác nhau. Kính chứa một số cải tiến khi so sánh với Aria Gen 1, tiền thân nghiên cứu của nó, được công bố vào năm 2020.

Aria Gen 2: Những tiến bộ và tính năng

Sự chuyển đổi từ Aria Gen 1 sang Gen 2 đánh dấu một bước nhảy vọt đáng kể trong công nghệ đeo được, cung cấp các tính năng và khả năng nâng cao phục vụ cho nhiều ứng dụng và nhu cầu của người dùng hơn. Dưới đây, chúng ta sẽ khám phá những khác biệt và cải tiến chính được giới thiệu trong Aria Gen 2.

1. Khả năng đeo

Aria Gen 2 tự hào có khả năng đeo vượt trội, được đặc trưng bởi sự thoải mái và vừa vặn được tăng cường, đồng thời đáp ứng nhiều hình thái khuôn mặt và bộ cảm biến phong phú để nghiên cứu. Kính duy trì thiết kế nhẹ (nặng 74 – 76g, tùy thuộc vào kích thước) và hiện bao gồm tay gập để dễ dàng cất giữ và vận chuyển để sử dụng hàng ngày. Để đảm bảo mỗi người đeo có được sự phù hợp về thể chất và chức năng tối ưu, chúng tôi đã giới thiệu tám biến thể kích thước của thiết bị—tính đến một số yếu tố con người bao gồm chiều rộng đầu và sự thay đổi cầu mũi.

Tám biến thể kích thước của thiết bị Aria Gen 2.

2. Cải tiến camera Thị giác Máy tính (CV)

Dải động cao (HDR): Cảm biến camera màn trập toàn cầu của Aria Gen 2 cung cấp dải động cao 120 dB, so với dải 70 dB ở Gen 1. Điều này cho phép các tác vụ thị giác máy tính vượt trội trong các điều kiện ánh sáng khác nhau.

Video minh họa camera CV có thể chụp các cảnh có độ động cao với sợi đốt của đèn LED được phân giải cùng với phần còn lại của các chi tiết từ cảnh.

Trường nhìn rộng (FOV): Aria Gen 2 được trang bị bốn camera thị giác máy tính (CV), tăng gấp đôi số lượng camera CV trong Gen 1, để cung cấp trường nhìn rộng hơn và cho phép theo dõi tay và đối tượng 3D nâng cao.

Độ chồng ảnh nổi: Độ chồng ảnh nổi ở Gen 2 tăng lên 80° so với 35° của Gen 1, tạo điều kiện cho các mô hình nền tảng dựa trên ảnh nổi giúp tăng cường nhận thức về độ sâu và không gian.

Ví dụ ở đây minh họa cách độ chồng ảnh nổi được tăng lên cho phép các phương pháp như FoundationStereo của NVIDIA tạo ra bản đồ độ sâu dựa trên hình ảnh nổi được hiệu chỉnh. Bản đồ độ sâu có thể được hợp nhất để tạo ra các cấu trúc hình học của cảnh chỉ bằng dữ liệu cặp nổi của Aria Gen 2.

3. Tích hợp Cảm biến Mới

Cảm biến Ánh sáng Xung quanh (ALS): Aria Gen 2 bao gồm ALS được hiệu chỉnh, cho phép các thuật toán kiểm soát phơi sáng tốt hơn và mở khóa các khả năng mới ở tốc độ khung hình thấp. Chế độ tia cực tím của ALS có thể được sử dụng để phân biệt giữa ánh sáng trong nhà và ngoài trời như được minh họa bằng video.

Micrô Tiếp xúc: Aria Gen 2 bao gồm micrô tiếp xúc được nhúng trong miếng đệm mũi của thiết bị, giúp tăng cường khả năng thu âm trong môi trường ồn ào.

Video giới thiệu người đeo trong một đường hầm gió để mô phỏng một kịch bản có gió, trong đó micrô tiếp xúc có thể thu được tiếng thì thầm của người đeo khi micrô âm thanh không thể.

Nhịp tim: Aria Gen 2 bao gồm cảm biến đo quang ký (PPG) được nhúng trong miếng đệm mũi của thiết bị, cho phép ước tính nhịp tim của người đeo thiết bị.

4. Căn chỉnh thời gian thiết bị

Aria Gen 2 có một giải pháp phần cứng tích hợp sử dụng công nghệ vô tuyến Sub-GHz để phát thông tin thời gian, cho phép căn chỉnh thời gian chính xác với các thiết bị Aria Gen 2 khác hoặc các thiết bị tương thích hỗ trợ vô tuyến Sub-GHz. Công nghệ này đạt được căn chỉnh thời gian với độ chính xác dưới mili giây, đánh dấu một cải tiến đáng kể so với căn chỉnh dựa trên phần mềm của Gen 1.

Video cho thấy Aria Gen 2 sử dụng tính năng căn chỉnh thời gian của thiết bị cho các tác vụ như viết từ các bản chụp phân tán từ hai thiết bị Aria Gen 2.

5. Tín hiệu Nhận thức Máy (MP) theo thời gian thực trên thiết bị

Aria Gen 2 có các thuật toán nhận thức máy nâng cao trên thiết bị chạy trên bộ đồng xử lý tùy chỉnh tiết kiệm năng lượng của Meta. Các khả năng tiên tiến này cho phép thiết bị tạo ra dữ liệu chính xác và chính xác, theo dõi cách chúng ta tương tác với môi trường xung quanh.

Đo quãng đường trực quan quán tính (VIO)

Một trong những tính năng chính của Aria Gen 2 là khả năng theo dõi kính ở sáu bậc tự do (6DOF) trong một khung tham chiếu không gian bằng cách sử dụng Đo quãng đường trực quan quán tính (VIO). Điều này cho phép điều hướng và lập bản đồ môi trường một cách liền mạch, mở ra những khả năng mới cho nghiên cứu về AI theo ngữ cảnh và robot học.

Theo dõi mắt

Aria Gen 2 cũng tự hào có một hệ thống theo dõi mắt dựa trên camera tiên tiến, theo dõi ánh nhìn của người đeo với độ chính xác vô song. Hệ thống này cung cấp rất nhiều thông tin, bao gồm: ánh nhìn trên mỗi mắt, điểm hội tụ, phát hiện nhấp nháy, ước tính tâm đồng tử, đường kính đồng tử, tâm giác mạc, v.v.

Các tín hiệu nâng cao này cho phép hiểu sâu hơn về sự chú ý và ý định trực quan của người đeo, mở ra những khả năng mới cho tương tác giữa người và máy tính.

Theo dõi tay

Aria Gen 2 cũng có một giải pháp theo dõi tay theo dõi tay của người đeo trong không gian 3D. Điều này tạo ra các tư thế khớp tay có khớp nối trong khung tham chiếu của thiết bị, tạo điều kiện chú thích tay chính xác cho các bộ dữ liệu và cho phép các ứng dụng như thao tác bằng tay robot khéo léo đòi hỏi độ chính xác cao.

<video src=“https://video.fhan15-1.fna.fbcdn.net/o1/v/t2/f2/m69/AQPVrQIr7Q6x3ry98oA2JrXi06sAcniEbj2UmFl_iFBVAE-8jTvxAruP25sHHiwB-pan3UJjhcFhHB6czC9hkjNF.mp4?strext=1&amp;_nc_cat=102&amp;_nc_oc=Adl1mLn9Rk1i1VwbcTDidsZMJ6Pi4mmOIYInBYgTtXIlLepDpOZr6UQEhcwAaHPqIvI5Ifsh-7ZwtzmAq61MhDFJ&amp;_nc_sid=5e9851&amp;_nc_ht=video.fhan15

Recommended for You

Giới thiệu Chương trình Khởi nghiệp Llama

Giới thiệu Chương trình Khởi nghiệp Llama

Chúng tôi vui mừng thông báo Chương trình Khởi nghiệp Llama, một sáng kiến mới để trao quyền cho các công ty khởi nghiệp giai đoạn đầu đổi mới và xây dựng các ứng dụng AI tạo sinh bằng Llama.

Chia sẻ các công cụ bảo vệ mã nguồn mở mới và những tiến bộ trong bảo mật và quyền riêng tư của AI

Chia sẻ các công cụ bảo vệ mã nguồn mở mới và những tiến bộ trong bảo mật và quyền riêng tư của AI