“Kami memiliki API passthrough kamera yang akan hadir awal tahun depan.”
Dalam pengumuman mengejutkan di Connect 2024 hari ini, Meta mengungkapkan bahwa pihaknya akan memberikan pengembang akses ke kamera passthrough headset Quest melalui API baru tahun depan.
“Ini akan memungkinkan semua jenis pengalaman MR yang canggih. Anda memiliki objek yang dilacak, aplikasi AI, overlay yang canggih, pemahaman pemandangan, dan masih banyak lagi.”
Sementara headset realitas campuran seperti Meta Quest 3 dan Apple Vision Pro menggunakan kamera agar Anda dapat melihat dunia nyata, saat ini hanya sistem dan aplikasi pihak pertama tertentu yang benar-benar mendapatkan akses mentah ke kamera. Pengembang pihak ketiga dapat menggunakan passthrough kamera sebagai latar belakang, tetapi aplikasi mereka tidak dapat benar-benar melihat passthrough ini. Sebaliknya, mereka mendapatkan data tingkat tinggi, seperti koordinat rangka tangan dan tubuh, jaring 3D lingkungan Anda dengan kotak pembatas untuk furnitur, dan kemampuan pelacakan objek yang terbatas. Itu berarti mereka tidak dapat menjalankan model visi komputer mereka sendiri, yang sangat membatasi kemampuan augmentasi headset ini.
Dengan visionOS 2, Apple kini memberikan perusahaan-perusahaan besar akses mentah ke kamera passthrough Vision Pro untuk aplikasi internal non-publik, tetapi ini memerlukan lisensi khusus dari Apple dan dibatasi “hanya di lingkungan bisnis”.
Meta belum mengatakan apakah akan ada pembatasan pada Passthrough API, tetapi kami akan terus memantau perusahaan untuk detail lebih lanjut tentang kemampuan mendatang yang menarik ini, yang dapat membuka kasus penggunaan yang sepenuhnya baru untuk headset Quest.