Meta hari ini mengumumkan “peningkatan besar” yang akan datang ke kemampuan pelacakan tangan tanpa pengontrol dari Quest 2. ‘Pendekatan visi komputer dan pembelajaran mesin yang diarsitektur ulang’ dikatakan secara khusus meningkatkan keandalan untuk tangan yang tumpang tindih atau bergerak cepat dan gerakan tertentu. Pembaruan SDK dan OS untuk mengaktifkan kemampuan yang ditingkatkan ini akan mulai diluncurkan hari ini.
Meta pertama kali memperkenalkan pelacakan tangan tanpa pengontrol ke Quest asli pada akhir 2019 di mana itu tetap menjadi fitur ‘eksperimental’ hingga pertengahan 2020 ketika mulai memungkinkan pengembang untuk menggunakan kemampuan baru di aplikasi mereka.
Sejak itu, kami telah melihat beberapa game memasukkan pelacakan tangan ke dalam aplikasi mereka dan bahkan peluncuran beberapa game yang secara eksklusif mengandalkan pelacakan tangan, seperti Hand Physics Lab (2021) dan Unplugged: Air Guitar (2021).
Sekarang, kurang dari setahun kemudian, Meta mengatakan itu membawa “perbaikan besar” pada kemampuan pelacakan tangan Quest 2 (perusahaan mengonfirmasi bahwa Quest asli tidak akan menerima peningkatan ini).
Peningkatan ini terjadi berkat ‘visi komputer yang diarsitektur ulang dan pendekatan pembelajaran mesin’ yang meningkatkan kekokohan pelacakan tangan dengan cara-cara utama.
Dengan pelacakan tangan versi 1.0 pada Quest 2, sistem mengalami masalah khusus dalam mengenali tangan pengguna saat mereka menghalangi atau menyentuh satu sama lain dan saat bergerak cepat. Dari sudut pandang pengguna, tangan virtual mereka akan menghilang sesaat selama momen pelacakan yang hilang ini dan kemudian muncul kembali setelah sistem mendeteksinya lagi.
Dengan pelacakan tangan versi 2.0 pada Quest 2, Meta mengatakan sistem akan menangani skenario yang terhambat dan bergerak cepat dengan jauh lebih baik, yang mengarah ke lebih sedikit contoh tangan yang hilang. Perusahaan menyebutnya sebagai “peningkatan fungsi langkah dalam melacak kontinuitas.”
Pembaruan juga dikatakan untuk meningkatkan pengenalan gerakan dalam sistem pelacakan tangan. Pengenalan gerakan mencari pose tangan tertentu yang dideteksi sistem sebagai unik dan oleh karena itu dapat digunakan sebagai input. Misalnya, mencubit adalah salah satu gerakan tersebut dan digunakan untuk memungkinkan pengguna ‘mengklik’ elemen di antarmuka Quest.
Dalam demo di bawah ini, gerakan ‘ambil’ digunakan untuk menahan objek virtual, dan peningkatan ketahanan untuk bertepuk tangan juga ditunjukkan.
Meta mengatakan pembaruan 2.0 pelacakan tangan pada Quest 2 akan mulai diluncurkan melalui pembaruan SDK dan OS mulai hari ini. Perusahaan mengatakan pengembang yang telah membangun pelacakan tangan ke dalam aplikasi mereka tidak perlu mengubah panggilan API apa pun untuk menggunakan sistem yang ditingkatkan, meskipun itu tidak akan diaktifkan secara otomatis. Perusahaan mengatakan pengembang dapat merujuk “dokumentasi yang akan datang” untuk mengaktifkannya di aplikasi mereka.
Langkah ini akan membawa pelacakan tangan Quest 2 selangkah lebih dekat ke Ultraleap, yang telah mempertahankan beberapa pelacakan tangan terbaik di industri hingga saat ini, meskipun belum jelas bagaimana kedua sistem akan menumpuk.