Para peneliti di Facebook Reality Labs hari ini menerbitkan karya baru yang menampilkan headset prototipe yang memiliki tampilan eksternal untuk menggambarkan mata pengguna kepada orang lain di luar headset. Tujuannya adalah untuk memungkinkan kontak mata antara pemakai headset dan orang lain dalam upaya untuk mengurangi rasa canggung saat memakai headset dan berkomunikasi dengan seseorang di ruangan yang sama.
Salah satu hal favorit saya untuk dilakukan ketika mendemonstrasikan Oculus Quest kepada seseorang untuk pertama kalinya adalah memasang headset, mengaktifkan ‘passthrough view’ (yang memungkinkan saya melihat dunia di luar headset), lalu berjalan dan goyang tangan mereka untuk mengungkapkan dengan jelas bahwa saya dapat melihat mereka. Karena kamera Quest berada di keempat sudut visor, tidak mudah membayangkan bahwa akan ada cara bagi pengguna untuk melihat ‘melalui’ headset, sehingga hasil dari luar tampak sedikit ajaib. Setelah itu saya memasang headset pada orang tersebut dan membiarkan mereka melihat apa yang bisa saya lihat dari dalam!
Tapi demo kecil yang menyenangkan ini juga mengungkapkan masalah. Meskipun mudah bagi orang di headset untuk melihat orang di luar headset, tidak jelas bagi orang di luar headset ketika orang di headset benar-benar melihat mereka (daripada melihat dunia virtual yang sama sekali berbeda .
Kontak mata jelas merupakan faktor besar dalam komunikasi tatap muka; itu membantu kita mengukur apakah seseorang memperhatikan percakapan, bagaimana perasaan mereka tentang hal itu, dan bahkan jika mereka memiliki sesuatu untuk dikatakan, ingin mengubah topik, atau meninggalkan percakapan sama sekali. Mencoba berbicara dengan seseorang yang matanya tidak dapat Anda lihat terasa tidak nyaman dan canggung, khususnya karena hal itu merampas kemampuan kita yang sudah mendarah daging untuk mendeteksi niat semacam ini.
Tetapi karena headset VR menjadi lebih tipis dan lebih nyaman — dan menjadi lebih mudah untuk menggunakan passthrough untuk melakukan percakapan dengan seseorang di sekitar daripada melepas headset sepenuhnya — ini akan menjadi masalah yang berkembang.
Para peneliti di Facebook Reality Labs telah menemukan solusi teknologi tinggi untuk masalah ini. Memanfaatkan tampilan bidang cahaya yang dipasang di bagian luar headset VR, yang disebut sistem prototipe ‘passthrough terbalik’ bertujuan untuk menunjukkan representasi mata pengguna yang kedalaman dan arahnya akurat.
Dalam sebuah makalah yang diterbitkan minggu ini untuk SIGGRAPH 2021, peneliti Facebook Reality Labs Nathan Matsuda, Joel Hegland, dan Douglas Lanman, merinci sistem tersebut. Sementara bagi pengamat eksternal tampaknya headset ini sangat tebal tetapi cukup transparan untuk dilihat mata mereka, kedalaman yang tampak adalah ilusi yang diciptakan oleh tampilan bidang cahaya di bagian luar headset.
Jika itu bukan tampilan biasa, mata pengguna akan tampak melayang jauh dari wajah mereka, mungkin membuat gambar yang lebih tidak nyaman daripada tidak dapat melihatnya sama sekali! Peneliti di bawah Nathan Matsuda menunjukkan sistem tanpa mata (kiri), dengan mata tetapi tanpa kedalaman (tengah), dan dengan mata dan kedalaman (kanan).
Tampilan bidang cahaya (dalam hal ini tampilan yang menggunakan susunan lensa mikro), memungkinkan banyak pengamat untuk melihat isyarat kedalaman yang benar tidak peduli di sudut mana mereka berdiri.
Namun, apa yang dilihat pengamat bukanlah gambaran nyata dari mata pengguna. Sebagai gantinya, data pelacakan mata diterapkan ke model 3D wajah pengguna, yang berarti teknik ini akan dibatasi oleh seberapa realistis model tersebut dan seberapa mudahnya diperoleh untuk setiap individu.
Tentu saja, Facebook telah melakukan beberapa pekerjaan yang sangat mengesankan di bagian depan itu juga dengan proyek Codec Avatars mereka. Para peneliti mengolok-olok contoh Codec Avatar yang digunakan untuk fungsi reverse passthrough (di atas), yang terlihat lebih baik, tetapi resolusi jelas masih menjadi faktor pembatas—sesuatu yang para peneliti yakini akan diatasi pada waktunya.
Kepala Ilmuwan Facebook Reality Labs, Michael Abrash mengakui bahwa dia tidak berpikir ada banyak manfaat dari ide reverse passthrough sampai para peneliti membuktikan konsepnya lebih lanjut.
“Reaksi pertama saya adalah bahwa itu adalah ide yang konyol, yang paling baru,” kata Abrash dalam sebuah posting tentang pekerjaan itu. “Tetapi saya tidak memberi tahu peneliti apa yang harus dilakukan, karena Anda tidak mendapatkan inovasi tanpa kebebasan untuk mencoba hal-hal baru, dan itu hal yang baik, karena sekarang ini jelas merupakan ide unik dengan janji yang tulus.”
