Konversi Foto 2D ke 3D di visionOS 2 adalah Real Deal

, , , , ,

Fitur konversi foto 2D ke 3D yang hadir pada Vision Pro di VisionOS 2.0 membuat kemampuan baru menjadi bermakna untuk pertama kalinya.

Isyarat “Apple bahkan tidak melakukannya terlebih dahulu!” di komentar.

Kamu tidak salah. Tampaknya ada ratusan startup berbeda selama bertahun-tahun yang berjanji untuk mengubah foto 2D menjadi 3D.

Bahkan Meta sempat mencobanya ketika menambahkan konversi foto 2D ke 3D ke Facebook beberapa tahun lalu. Namun mereka tidak pernah benar-benar mengetahuinya… mungkin karena melihat foto 3D di ponsel pintar tidak begitu menarik, meskipun Facebook menambahkan sedikit animasi ‘goyangan’ untuk menunjukkan kedalaman pada tampilan 2D.

Terkait fitur yang benar-benar ingin digunakan orang—tidak masalah siapa yang melakukannya terlebih dahulu. Tidak masalah siapa yang melakukannya dengan baik.

Judul ini mengatakan “yang sebenarnya,” karena Apple sebenarnya telah melakukannya dengan baik dengan Vision Pro. Konversi 2D ke 3D tidak hanya terlihat bagus, fitur ini sebenarnya diterapkan sedemikian rupa sehingga melampaui upaya baru sebelumnya.

Fitur ini merupakan bagian dari visionOS 2.0, yang saat ini tersedia dalam versi beta pengembang. Apple mengatakan fitur tersebut membuat “foto spasial” dari gambar 2D yang ada (yang tentu saja berarti ‘3D’ stereoskopis).

Memang benar, meskipun “hanya stereoskopis”, melihat foto Anda sendiri dalam 3D benar-benar menambah lapisan kedalaman pada foto tersebut (secara kiasan dan harfiah). Meskipun foto 2D dapat mengingatkan kita akan kenangan, foto 3D terasa lebih dekat dengan benar-benar mengunjungi memori… atau setidaknya melihatnya melalui jendela.

Di VisionOS 2.0, cukup buka aplikasi Foto biasa, lalu buka foto mana saja dan lihat ikon kubus kecil di kiri atas. Klik dan headset menganalisis dan mengubahnya menjadi 3D hanya dalam dua atau tiga detik. Dengan satu klik Anda juga dapat kembali ke aslinya.

Hasilnya tidak sempurna tetapi sangat mengesankan. Sayangnya saya tidak bisa menampilkannya kepada Anda di sini—karena saya tidak punya cara untuk menyematkan foto 3D di halaman ini, dan 99,9% dari Anda mungkin tetap membacanya di tampilan 2D—tetapi ini adalah 2D ke 3D otomatis terbaik konversi foto yang saya lihat secara pribadi.

Kecepatan dan keakuratannya sangat mengesankan karena konversi terjadi 100% di perangkat. Apple tidak mengirimkan foto Anda ke server untuk membuat versi 3D dengan sumber daya pemrosesan cloud dan kemudian mengirimkannya kembali ke headset Anda. Hal ini membuat fitur ini aman secara default (dan tersedia secara offline), yang sangat penting terutama jika menyangkut kumpulan data yang bersifat pribadi seperti perpustakaan foto seseorang.

Di seluruh foto yang Anda temukan di perpustakaan rata-rata orang—gambar orang, hewan peliharaan, tempat, dan terkadang benda—algoritme konversi tampaknya menangani berbagai hal dengan sangat baik.

Meskipun fitur ini berfungsi paling baik pada fotografi kehidupan nyata, Anda juga dapat menggunakannya pada citra sintetis, seperti karya seni digital, foto yang dihasilkan AI, rendering 3D, dan sejenisnya. Hasilnya bervariasi, namun secara keseluruhan saya terkesan dengan kemampuan fitur ini dalam menciptakan kedalaman 3D yang masuk akal bahkan dari citra sintetis yang sebenarnya tidak pernah memiliki kedalaman 3D.

Hal yang tampaknya paling sulit diatasi oleh algoritme ini adalah permukaan yang sangat reflektif dan tembus cahaya. Seringkali hal ini berakhir dengan ‘melukis’ pantulan tepat pada objek yang dipantulkan, daripada memproyeksikannya ‘ke dalam’ objek dengan kedalaman yang benar.

Satu-satunya batasan utama saat ini adalah konversi foto 2D ke 3D sepertinya tidak berfungsi pada gambar panorama. Panorama On Vision Pro sudah dapat diperbesar dan dililitkan di sekitar Anda sedemikian rupa sehingga terasa seukuran aslinya, namun panorama tersebut masih akan mendapatkan lapisan dampak emosional lainnya karena 3D-ified.

Tidak jelas mengapa batasan ini ada saat ini, namun kemungkinan besar karena panorama cenderung memiliki resolusi yang sangat tinggi (dan memerlukan waktu lebih dari beberapa detik untuk mengkonversi), atau algoritma 2D ke 3D Apple memerlukan lebih banyak pelatihan mengenai bidang pandang yang luas. perumpamaan.

Di luar batasan tersebut, hal yang benar-benar menjadikan fitur ini… sebuah fitur (bukan hanya ‘kemungkinan teknis’), adalah bahwa fitur ini dibangun langsung dan berfungsi di tempat dan cara yang Anda harapkan.

Anda tidak hanya dapat mengirim foto spasial ke pengguna lain yang dapat melihatnya dalam 3D di headset mereka, Anda juga dapat memulai sesi SharePlay dan melihatnya bersama-sama—cara luar biasa untuk berbagi momen dan kenangan dengan orang-orang yang berarti bagi Anda.

Dan mudah untuk mendapatkan foto yang Anda inginkan ke headset untuk dilihat.

Banyak orang yang perpustakaan foto iCloud-nya disinkronkan dengan headset, sehingga semua foto favorit mereka sudah siap untuk dilihat dalam 3D. Saya pribadi tidak menggunakan foto iCloud, tetapi saya dapat dengan mudah memilih beberapa foto favorit saya dari iPhone dan AirDrop, yang secara otomatis membuka aplikasi Foto sehingga foto tersebut berada tepat di depan saya di headset.

Source