Facebook menciptakan kamera Surround 360 VR yang mengagumkan, memberikan desainnya

Facebook surround 360

Facebook telah memperjelas bahwa mereka melihat masa depan dalam Virtual Reality melalui pembelian Oculus yang bernilai miliaran dolar. Namun, sekarang Rift akhirnya dikirim, dan jutaan setidaknya bereksperimen dengan alternatif murah seperti Google Cardboard, perusahaan telah mengalihkan perhatiannya untuk membuat lebih banyak konten untuk perangkat tersebut. Pada konferensi pengembang tahunannya, F8, mengambil langkah besar ke arah ini dengan mengumumkan bahwa mereka tidak hanya merancang apa yang dianggapnya sebagai rig kamera 360 derajat terbaik, tetapi juga akan open source perangkat keras dan perangkat lunak. Yang Anda perlukan hanyalah komponen senilai $ 30.000 dan beberapa teknisi untuk merakit salah satu milik Anda sendiri.

Tantangan dalam membuat konten 3D 360 derajat yang hebat

Desain usia luar angkasa FacebookSelain tantangan kreatif dalam merekam video yang imersif, tantangan teknisnya sendiri juga cukup menakutkan. Mereka jatuh pada perangkat keras dan perangkat lunak - meskipun pimpinan proyek Surround 360, Brian Cabral, menjelaskan bahwa mendapatkan perangkat keras dengan benar adalah pendekatan yang lebih disukai, karena hal itu membuat tugas perangkat lunak jauh lebih mudah. Dia mengidentifikasi tiga area tantangan utama yang harus dihadapi Facebook untuk memastikan bahwa video Surround 360 akan berkualitas tinggi dan bebas artefak: menciptakan kesan mendalam, menyinkronkan kamera, dan menyelaraskannya. Dalam setiap kasus, Facebook telah melakukan investasi untuk membuat desain perangkat keras yang menangani masalah tersebut. Lebih baik lagi, perusahaan berencana untuk memberikan desain perangkat keras dan perangkat lunaknya, sehingga dapat diimplementasikan dan ditingkatkan oleh siapa saja yang bersedia menerima tantangan tersebut.

Kedalaman

Bidang pandang yang tumpang tindih memungkinkan untuk menghasilkan tampilan stereo sintetis dengan perangkat lunak pasca-pemrosesanSatu alasan mengapa penglihatan binokuler dan gerakan kepala merupakan alat yang sangat ampuh bagi manusia dan hewan lain untuk menentukan kedalaman adalah karena objek pada kedalaman yang berbeda bergerak secara berbeda dalam bidang pandang kita - baik saat bergerak, atau saat kita menggerakkan kepala. Sayangnya, tidak mungkin merekam video secara bersamaan dari setiap sudut dan posisi mata yang memungkinkan, karena kami dibatasi pada sejumlah kamera yang terpisah, dan bandwidth yang terbatas. Ini berarti kita perlu pasca-proses video yang diambil untuk membuat dan mengeluarkan dua video bola 360 derajat - satu untuk ditampilkan ke setiap mata dengan perangkat tampilan 3D seperti Gear VR, atau Oculus, atau Vive.



Karena Surround memiliki 50% tumpang tindih antara kamera yang berdekatan, ia mendapat dua tampilan berbeda pada setiap objek, sehingga memungkinkan untuk membuat tampilan stereo secara matematis. Menggunakan teknologi yang disebut aliran optik untuk menganalisis gambar yang diambil dan membuat peta kedalaman objek, perangkat lunak Surround dapat menghitung disparitas stereo yang sesuai untuk setiap titik dari bidang gambar, dan menggunakannya untuk membuat bingkai video bola yang sesuai untuk dilihat oleh setiap mata.

Fitur ini - memungkinkan pengalaman 3D - mungkin merupakan pembeda terbesar antara rig penangkap kelas atas seperti Jaunt VR, GoPro Odyssey, Surround, dan lainnya jika dibandingkan dengan penawaran berorientasi konsumen atau harga menengah seperti GoPro Omni yang baru diumumkan (yaitu “ hanya ”$ 5.000).

Sinkronisasi

Aliran optik bekerja dengan menganalisis beberapa bingkai gambar yang diambil dari waktu ke waktu untuk mengembangkan model gerakan yang paling mungkin untuk objek dalam pemandangan. Karena kamera mungkin bergerak, dan objek berbeda mungkin bergerak dengan kecepatan berbeda, prosesnya menjadi rumit. Lebih buruk lagi, dalam beberapa kasus, tidak mungkin untuk menentukan dengan pasti gerakan objek apa yang menyebabkan pergeseran tertentu dari objek tersebut dalam bingkai berikutnya. Untuk memberikan kesempatan pada perangkat lunak untuk membuat model stereo ini secara akurat, penting bahwa semua kamera di rig menangkap gambar secara tepat pada saat yang sama - fitur yang disebut sebagai gen-lock. Untuk Surround 360, itu berarti 17 sensor yang semuanya harus ditembakkan sekaligus.

Non-starter lain di banyak kamera adalah penggunaan rana bergulir. Daun jendela yang berputar memaparkan setiap bingkai satu per satu, sehingga gerakan cepat dapat menyebabkan bingkai robek. Untuk video tradisional, hal ini tidak selalu terlihat, dan sering kali dapat diperbaiki dalam pemrosesan pasca. Namun, saat beberapa kamera digunakan untuk menghasilkan gambar stereo 360, artefak rana yang berputar membuat penggabungan keduanya hampir mustahil. Jadi, desain Surround bergantung pada jendela global yang lebih mahal (di mana seluruh gambar diambil sekaligus) untuk menghindari masalah ini.

Penjajaran

ArtisDemikian pula, kamera yang tidak sejajar adalah resep untuk gambar yang berantakan dan sakit kepala tambahan akibat jahitan, yang disebabkan oleh kebutuhan perangkat lunak untuk mencoba menyelaraskan bingkai setelah fakta (Anda dapat melihat masalah ini saat melihat panorama yang diambil menggunakan ponsel Anda atau kamera genggam lainnya) . Pelat logam tebal dan sambungan yang kokoh membantu Surround 360 memastikan kameranya sejajar dengan benar, dan tetap sejajar.

Facebook Surround 360 dalam angka

Rig kamera dilengkapi dengan 17 pencitra kelas industri 4.1MP dari Point Grey. Empat belas diatur dengan bidang pandang tumpang tindih 50% di sekitar lingkaran. Masing-masing memiliki lensa wide-angle 7mm f / 2.4. Mereka dilengkapi dengan tiga lensa fisheye - satu di atas dan dua di bawah. Fisheye memiliki panjang fokus 2,7mm (memberi mereka bidang pandang 185 derajat) dan aperture yang dapat disesuaikan f / 1.8-f / 16. Rig memiliki dua lensa di bagian bawah sehingga pada dasarnya mereka dapat membidik di sekitar tiang penyangga, membuatnya menghilang pada gambar akhir. Semua kamera memiliki fitur penutup global untuk menghilangkan artefak robek khas kamera rolling shutter yang lebih murah.

Pelat atas dan bawah aluminium tebal membantu memastikan kekakuan - diperlukan untuk penyejajaran yang tepat - dan berfungsi sebagai heat sink untuk memungkinkan pengoperasian yang lebih lama. Pelat struktural kemudian ditutup dengan penutup baja berlapis bubuk ukuran 18.

Perangkat lunak kamera - dikontrol oleh antarmuka web ke unit CPU yang diberdayakan Linux - digunakan untuk mengontrol frekuensi gambar, eksposur, dan setelan lainnya. Untuk memastikan semua kamera menyala pada saat yang sama, kabel Hirose GPIO digunakan, dengan kamera atas berfungsi sebagai master, dan 16 lainnya disambungkan. Perangkat lunak sistem berjalan semalaman di server untuk menghasilkan keluaran stereo 8K (dan 4K dan 6K) 360 derajat, dengan opsi untuk juga menghasilkan versi monoskopik - contoh lain mengapa pembuat GPUseperti AMD dan Nvidia sangat antusias dengan VR.

Apa yang membuatnya istimewa

Ada beberapa perangkat canggih lainnya untuk merekam video stereo 360 derajat, seperti Samsung Beyond, perangkat milik JauntVR, dan Nokia's OZO. Proyek Google Jump menggunakan GoPro Odyssey, rig khusus yang dibuat dari kamera GoPro siap pakai. Semua ini mahal, dan sejauh ini, semuanya adalah hak milik. Meskipun desain Facebook saat ini juga mahal - dengan perkiraan biaya komponen sekitar $ 30.000 - itu akan sepenuhnya menjadi open source, yang akan mendorong inovasi baik dalam fitur maupun pengurangan biaya. Misalnya, salah satu pendorong biaya untuk Surround 360 adalah kemampuan keluaran 8K-nya. Itu mendorong penggunaan sensor 4MP, dan array RAID SSD yang mahal untuk memindahkan data Raw. Versi 4K saja mungkin jauh lebih murah, tetapi masih memungkinkan pengalaman imersif yang cocok untuk banyak kondisi tampilan.

Untuk penjelasan apik tentang sistem, Facebook telah menyediakannya video pengantar ini.

Copyright © Seluruh Hak Cipta | 2007es.com