Para peneliti di Universitas Aalto sedang mencari cara yang lebih baik untuk mengajarkan koreografi tari dalam realitas virtual. Teknik WAVE baru yang mereka kembangkan akan dipresentasikan pada bulan Mei di konferensi CHI, sebuah tempat utama untuk penelitian interaksi manusia-komputer.
Teknik sebelumnya sebagian besar mengandalkan pra-latihan dan penyederhanaan.
'Dalam realitas virtual, sulit untuk memvisualisasikan dan mengkomunikasikan bagaimana seorang penari harus bergerak. Tubuh manusia sangat multidimensi, dan sulit untuk mengambil banyak data secara real time,' kata Profesor Perttu Hämäläinen.
Para peneliti memulai dengan bereksperimen dengan teknik visualisasi yang familiar dari permainan tari sebelumnya. Namun setelah beberapa prototipe dan tahapan, mereka memutuskan untuk mencoba gelombang penonton, yang familiar dari acara olahraga, untuk memandu tarian.
'Gerakan penari model yang seperti gelombang memungkinkan Anda melihat terlebih dahulu gerakan seperti apa yang akan dilakukan selanjutnya. Dan Anda tidak perlu melatih gerakannya terlebih dahulu,' kata peneliti PhD Markus Laattala.
Secara umum, seseorang tidak dapat mengikuti koreografi baru secara real time karena keterlambatan kontrol motorik persepsi manusia. Sebaliknya, teknik WAVE yang dikembangkan para peneliti didasarkan pada antisipasi pergerakan di masa depan, seperti belokan.
'Belum ada seorang pun yang menemukan cara untuk memandu gerakan yang berkesinambungan dan mengalir seperti tari kontemporer. Dalam koreografi yang kami terapkan, membuat gelombang adalah komunikasi, semacam kanon mikro di mana penari model mengikuti koreografi yang sama dengan jeda sepersekian detik,' kata Hämäläinen.
Dari tai chi hingga gerakan berlebihan
Sebanyak 36 orang mengikuti tes tari berdurasi satu menit ini, membandingkan visualisasi WAVE baru dengan versi virtual tradisional yang hanya diikuti oleh satu model penari. Perbedaan antara teknik-teknik tersebut terlihat jelas.
'Penerapan ini setidaknya cocok untuk gaya tari bertempo lambat. Penari bisa langsung terjun dan mulai menari tanpa harus belajar apa pun sebelumnya. Namun, dalam gerakan yang lebih cepat, visualnya bisa membingungkan, dan penelitian serta pengembangan lebih lanjut diperlukan untuk mengadaptasi dan menguji pendekatan tersebut dengan lebih banyak gaya tarian,' kata Hämäläinen.
Selain permainan dansa virtual, teknik baru ini mungkin dapat diterapkan pada video musik, karaoke, dan tai chi.
'Akan optimal bagi pengguna jika mereka dapat memutuskan bagaimana memposisikan model penari sesuai keinginan mereka. Dan jika idenya dikembangkan lebih jauh, beberapa penari bisa saling mengirimkan gerakan dalam realitas virtual sosial. Ini bisa menjadi cara baru untuk menari bersama,' kata Laattala.
'Perangkat VR arus utama saat ini hanya melacak pergerakan headset dan pengontrol genggam. Di sisi lain, data pembelajaran mesin terkadang dapat digunakan untuk menyimpulkan bagaimana kaki bergerak,' kata Hämäläinen.
“Tetapi dalam tari, inferensi lebih sulit karena gerakannya lebih aneh dibandingkan, misalnya berjalan,” tambah Laattala.
Sebaliknya, jika Anda memiliki cermin di ruang dansa sebenarnya, Anda dapat mengikuti gerakan kaki Anda menggunakan visi mesin. Pandangan penari bisa dimodifikasi menggunakan cermin virtual.
'Penampilan virtual seorang penari dapat ditingkatkan dengan cara yang berlebihan, misalnya dengan meningkatkan kelenturan, ketinggian lompatan, atau gerakan pinggul. Hal ini dapat membuat mereka merasa bahwa mereka lebih terampil daripada yang sebenarnya, yang menurut penelitian mempunyai dampak positif pada motivasi aktivitas fisik,' kata Hämäläinen.
Permainan dansa virtual ini dikembangkan menggunakan perangkat penangkapan gerak infrastruktur Magics, di mana penari model mengenakan kostum dengan sensor. Ini telah digunakan untuk merekam animasi tarian. Video kontrol tari realitas virtual: https://youtu.be/xC4vm1unpC0?si=8czmPutrjnizGRTk
Game dance WAVE dapat diunduh untuk perangkat Meta Quest 2 dan 3 VR di sini: https://github.com/CarouselDancing/WAVE. Repositori Github juga menyertakan kode sumber terbuka yang dapat digunakan siapa saja untuk mengembangkan game lebih lanjut.