00:00Sekumpulan jurutera di Universiti Columbia berjaya membangunkan wajah robotik yang mampu mempelajari pergerakan bibir seiring dengan pertuturan dan nyanyian menggunakan kecerdasan buatan AI.
00:12Profesor Jabatan Kejuruteraan Mechanical Universiti Columbia, Hort Lipson berkata, kajian itu bertujuan menjadikan robot humanoid kelihatan lebih semula jadi dan kurang janggal apabila berinteraksi secara bersemuka dengan manusia.
00:30tersebut, humanoid face, if you like, but what's unique about it is that it has a lot of motors, muscles underneath its facial skin, and it's learning to move its facial gestures, to make gestures that correspond to sort of natural motion, and in particular, we're looking at lip sync, the ability to move lips.
00:56That's probably the hardest thing for a robot to do. In the past, we've worked on having the robot smile, we've worked on gaze, now we're working on lips.
01:06Kajian yang diterbitkan dalam Jurnal Sains Robotics itu menggunakan pendekatan pembelajaran dua peringkat iaitu melalui pemerhatian kendiri dan penyiruan pergerakan manusia berbanding kaedah pengatur caraan berasaskan peraturan tetap.
01:31Pada peringkat awal, wajah robot digerakkan oleh 26 motor menghasilkan ribuan ekspresi rawak di hadapan cermin bagi mempelajari hubungan antara arahan motor dan bentuk mulut yang terhasil.
01:44Sistem berkenaan memperhati rakaman manusia bercakap dan menyanyi dalam talian untuk memahami hubungan antara pergerakan mulut dan bunyi yang dihasilkan.
01:54Gabungan kedua-dua model membolehkan robot menerjemah input audio kepada pergerakan motor yang terselaras sekaligus melakukan gerak bibir atau lip sync merentas pelbagai bahasa dan konteks meskipun tanpa memahami maksud audio tersebut.
02:09Subjective experiences and self-awareness, which are unique to...
Comments