“Kita tidak selalu menggunakan kata-kata untuk mengomunikasikan apa yang kita inginkan. Kita memiliki kata seru. Kita memiliki vokalisasi ekspresif lain yang tidak ada dalam kosakata,” jelas Wairagkar, sebagaimana dilansir Nature. “Untuk melakukan itu, kami telah mengadopsi pendekatan ini, yang sama sekali tidak dibatasi.”
Tim tersebut juga mempersonalisasi suara sintetis agar terdengar seperti suara pria itu sendiri, dengan melatih algoritme AI pada rekaman wawancara yang telah dilakukannya sebelum timbulnya penyakitnya.
Tim tersebut meminta peserta untuk mencoba membuat kata seru seperti ‘aah’, ‘ooh’ dan ‘hmm’ dan mengucapkan kata-kata yang dibuat-buat. BCI berhasil menghasilkan suara-suara ini, menunjukkan bahwa ia dapat menghasilkan ucapan tanpa memerlukan kosakata yang tetap.
Dengan menggunakan perangkat tersebut, peserta mengeja kata-kata, menjawab pertanyaan terbuka dan mengatakan apa pun yang diinginkannya, menggunakan beberapa kata yang bukan bagian dari data pelatihan dekoder. Ia memberi tahu para peneliti bahwa mendengarkan suara sintetis menghasilkan ucapannya membuatnya “merasa senang” dan bahwa itu terasa seperti “suaranya yang sebenarnya”.
Dalam percobaan lain, BCI mengidentifikasi apakah peserta mencoba mengucapkan kalimat sebagai pertanyaan atau pernyataan. Sistem juga dapat menentukan kapan ia menekankan kata-kata yang berbeda dalam kalimat yang sama dan menyesuaikan nada suara sintetisnya.
"Kami memasukkan semua elemen berbeda dari ucapan manusia yang sangat penting," kata Wairagkar. BCI sebelumnya hanya dapat menghasilkan ucapan datar dan monoton.