AI Tools membantu memulihkan pidato untuk seorang wanita dengan kelumpuhan: ‘Dia merasa diwujudkan’
Teknologi yang memungkinkan Anda untuk menuliskan pertemuan kerja Anda dapat membantu orang dengan kelumpuhan berbicara lagi.
Para peneliti di UC Berkeley dan UC San Francisco menggunakan AI generatif untuk mengurangi keterlambatan antara ketika seseorang dengan kelumpuhan berat berupaya berbicara dan ketika perangkat komputer memainkan suara. Pekerjaan mereka membantu seorang wanita bernama Ann, yang menderita stroke batang otak pada tahun 2005 pada usia 30, untuk berkomunikasi dalam waktu nyata. Ann berbicara dengan suara yang terdengar seperti miliknya karena model itu dilatih pada rekamannya dari sebelum stroke.
Penyebaran Gen AI dalam beberapa cara berbeda memungkinkan para peneliti untuk melakukan perbaikan dalam neuroprosthesis yang mungkin memakan waktu lebih lama, kata Cheol Jun Cho, UC Berkeley Ph.D. Siswa dalam Teknik Listrik dan Ilmu Komputer dan Penulis Penelitian, yang muncul pada bulan Maret Neuroscience Alam.
Ini adalah salah satu contoh bagaimana alat AI generatif – menggunakan teknologi mendasar yang sama dengan kekuatan chatbots Seperti Openai’s Chatgpt dan Claude Anthropic atau transkripsi di Google Meet – membantu para peneliti medis dan ilmiah memecahkan masalah yang mungkin membutuhkan waktu lebih lama untuk dipecahkan, kata Cho kepada saya. Pakar dan pendukung AI telah menunjukkan penggunaan teknologi dalam kedokteran sebagai Area dengan terbalik besarapakah di merancang obat baru atau menyediakan Pengujian dan diagnosis yang lebih baik.
“AI sedang mempercepat kemajuan,” kata Cho. “Kadang -kadang kami membayangkan timeline akan menjadi satu atau dua dekade. Sekarang langkah itu seperti tiga tahun.”
Teknologi yang telah membantu Ann adalah bukti konsep, kata Cho, tetapi menunjukkan jalan menuju alat yang bisa lebih banyak plug and play di masa depan.
Mempercepat pidato
Masalah dengan neuroprostheses yang ada adalah latensi. Ada jeda waktu antara ketika orang itu mulai berusaha berbicara dan ketika sebuah kalimat benar -benar dihasilkan dan didengar. Cho mengatakan teknologi sebelumnya berarti Ann harus menunggu sampai satu kalimat selesai sebelum memulai yang berikutnya.
Ann, terlihat selama studi penelitian pertama pada tahun 2023, dapat berkomunikasi melalui komputer yang membaca sinyal yang coba dikirim oleh otaknya ke otot -otot yang mengendalikan pidato.
“Terobosan besar di sini adalah bahwa dia tidak perlu menunggu sampai dia menyelesaikan kalimat,” katanya. “Sekarang kita benar -benar dapat mengalirkan prosedur decoding kapan pun dia berniat berbicara.”
Prostesis mencakup serangkaian elektroda yang ditanamkan di permukaan otaknya dan terhubung melalui kabel ke bank komputer. Ini memecahkan kode kontrol yang dikirim oleh otak Ann ke otot -otot yang mengontrol pidato. Setelah Ann memilih kata -kata yang ingin dia ucapkan, sebuah AI membaca sinyal -sinyal dari korteks motor dan memberi mereka kehidupan.
Untuk melatih model, tim berusaha keras untuk berbicara kalimat yang ditampilkan pada prompt di layar. Mereka kemudian menggunakan data pada aktivitas itu untuk memetakan sinyal di korteks motor, menggunakan Gen AI untuk mengisi celah.
Cho mengatakan tim berharap terobosan mengarah ke perangkat yang dapat diskalakan dan lebih mudah diakses.
“Kami masih dalam upaya berkelanjutan untuk membuatnya lebih akurat dan latensi yang lebih rendah,” katanya. “Kami mencoba membangun sesuatu yang bisa lebih banyak plug and play.”
Menggunakan AI untuk beralih dari pemikiran ke ucapan
Cho mengatakan tim menggunakan Gen AI dalam beberapa cara berbeda. Salah satunya adalah meniru suara pra-cedera Ann. Mereka menggunakan rekaman dari sebelum cedera untuk melatih model yang bisa menghasilkan suara suaranya.
“Dia sangat bersemangat ketika dia pertama kali mendengar suaranya sendiri,” kata Cho.
https://www.youtube.com/watch?v=mgsokggbbxk
Perubahan besar dalam transkripsi real-time. Cho membandingkannya dengan alat yang menyalin presentasi atau pertemuan saat terjadi.
Pekerjaan yang dibangun di atas a Studi 2023 yang menggunakan alat AI untuk membantu Ann berkomunikasi. Pekerjaan itu masih memiliki penundaan yang signifikan antara ketika Ann berusaha untuk berbicara dan ketika kata -kata itu diproduksi. Penelitian ini memotong keterlambatan itu secara signifikan, dan Ann mengatakan kepada tim bahwa itu terasa lebih alami.
“Dia melaporkan dia merasa diwujudkan, bahwa itu adalah pidatonya sendiri,” kata Cho.
