Home » Here’s how AI allows a paralyzed lady to “speak” through a digital avatar.

Here’s how AI allows a paralyzed lady to “speak” through a digital avatar.

by OnverZe
33 comments

By utilising artificial intelligence and machine learning, a team of researchers from UC San Francisco and UC Berkeley has developed an innovative communication system in collaboration with the Edinburgh-based Speech Graphics. Through the use of a brain-computer interface and a digital avatar under her control, this device allowed a lady who had been paralysed after a stroke to converse without restriction.

Similar to a digital-to-analogue converter unit in a mixing soundboard but made to fit within the skull, brain-computer interfaces (BCIs) are tools that monitor the analogue impulses produced by the brain and transform them into digital signals that computers can understand.

Here's how AI allow a crippled lady to "speak" through a digital avatar.

Dr. Edward Chang, director of neurological surgery at UCSF, oversaw this trial in which a 253-pin electrode array was implanted into the speech centre of a patient. These electrodes monitored and recorded the electrical impulses that caused the muscles in her jaw, lips, and tongue to contract. The impulses were sent to a bank of processors via a cable connection in her head rather than activating these muscles. A machine learning artificial intelligence (AI) that was part of this computational stack learned to recognise more than 1,000 words using the patient’s particular electrical signal patterns after several weeks of training.

This is merely the first part of this innovation, though. The patient may now compose her reply in writing using the AI interface, much like the Synchron system designed for those with locked-in syndrome. She can also “speak” in a manner of speaking, though, by adopting a synthesised voice that was trained on recordings of her real voice before to becoming paralysed — a technique used to replicate famous people digitally.

To create a digital avatar for the patient, the study team worked with Speech Graphics, the firm behind the remarkable face animation technology used in games like Halo Infinite and The Last of Us Part II. Based on a study of auditory input, Speech Graphics’ technology simulates the complex musculoskeletal motions a human face would make. The game engine uses this data to feed it in real-time, which produces a smooth animation of the avatar’s face emotions. The patient may express emotions and interact nonverbally since her brain signals are connected to the avatar.

Speaking about the possibilities for AI-driven faces beyond video games, Speech Graphics’ CTO and co-founder Michael Berger said, “Building a digital avatar that can talk, emote, and communicate in real-time, tied directly to the subject’s brain, is a game-changer. Even while voice restoration is stunning on its own, face communication is so fundamental to human existence that it gives the patient who has lost that sensation of embodiment and control.

The early 1970s saw the invention of BCI technology, which has since undergone a slow progression throughout the years. The industry has recently experienced exponential growth in processing and computer systems, and numerous well-funded firms are now vying for the first FDA regulatory device clearance. Notably, Brooklyn-based Synchron gained notoriety in 2017 as the first business to successfully implant a BCI in a human patient. The controlled FDA trials for Elon Musk’s Neuralink began earlier this year after many rounds of research including several animal participants.

You may also like

33 comments

Avtoshkola_ekMi February 12, 2024 - 21:04

Достигни права управления автомобилем в первоклассной автошколе!
Стань профессиональной карьере вождения с нашей автошколой!
Успей пройти обучение в лучшей автошколе города!
Учись правильного вождения с нашей автошколой!
Стремись к безупречным навыкам вождения с нашей автошколой!
Начни уверенно водить автомобиль с нами в автошколе!
Стремись к независимости и лицензии, получив права в автошколе!
Продемонстрируй мастерство вождения в нашей автошколе!
Обрети новые возможности, получив права в автошколе!
Приведи друзей и они получат скидку на обучение в автошколе!
Стань профессиональному будущему в автомобильном мире с нашей автошколой!
Учись и научись водить автомобиль вместе с нашей автошколой!
Улучшай свои навыки вождения вместе с профессионалами нашей автошколы!
Запиши обучение в автошколе и получи бесплатный индивидуальный урок от наших инструкторов!
Стремись к надежности и безопасности на дороге вместе с нашей автошколой!
Прокачай свои навыки вождения вместе с лучшими в нашей автошколе!
Завоевывай дорожные правила и навыки вождения в нашей автошколе!
Стремись к настоящим мастером вождения с нашей автошколой!
Накопи опыт вождения и получи права в нашей автошколе!
Пробей дорогу вместе с нами – закажи обучение в автошколе!
водій київ юа https://avtoshkolaznit.kiev.ua/ .

Reply
remontnaya_hrEa February 15, 2024 - 09:22

Не ошибитесь с выбором: какую ремонтную смесь выбрать для домашних работ
сухая смесь для кладки https://remontnaja-smes-dlja-kirpichnoj-kladki.ru .

Reply
tury_pvEl February 26, 2024 - 07:52

Турция на любой вкус
стоимость путевки в турцию https://tez-tour-turkey.ru/ .

Reply
ustanovka_cima February 28, 2024 - 17:19

Важные аспекты
7. Топ ошибок при установке кондиционера
мульти сплит система http://www.ustanovit-kondicioner.ru .

Reply
kondicione_dfSa March 2, 2024 - 09:14

1. Где купить кондиционер: лучшие магазины и выбор
2. Как выбрать кондиционер: советы по покупке
3. Кондиционеры в наличии: где купить прямо сейчас
4. Купить кондиционер онлайн: удобство и выгодные цены
5. Кондиционеры для дома: какой выбрать и где купить
6. Лучшие предложения на кондиционеры: акции и распродажи
7. Кондиционер купить: сравнение цен и моделей
8. Кондиционеры с установкой: где купить и как установить
9. Где купить кондиционер с доставкой: быстро и надежно
10. Кондиционеры: где купить качественный товар по выгодной цене
11. Кондиционер купить: как выбрать оптимальную мощность
12. Кондиционеры для офиса: какой выбрать и где купить
13. Кондиционер купить: самый выгодный вариант
14. Кондиционеры в рассрочку: где купить и как оформить
15. Кондиционеры: лучшие магазины и предложения
16. Кондиционеры на распродаже: где купить по выгодной цене
17. Как выбрать кондиционер: советы перед покупкой
18. Кондиционер купить: где найти лучшие цены
19. Лучшие магазины кондиционеров: где купить качественный товар
20. Кондиционер купить: выбор из лучших моделей
кондиционер с установкой http://www.kondicioner-cena.ru/ .

Reply
detskie_rnMn March 14, 2024 - 09:53

купить коляску для новорожденного https://www.detskie-koljaski-msk.ru .

Reply
prodvizhen_gsma March 18, 2024 - 08:11

Продвижение сайта в социальных сетях: секреты успеха
7
seo заказать https://seo-prodvizhenie-sayta.co.ua/ .

Reply
sklep online March 21, 2024 - 17:50

Wow, incredible weblog structure! How lengthy have you ever been running a blog for?

you make blogging look easy. The entire look of your website is
magnificent, let alone the content material! You can see similar here
najlepszy sklep

Reply
e-commerce March 21, 2024 - 18:38

Wow, marvelous weblog layout! How long have you been running a blog for?
you made blogging look easy. The full glance of
your web site is wonderful, as well as the content!
You can see similar here e-commerce

Reply
Sonny Whitmoyer March 25, 2024 - 20:23

great article

Reply
natyazhn__axpi March 28, 2024 - 07:31

1. Вибір натяжних стель – як правильно обрати?
2. Топ-5 популярних кольорів натяжних стель
3. Як зберегти чистоту натяжних стель?
4. Відгуки про натяжні стелі: плюси та мінуси
5. Як підібрати дизайн натяжних стель до інтер’єру?
6. Інноваційні технології у виробництві натяжних стель
7. Натяжні стелі з фотопечаттю – оригінальне рішення для кухні
8. Секрети вдалого монтажу натяжних стель
9. Як зекономити на встановленні натяжних стель?
10. Лампи для натяжних стель: які вибрати?
11. Відтінки синього для натяжних стель – ексклюзивний вибір
12. Якість матеріалів для натяжних стель: що обирати?
13. Крок за кроком: як самостійно встановити натяжні стелі
14. Натяжні стелі в дитячу кімнату: безпека та креативність
15. Як підтримувати тепло у приміщенні за допомогою натяжних стель
16. Вибір натяжних стель у ванну кімнату: практичні поради
17. Натяжні стелі зі структурним покриттям – тренд сучасного дизайну
18. Індивідуальність у кожному домашньому інтер’єрі: натяжні стелі з друком
19. Як обрати освітлення для натяжних стель: поради фахівця
20. Можливості дизайну натяжних стель: від класики до мінімалізму
натяжні стелі фотодрук https://natjazhnistelitvhyn.kiev.ua/ .

Reply
natyazhn__tdMi April 2, 2024 - 09:09

1. Вибір натяжних стель: як вибрати ідеальний варіант?
2. Модні тренди натяжних стель на поточний сезон
3. Які переваги мають натяжні стелі порівняно зі звичайними?
4. Як підібрати кольори для натяжної стелі у квартирі?
5. Секрети догляду за натяжними стелями: що потрібно знати?
6. Як зробити вибір між матовими та глянцевими натяжними стелями?
7. Натяжні стелі в інтер’єрі: як вони змінюють приміщення?
8. Натяжні стелі для ванної кімнати: плюси та мінуси
9. Як підняти стеля візуально за допомогою натяжної конструкції?
10. Як вибрати правильний дизайн натяжної стелі для кухні?
11. Інноваційні технології виробництва натяжних стель: що варто знати?
12. Чому натяжні стелі вибирають для офісних приміщень?
13. Натяжні стелі з фотопринтом: які переваги цієї технології?
14. Дизайнерські рішення для натяжних стель: ідеї для втілення
15. Хімічні реагенти в складі натяжних стель: безпека та якість
16. Як вибрати натяжну стелю для дитячої кімнати: поради батькам
17. Які можливості для дизайну приміщень відкривають натяжні стелі?
18. Як впливає вибір матеріалу на якість натяжної стелі?
19. Інструкція з монтажу натяжних стель власноруч: крок за кроком
20. Натяжні стелі як елемент екстер’єру будівлі: переваги та недоліки
навісні стелі https://natjazhnistelifvgtg.lviv.ua/ .

Reply
Backlink Building April 5, 2024 - 08:59

Hi there! Do you know if they make any plugins to assist with SEO?
I’m trying to get my site to rank for some targeted keywords but I’m not seeing very good gains.
If you know of any please share. Thanks! You can read similar blog here: Link Building

Reply
Odkryj jak April 9, 2024 - 03:54

Outstanding feature

Reply
gipsokarto_ugEr April 10, 2024 - 16:11

1. Как выбрать идеальный гипсокартон для ремонта
купить строительные материалы в москве гипсокартон заказать .

Reply
ryukzak_szKa April 19, 2024 - 04:17

Поширені уявлення про тактичні рюкзаки
Легендарний амуніція
тактичний рюкзак https://ryukzakivijskovibpjgl.kiev.ua/ .

Reply
vo_ntorg_efpn April 26, 2024 - 09:44

Воєнторг
15. Подсумки и кобуры для дополнительного снаряжения
купити тактичні кросівки чоловічі https://voentorgklyp.kiev.ua/vzuttya/krosivky/ .

Reply
natyazhn__rjsn April 26, 2024 - 19:52

1. Вибір натяжної стелі: як правильно підібрати?
2. ТОП-5 переваг натяжних стель для вашого інтер’єру
3. Як доглядати за натяжною стелею: корисні поради
4. Натяжні стелі: модний тренд сучасного дизайну
5. Як вибрати кольорову гаму для натяжної стелі?
6. Натяжні стелі від А до Я: основні поняття
7. Комфорт та елегантність: переваги натяжних стель
8. Якість матеріалів для натяжних стель: що обрати?
9. Ефективне освітлення з натяжними стелями: ідеї та поради
10. Натяжні стелі у ванній кімнаті: плюси та мінуси
11. Як відремонтувати натяжну стелю вдома: поетапна інструкція
12. Візуальні ефекти з допомогою натяжних стель: ідеї дизайну
13. Натяжні стелі з фотопринтом: оригінальний дизайн для вашого інтер’єру
14. Готові або індивідуальні: які натяжні стелі обрати?
15. Натяжні стелі у спальні: як створити атмосферу затишку
16. Вигода та функціональність: чому варто встановити натяжну стелю?
17. Натяжні стелі у кухні: практичність та естетика поєднуються
18. Різновиди кріплень для натяжних стель: який обрати?
19. Комплектація натяжних стель: що потрібно знати при виборі
20. Натяжні стелі зі звукоізоляцією: комфорт та тиша у вашому будинку!

вартість натяжної стелі https://natyazhnistelidfvf.kiev.ua/ .

Reply
Emilee Segonia April 27, 2024 - 09:47

Some really nice stuff on this website , I love it.

Reply
pineal xt April 27, 2024 - 18:19

I visited a lot of website but I believe this one has something extra in it in it

Reply
hire a hacker to recover an account April 30, 2024 - 18:13

Hey there just wanted to give you a quick heads up and let you know a few of the pictures aren’t loading properly. I’m not sure why but I think its a linking issue. I’ve tried it in two different internet browsers and both show the same outcome.

Reply
Lift Detox May 7, 2024 - 04:59

I’m still learning from you, as I’m making my way to the top as well. I certainly enjoy reading everything that is posted on your blog.Keep the stories coming. I loved it!

Reply
The Genius Wave May 10, 2024 - 21:48

I believe this web site has some real excellent info for everyone : D.

Reply
puravive May 11, 2024 - 08:32

Puravive is a natural weight loss supplement and is said to be quite effective in supporting healthy weight loss.

Reply
Fitspresso May 13, 2024 - 23:17

Hi, Neat post. There’s a problem together with your site in internet explorer, might check thisK IE still is the marketplace chief and a good section of other folks will pass over your excellent writing because of this problem.

Reply
야구중계 May 13, 2024 - 23:26

hi!,I love your writing so much! share we keep up
a correspondence more approximately your post on AOL?

I need a specialist on this space to solve my problem. May
be that is you! Having a look forward to look you.

Feel free to surf to my blog post 야구중계

Reply
Fitspresso review May 14, 2024 - 08:54

Hello my family member! I wish to say that this post is amazing, great written and come with almost all important infos. I’d like to peer more posts like this .

Reply
Kerassentials May 15, 2024 - 19:19

Hi there very cool blog!! Man .. Excellent .. Superb .. I will bookmark your blog and take the feeds additionallyKI’m satisfied to find so many useful info right here within the post, we’d like work out extra techniques on this regard, thanks for sharing. . . . . .

Reply
uWeed Deutschland May 16, 2024 - 05:57

It’s appropriate time to make a few plans for the long run and it is time to be happy. I have learn this publish and if I may just I wish to recommend you some attention-grabbing things or tips. Perhaps you can write subsequent articles regarding this article. I want to learn more issues approximately it!

Reply
cbd store online May 17, 2024 - 00:08

I have learn a few good stuff here. Definitely value bookmarking for revisiting. I surprise how so much attempt you set to create this sort of wonderful informative website.

Reply
tonic greens reviews May 18, 2024 - 01:53

Tonic Greens is a natural health supplement created to help improve immune health.

Reply
fitspresso reviews May 18, 2024 - 11:21

FitSpresso is a weight loss supplement designed for individuals dealing with stubborn body fat.

Reply

Leave a Comment