Neuralink навчила мозковий імплант керувати Grok і телефонувати без голосу

Компанія Neuralink Ілона Маска тестує нові можливості мозково-комп'ютерного інтерфейсу: людина може керувати ШІ-агентом Grok за допомогою уявних слів, диктувати повідомлення на iPhone та телефонувати близьким без використання голосу.

Технології випробували за участю людини з порушеннями мовлення в межах клінічного дослідження VOICE. Neuralink прагне зробити спілкування доступнішим для людей, які втратили здатність говорити або мають серйозні обмеження рухливості.

Про нові функції компанії повідомляє Interesting Engineering.

Grok можна запускати силою думки

Одна з нових функцій Neuralink дозволяє активувати ШІ-агента Grok за допомогою уявної фрази «Hey Neuralink». Після цього користувач подумки формулює команду, а агент виконує завдання на комп'ютері.

Наприклад, людина може ініціювати взаємодію з ШІ без клавіатури, миші чи голосових команд. Neuralink називає це ранньою демонстрацією того, як мозково-комп'ютерні інтерфейси можуть взаємодіяти з автономними ШІ-системами.

Для роботи функції компанія використовує нейронні сигнали, пов'язані з наміром говорити. Система розпізнає спробу сформулювати слова та передає їх для подальшої обробки.

Підписуйтеся на наші соцмережі

Імплант сам визначатиме, коли людина хоче говорити

Ще одне оновлення — система Neural Voice Activity Detection. Вона автоматично визначає моменти, коли користувач намагається говорити подумки, та запускає або зупиняє декодування мовлення.

Раніше для цього потрібно було натискати фізичну кнопку. Тепер Neuralink намагається прибрати цей додатковий етап, щоб люди могли спілкуватися з меншими зусиллями.

Компанія також додала візуалізацію нейронної активності в реальному часі. Вона показує інтенсивність і розподіл сигналів, які отримує імплант. Завдяки цьому учасники дослідження можуть експериментувати з різними уявними мовленнєвими патернами та знаходити ті, які система розпізнає краще.

Neuralink тестує телефонні дзвінки без голосу

Окремий напрям розробки — інтеграція мозково-комп'ютерного інтерфейсу з телефонними дзвінками.

Система передає синтезоване мовлення безпосередньо в аудіопотік мікрофона смартфона. Людина на іншому кінці лінії чує згенерований голос, хоча користувач Neuralink фізично не вимовляє слів.

Під час випробувань один з учасників зателефонував дружині за допомогою технології. У Neuralink зазначили, що їхні стосунки почалися саме з телефонних розмов, тому демонстрація мала для пари особливе значення.

Також компанія випробувала інтеграцію з клавіатурою iOS. Вона дозволяє вводити текст у різних застосунках за допомогою нейронних сигналів, без фізичного набору на клавіатурі.

Це може бути особливо корисним для людей з аміотрофічним бічним склерозом (БАС), який поступово обмежує здатність рухатися та говорити.

Інженери тестували технології безпосередньо вдома в учасника

Нові функції розробляли не лише в лабораторії. За інформацією компанії, інженери провели 72-годинний спринт у будинку одного з учасників дослідження VOICE.

Фахівці працювали разом із ним та його дружиною, створювали прототипи, тестували їх у повсякденних ситуаціях і відразу враховували відгуки.

Серед результатів — оновлення мобільного застосунку Bloom, призначеного для роботи з мовленнєвим мозково-комп'ютерним інтерфейсом. У ньому вдосконалили редагування тексту, щоб користувачі могли швидше виправляти помилки розпізнавання. Також додали функцію спілкування з екрана блокування iPhone, без необхідності спочатку розблоковувати пристрій.

Чи готовий мозковий імплант Neuralink до масового використання

Попри нові демонстрації, технологія Neuralink залишається експериментальною. Імпланти компанії не отримали дозволу Управління з контролю за продуктами та ліками США (FDA) на широке використання.

Також компанія поки не оприлюднила кількісних результатів тестування нових функцій. Зокрема, невідомі точність декодування мовлення, швидкість реакції системи та частота помилок під час виконання команд.

Тому демонстрація керування Grok і телефонних дзвінків через мозкові сигнали ще не означає, що технологія готова для повсякденного використання всіма охочими.