Композитор сочиняет музыку с помощью мозгового импланта

Мозговые импланты помогает парализованному Галену Бакволтеру не только в реабилитации. Он сочиняет музыку для панк-группы Siggy, в которой состоит уже 29 лет. Бакволтер уверен, реабилитация проходит гораздо успешнее, если сочетается с возможностью самовыражения.
Автор Наука Mail
Звук на экране
Музыкант управляет тонами музыки с помощью мыслиИсточник: Unsplash

После травмы во время ныряния Гален Бакволтер страдает параличом. С 16 лет он не чувствует своего тела ниже груди. В 2024 году Бакволтер согласился принять участие в эксперименте Калифорнийского технологического университета, во время которого ему в мозг вставили шесть чипов. О возможностях интерфейса мозг-компьютер и том, почему он лучше работает, когда доставляет человеку удовольствие, рассказывает Wired.

Чипы, изготовленные компанией Blackrock Neurotech, считывают активность нейронов Бакволтера и расшифровывают его намерения. Такие интерфейсы производятся разными компаниями для реабилитации пациентов с ограниченными возможностями, однако Бакволтер доказал, что они могут использоваться для творческого самовыражения. 

Однажды после просмотра ролика, где показывалось, как у грибов начинался процесс биосонификации, если к ним прикрепляли электроды, Бакволтер задумался: не попробовать ли ему сделать что-то подобное. Аспирант Калтеха Шон Дарси разработал алгоритм, который переводит движения мысли Бакволтера в звуки. В его основе — сопоставление частоты импульсов нейронов с высотой тона.

Бакволтер поясняет, что у каждого нейрона есть базовая частота срабатывания, главное — определить те, которыми можно контролировать с помощью мысли. Музыкант сидит перед экраном, на котором отображаются 384 канала (по 64 на каждом чипе) для записи работы нейронов. Бакволтер сочетает воображаемые движения с различными каналами. Он уже научился думать о двух движениях одновременно, чтобы воспроизводить сразу два тона.

Музыкант с женой
Парализованный музыкант уже 29 лет состоит в панк-группеИсточник: Techspot

В планах Дарси — создать что-то наподобие клавиатуры, которая будет воспроизводить звук, если будет превышен порог. Сложность заключается в том, что каждый день каналы могут обнаруживать разные нейроны. Бакволтеру приходится каждый раз искать реагирующие нервные клетки.

По словам Бакволтера, в голове у него находится целый оркестр и он намерен научиться им управлять. Музыкант считает, что творческая увлеченность улучшает реабилитацию, плоды которой должны приносить удовольствие человеку. Один из созданных Бакволтером треков используется для песни, в которой он размышляет о возможностях интерфейса мозг-компьютер.

Композитор счастлив, что у него есть возможность научиться контролировать отдельные нейроны в мозге и с помощью них создавать уникальные творческие вещи.

Ранее Наука Mail рассказывала о том, что шмели способны чувствовать ритм.