Нейроинтерфейсы
5.81K subscribers
1.42K photos
164 videos
92 files
3.57K links
нейроинтерфейсы (aka интерфейсы мозг-компьютер, BCI, BMI) • айтрекинг, глазоуправление • нейро, когно, психофизиология, HMI • BCI-related ML & DSP • https://bci.megmoscow.ru/ и МЭГ-центр • подробнее см. https://t.iss.one/bci_ru/2
Download Telegram
Для полноты отражения новостей последнего времени дублирую мой пост, выложенный в ФБ несколько дней назад:

Стартап, нейроинтерфейс которого Мерседес недавно использовал в качестве интерфейса управления его футуристическим концепт-каром, нашел своего покупателя - им оказался разработчик дополненной реальности.

"Meta, Apple, and a slew of other tech companies are building augmented reality glasses with displays that place computing on the world around you. The idea is that this type of product will one day become useful in a similar way to how smartphones transformed what computers can do. But how do you control smart glasses with a screen you can’t touch and no mouse or keyboard?

It’s a big problem the industry has yet to solve, but there’s a growing consensus that some type of brain-computer interface will be the answer. To that end, Snap said on Wednesday that it has acquired NextMind, the Paris-based neurotech startup behind a headband that lets the wearer control aspects of a computer — like aiming a gun in a video game or unlocking the lock screen of an iPad — with their thoughts. The idea is that NextMind’s technology will eventually be incorporated into future versions of Snap’s Spectacles AR glasses."

https://www.theverge.com/2022/3/23/22991667/snap-buys-nextmind-brain-computer-interface-spectacles-ar-glasses
Snap buys brain-computer interface startup for future AR glasses
NextMind made a headband for controlling virtual objects with your thoughts
The Verge - By Alex Heath@alexeheath Mar 23, 2022, 9:00am EDT

#neurotech #BCI_headsets #AR_VR
Active brain-computer interfacing for healthy users
Sergei L. Shishkin
Opinion
Accepted on 30 March 2022
Front. Neurosci. doi: 10.3389/fnins.2022.859887

Текст уже можно читать тут: https://www.frontiersin.org/articles/10.3389/fnins.2022.859887/full

Но лучше пока подождать - на данный момент там еще нет ни форматирования, ни списка литературы)

Статья входит в топик (тематический выпуск) секции Neural Technologies журнала Frontiers in Neuroscience Frontiers in Neural Technology: how far have we gone?

#neurotech #BCI_papers #our_BCIs #shishkin
👍2
Эндоваскулярная технология регистрации мозгового электричества от стартапа Синхрон (Synchron) обеспечивает качество управления, сопоставимое с использованием электрокортикограммы (ЭКоГ), однако не требует вскрытия черепа: специальные электроды ("стентроды") вводятся в яремную вену и подводятся к мозгу через сосуды. Процедура установки электродов несравненно менее травматична, чем другие инвазивные техники (она отчасти похожа на установку кардиостимулятора), и интерфейсы мозг-компьютер (ИМК) с эндоваскулярным подключением могут стать ведущей технологией ИМК для парализованных людей, если будет доказана безопасность их длительного использования.

Поэтому очень интересно следить за идущими сейчас испытаниями этой технологии.

Текущие результаты будут представлены на проходящем сейчас ежегодном собрании Американской академии неврологии. Академия уже выпустила специально посвященный им пресс-релиз STUDY: BRAIN IMPLANT SAFE, MAY HELP THOSE WITH PARALYSIS USE COMPUTER FOR DAILY TASKS

Как следует из него, у четырех человек, наблюдаемых уже в течение года после установки электродов, до настоящего момента не выявлено ни одного серьезного побочного эффекта, ведущего к инвалидизации.

"For the study, four people with ALS underwent a procedure to have the device implanted within the brain. The brain-computer interface is fed through one of two jugular veins in the neck into a large blood vessel in the brain. The device, comprised of a net-like material with 16 sensors attached, expands to line the vessel wall. That device is connected to an electronic device in the chest that then relays the brain signals from the motor cortex, the part of the brain that generates signals for movement, into commands for a laptop computer.

Researchers monitored participants for one year and found the device was safe. There were no serious adverse events that led to disability or death. The device also stayed in place for all four people and the blood vessel in which the device was implanted remained open.

Researchers also examined whether participants could use the brain-computer interface to perform routine digital tasks. All participants learned how to use the device with eye tracking to use a computer. Eye-tracking technology helps a computer determine what a person is looking at.

Researchers also report that a decoder developed during the study allowed one study participant to control a computer independently without an eye tracker. The machine-learning decoder was programmed as follows: when a trainer asked participants to attempt certain movements, like tapping their foot or extending their knee, the decoder analyzed nerve cell signals from those movement attempts. The decoder was able to translate movement signals into computer navigation."


Надо, правда, отметить, что, судя по последнему абзацу, лишь одному из четырех пациентов удавалось использовать ИМК без айтрекера. Ведущий способ управления был все же гибридным - сочетание указания позиции взглядом и "клик" "силой мысли", то есть с помощью ИМК. При этом основной объем информации идет по айтрекинговому каналу передачи информации, а ИМК по сути выполняет вспомогательную роль (но важную - см. о "проблеме прикосновения Мидаса", например, в нашей статье).

В начинающемся сейчас новом проекте, поддержанном РНФ, наша группа, совместно с Алексеем Осадчим и коллегами из его центра, продолжит наши попытки обеспечить приблизительно такое же (возможно, даже более интуитивное и комфортное) управление полностью неинвазивным путем - сочетая айтрекер с ЭЭГ и/или МЭГ, теперь также с использованием компактных магнитометров с оптической накачкой.

#new_BCIs #neurotech #Synchron
👍1
К предыдущему посту:

- видео от Синхрона про их интерфейс мозг-компьютер с эндоваскулярной регистрацией (опубликовано позапрошлой осенью):

https://youtu.be/mm95r05hui0

- основная публикация по технологии:

Oxley TJ, Yoo PE, Rind GS, Ronayne SM, Lee CS, Bird C, Hampshire V, Sharma RP, Morokoff A, Williams DL, MacIsaac C. Motor neuroprosthesis implanted with neurointerventional surgery improves capacity for activities of daily living tasks in severe paralysis: first in-human experience. Journal of Neurointerventional Surgery. 2021 Feb 1;13(2):102-8. https://dx.doi.org/10.1136/neurintsurg-2020-016862

#new_BCIs #neurotech #Synchron #BCI_papers
Еще одно новостное сообщение про презентацию результатов испытаний эндоваскулярного интерфейса мозг-компьютер компании Synchron на 2022 American Academy of Neurology (AAN) Annual Meeting - принципиально нового тут нет, но зато в одном месте собраны ссылки на основные источники и на прежние новости. В частности, они напоминают, что

"Synchron is planning to launch the first U.S.-based clinical trial of Stentrode. The study, dubbed COMMAND, is expected to enroll six patients at the University of Pittsburgh Medical Center and Mount Sinai Health System."

https://alsnewstoday.com/news-posts/2022/04/04/aan-2022-stentrode-brain-device-safe-allows-hand-free-computer-control-trial-data/

#new_BCIs #neurotech #Synchron
Еще можно бесплатно* зарегистрироваться на крупнейшую международную онлайн-школу по интерфейсам мозг-компьютер (на данный момент уже 3323 участника)!

https://www.gtec.at/spring-school-2022/

*превьюшка показывает некие 250 евро, но, как только что сообщили организаторы одному из лекторов школы (Алексей Осадчий, ВШЭ & AIRI), это баг, они работают над его ликвидацией, на самом деле действительно бесплатно))

#courses #neurotech
🔥1
BCI Society проводит серию бесплатных вебинаров Next Generations:

Next Generations series is intended for students to provide technical background on some cutting-edge topics in BCI research

Ближайший из них, Industry Academia Talks 3, пройдет 21 апреля (четверг), 16:00-17:00 МСК (9am-10am EST).

На нем выступят Silvestro Micera (EPFL) и Dan Wetmore (Meta).

Для участия необходимо заранее зарегистрироваться по ссылке https://bcisociety.org/event/next-gen-industry-academia-talks-3-free-event/

Записи предыдущих вебинаров: https://bcisociety.org/past-bci-thursdays-recordings/

#courses #webinars #neurotech
Интервью с директором Synchron по нейронаукам Питером Ю (Peter Yoo) об их эндоваскулярных электродах и перспективах их применения.

"... it can be used to acutely diagnose some conditions like epilepsy. … Also, we can send information back into the brain — that’s stimulation, we’ve published some previous work on that — which means we can provide therapy through stimulation of the brain as this field has been doing for a long time with deep brain stimulation. That can treat a variety of conditions potentially."

Synchron’s neuroscience director explains the brain implant technology and potential applications.
Jim Hammerand
Medical Design & Outsourcing, April 12, 2022
https://www.medicaldesignandoutsourcing.com/synchron-stentrode-neuroscience-director-peter-yoo-brain-implant-bci-technology-applications/

#new_BCIs #neurotech #Synchron
Еще одна популярная статья про эндоваскулярный ИМК от компании Synchron: This New Implant Hacks the Brain by Going Through Your Chest https://www.thedailybeast.com/this-new-brain-computer-interface-from-synchron-goes-through-your-chest

#new_BCIs #neurotech #Synchron
Shishkin-NeuroWeek-2022-04-22-Active-BCIs-for-healthy-wLinks.pdf
1.9 MB
Презентация к моей сегодняшней лекции на Неделе нейротехнологий и когнитивных наук "Нейроинтерфейсы для здоровых людей: мифы и реальные перспективы". Без видео, но зато с веб-ссылками почти на все источники.

#neuro_edu #pop_sci #neurotech #noninvasive_BCIs #shishkin #presentations
👍8🔥1
6 апреля в интервью главе TED Крису Андерсону Илон Маск подтвердил, что

the idea behind Neuralink ... is to try to more tightly couple collective human world to digital superintelligence.

Маск подчеркнул, что он серьезно относится к медицинским задачам:

the emails that we get at Neuralink are heartbreaking. I mean, they'll send us just tragic, you know, where someone was sort of, in the prime of life and they had an accident on a motorcycle and someone who's 25, you know, can't even feed themselves. And this is something we could fix.

Но, очевидно, он рассмативает их решение как побочный продукт движения к основной цели:

also along the way solve a lot of brain injuries and spinal injuries and that kind of thing. So even if it doesn't succeed in the greater goal, I think it will succeed in the goal of alleviating brain and spine damage.

От ответа на вопрос "Have you seen evidence that the technology is actually working" он по сути ушел - точнее, ответил лишь частично, утверждая, что дело лишь в том, что нужно сделать безопасный и удобный коммерческий продукт - мол, фундаментальные задачи давно решены:

the fundamental principles of reading neurons, sort of doing read-write on neurons with tiny electrodes, have been demonstrated for decades.

Но вопрос же не только в возможности "считывания" нейронов и их стимуляции, а в том, как из этого получить реальное расширение канала между мозгом и машиной.

Ведь пока что более-менее эффективная относительно широкополосная работа входов и выходов мозга известна лишь в одном случае: когда используются естественные высокоспециализированные входы и выходы - сенсорные и моторные системы!

Впрочем, он не спорит, что быстрого прогресса в эту сторону ожидать не стоит:

Well, I do want to emphasize we're at an early stage. And so it really will be many years before we have anything approximating a high-bandwidth neural interface that allows for AI-human symbiosis. For many years, we will just be solving brain injuries and spinal injuries. For probably a decade. This is not something that will suddenly one day it will have this incredible sort of whole brain interface. It's going to be, like I said, at least a decade of really just solving brain injuries and spinal injuries. And really, I think you can solve a very wide range of brain injuries, including severe depression, morbid obesity, sleep, potentially schizophrenia, like, a lot of things that cause great stress to people. Restoring memory in older people.

Расшифровку интервью можно прочитать по этой ссылке: https://www.ted.com/talks/elon_musk_a_future_worth_getting_excited_about/transcript?language=en - где, между прочим, применена весьма инновационная технология: можно выделить любой фрагмент расшифровки и сразу послушать, как он звучит в оригинале.

#neurotech #Elon_Musk #Neuralink
👍4
Моя статья Active Brain-Computer Interfacing for Healthy Users, опубликованная сегодня во Frontiers in Neuroscience, на первый взгляд очень незамысловатая, и она действительно вполне доступна и для непрофессионалов. Но написана она все же для специалистов. Это попытка аккуратного анализа мотиваций, лежащих за, казалось бы, безнадежными попытками сделать "активные" нейроинтерфейсы, которые были бы интересны здоровым людям. (Активные - то есть реализующие намерения пользователя. Пользователь сознательно использует их для управления или коммуникации - в отличие от пассивных, реагирующих на изменения состояния мозга пользователя вне зависимости от его намерений.) Спор с общепринятыми в среде экспертов представлениями (в частности, сформулированными в Future BNCI 2020 Roadmap). И поиск (но это уже совсем кратко) реальных возможностей действительно сделать это в ближайшие годы. В каком-то смысле результат 15 лет работы и размышлений на эти темы.

Постараюсь как-нибудь еще написать об этом более подробно.

Shishkin SL (2022) Active Brain-Computer Interfacing for Healthy Users. Front. Neurosci. 16:859887. https://doi.org/10.3389/fnins.2022.859887

#neurotech #noninvasive_BCIs #BCI_papers
👍5🔥2
Сегодня финальный день "Нейробота" - "Всероссийского открытого фестиваля технологий Нейронет для школьников" https://bitronicslab.com/neurobot

Как пишет Тимур Бергалиев, очно и заочно участвуют более 100 команд школьников из России и Казахстана.

#neurotech #neuro_edu
Большое интервью с Брайаном Джонсоном и демонстрация неинвазивных интерфейсов его фирмы Kernel, работающих на основе многоканального функционального инфракрасного имиджинга (fNIRS):

https://youtu.be/l9XEz4AqKRk

(Кстати, еще несколько лет назад недавно Кернел пытался разрабатывать инвазивные нейроинтерфейсы, и в этой области считался одним из основных конкурентов Нейралинка. А параллельно системе на основе fNIRS они разрабатывали систему на основе компактных магнитометров, но, к сожалению, похоже, в основном забросили и это направление - у которого пока что меньше возможностей коммерциализации.)

UPD: важное отличие от Нейралинка (кажется, не упоминаемое в этом видео) - поскольку fNIRS измеряет гемодинамику, а она на много секунд запаздывает относительно той активности нейронов, которая ее вызывает, Кернел не претендует на управление в реальном времени, на которое нацелены технологии Нейралинка. Кернеловские системы обеспечивают нейроимиджинг (нейровизуализацию) - оценку функциональной активации мозга. Они, как и прочий fNIRS, дают примерно то же, что фМРТ, но значительно менее детально и менее точно. Преимущество перед фМРТ - испытуемому не надо неподвижно лежать в томографе, достаточно одеть шлем.

#neurotech #fNIRS #Bryan_Jonson #Kernel #Elon_Musk #Neuralink
1
В США начинаются клинические испытания эндоваскулярного интерфейса мозг-компьютер (с малоинвазивным подведением электродов к мозгу по венам) компании Synchron, созданной Томасом Оксли. (Еще раньше такие испытания начались в Австралии, откуда происходит эта компания, о них см в наших предыдущих сообщениях -- #Synchron ). Таким образом, Синхрон в очередной раз опередил Нейралинк Илона Маска, который планирует начать клинические испытания в конце этого года*.

Sarah McBride. The First Commercial Brain Computer Interface Is Entering Human Trials. 4.5.2022 https://www.bloomberg.com/news/articles/2022-05-04/neuralink-rival-synchron-selects-patient-for-brain-computer-trial

* UPD: согласно ответу Илона Маска, который он дал 24 апреля этого года на вопрос в твиттере, к концу года планируется лишь подать заявку в FDA - подробнее см. ниже.

#new_BCIs #neurotech #Synchron
👍3
Оказывется, мы пропустили новость -- Маск в широко цитировавшемся недавнем твиттерном разговоре о применимости его нейроинтерфейсов для борьбы с ожирением в ответ на вопрос о том, планируется ли подача заявки в FDA на первое испытание интерфейса на людях до конца года, ответил "да". То есть еще не факт, что они смогут начать такие испытания даже в следующем году. (Как сообщалось на днях, Synchron клинические испытания своего куда более революционного малоинвазивного интерфейса в США уже начинает. Более того, в Австралии они идут больше года, и как будто бы весьма успешно -- см. наш пост с информацией по состоянию на начало апреля.)

#neurotech #Neuralink #Elon_Musk
👍2