29 маусымда Meta зерттеу бөлімшесі хирургиялық араласусыз ми белсенділігінің жазбасы негізінде терілетін мәтінді қалпына келтіруге қабілетті Brain2Qwerty v2 жүйесін ұсынды. Бұл нейроинтерфейстер саласындағы елеулі серпіліс: сөз деңгейіндегі орташа тану дәлдігі 61%-ға жетті, ал бұрынғы инвазивті емес әдістер шамамен 8% нәтиже көрсеткен болатын.
Модель шамамен 22 000 сөйлемге оқытылды. Экспериментке тоғыз сау ерікті қатысты, олардың әрқайсысы магнитоэнцефалография (МЭГ) сканерінде 10 сағат өткізіп, бір уақытта естіген сөз тіркестерін пернетақтада терді. Нейрондық оқиғаларды қолмен бөлудің орнына, Brain2Qwerty v2 деректерді мидың шикі сигналдарынан тікелей декодтау үшін шетінен терең оқытуды пайдаланады.
Жүйе ми белсенділігінің үздіксіз жазбасымен жұмыс істейді және сөйлемді толығымен қалпына келтіреді. Нәтижені нақтылау үшін мағыналық контексті ескеретін қосымша оқытылған тілдік модель қолданылады. Үздік қатысушы сөз деңгейінде 78% дәлдік көрсетті, оның сөйлемдерінің жартысынан көбі бір қатемен немесе мүлде қатесіз декодталды.
Шектеулер мен перспективалар
Қазіргі кезеңде әзірлеме клиникалық немесе тұрмыстық қолдануға дайын емес. Brain2Qwerty v2 мәтінді нақты терген сау еріктілерде сыналды. Сөйлеу немесе қозғалу қабілетінен айырылған адамдар үшін бұл тәсіл жеке валидацияны қажет етеді. Сонымен қатар, жүйе әлі нақты уақыттағы толыққанды мәтінді енгізу ретінде жұмыс істемейді: модель сөйлемді толығымен өңдейді, сондықтан пайдаланушы әр сөзді тергеннен кейін бірден көрмейді.
Жоба $5 млн бюджетімен ашық нейроғылыми деректер жиынтығын құру бастамасы — Digital Brain Project бөлігі болып табылады. Бұған дейін, 2022 жылдың қыркүйегінде Meta ЖИ көмегімен ойларды сөйлеуге түрлендіретін «ми декодері» туралы зерттеуді жариялаған болатын.
Менің сараптамалық пікірім: Brain2Qwerty v2 серпілісі — бұл дәлдікті 8%-дан 61%-ға дейін жақсарту ғана емес. Бұл терең оқытумен үйлескен МЭГ сияқты инвазивті емес әдістердің инвазивті импланттармен бәсекелесе алатындығының дәлелі. Алайда коммерциялық өнімге дейінгі жол ұзақ: сөйлеу бұзылыстары бар пациенттерге масштабтау, өңдеу уақытын қысқарту және күнделікті қолдану кезінде тұрақтылықты қамтамасыз ету — негізгі сын-қатерлер. Осыған қарамастан, бұл қадам бізді бірде-бір хирургиялық араласусыз ой командаға айналатын дәуірге жақындатады.