Компьютер через пару наушников, работающих по принципу костной проводимости, переводит в текстовую форму слова, произносимые пользователем мысленно. Точность - 92%
Ученые МТИ разработали интерфейс, понимающий слова, которые пользователь произносит «в голове». Регистрирующее устройство распознает незаметную людям нервно-мышечную активность, обусловленную мысленным воспроизведением слов, и переводит сигналы в текстовую форму.
источник: osp.ru
В систему, созданную исследователями, входит пара наушников, работающих по принципу костной проводимости — они передают вибрации от костей лица во внутреннее ухо. Поскольку слуховой проход не блокируется, система может передавать звуковую информацию пользователю, не заставляя его прерывать общение с собеседником и другие действия. Таким образом, фактически создано решение, которое дает возможность беззвучно задавать компьютеру вопросы и получать ответы.
Для разработки исследователи сперва выяснили области на лице, являющиеся наиболее надежными источниками нервно-мышечных сигналов, и в итоге для их регистрации оказалось достаточно лишь четырех электродов. Соответствие между словами и сигналами для каждого пользователя устанавливается с помощью машинного обучения. Точность распознавания мысленной речи достигает 92%.
Исследователи научили систему выполнять арифметические задачи — например, пользователь может мысленно произносить цену купленных в супермаркете товаров, а в конце выяснить общую сумму. В другом эксперименте при игре в шахматы пользователь беззвучно сообщал компьютеру ходы соперника, а система подсказывала ответные.
suare 13 Мая 2018AlterEgo is a closed-loop, non-invasive, wearable system that allows humans to converse in high-bandwidth natural language with machines, artificial intelligence assistants, services, and other people without any voice—without opening their mouth, and without externally observable movements—simply by vocalizing internally. The wearable captures electrical signals, induced by subtle but deliberate movements of internal speech articulators (when a user intentionally vocalizes internally), in likeness to speaking to one's self. We use this to facilitate a bi-directional natural language computing system, where users receive aural output through bone-conduction earphones without obstructing a user's physical senses. This enables a user to transmit and receive streams of information to and from a computing device or any other person without any observable action, in discretion and without invasion of the user's privacy. AlterEgo aims to combine humans and computers—such that computing, the internet, and AI would weave into human personality as a “second self” and augment human cognition and abilities.
AlterEgo: A Personalized Wearable Silent Speech Interface
A. Kapur, S. Kapur, and P. Maes, «AlterEgo: A Personalized Wearable Silent Speech Interface.» 23rd International Conference on Intelligent User Interfaces (IUI 2018), pp 43-53, March 5, 2018.
suare 13 Мая 2018
