Умный гаджет работает с помощью искусственного интеллекта
Необычного робота, который поможет многим слабослышащим взрослым и детям, изобрел талантливый одиннадцатиклассник из школы № 13 г. Электростали Виталий Симонов.
Робот «Дактик» в игровой форме обучает жестовому языку: умный помощник распознает жесты благодаря технологии компьютерного зрения и искусственного интеллекта, а затем проверяет их правильность. Юный изобретатель предусмотрел у робота три режима работы: в зависимости от выбранного режима пользователь может изучить на жестовом языке букву, слово или целую фразу. Робот считывает положение пальцев кисти руки и показывает правильный ответ. Необычный дизайн в виде панды привлекает малышей и ребят постарше, к тому же новый робот автономен и не требует постоянного подключения к интернету.
«Я ехал в автобусе и увидел, как слабослышащий мужчина пытался что-то объяснить другим людям. Его никто не понимал. Я заинтересовался, решил изучить подробнее эту тему и в итоге разработал проект. Всем ребятам, кто так же сильно, как и я, увлечен разработками, советую никогда не сдаваться, все время пробовать что-то новое и искать альтернативные способы решения проблем», — сказал Виталий Симонов.
Юноша занимается в центре «Диалог» под руководством преподавателя программирования и робототехники Сергея Симонова. Школьник провел исследование, разработал конструкцию робота и программное обеспечение, а также обучил нейросеть. Корпус изобретения распечатали на 3D-принтере, а нейросеть обучалась на основе фотографий. Виталий собирал по пять фотографий руки на каждую из букв жестового алфавита и демонстрировал нейросети. А чтобы система компьютерного зрения могла фиксировать положение пальцев, Виталий разработал нейронную сеть, которая считывает жест по 21 точке на кисти руки.
Робот «Дактик» уже даже успел получить положительные отзывы от педагогов и воспитанников школы-интерната для детей с ограниченными возможностями здоровья № 1 г. Электростали. Виталий и его наставник очень надеются, что в ближайшем будущем такие гаджеты будут доступны многим россиянам.
