Разработчик создал систему для общения жестами с голосовым помощником
Новости
Алгоритм распознает жесты с помощью веб-камеры, преобразует их в голосовые команды, получает от помощника ответы и выводит на экран в виде текста.
507 открытий510 показов
Разработчик из США Абхишек Сингх (Abhishek Singh) создал программу, которая выступает посредником между глухонемым человеком и голосовым помощником Alexa. Система использует веб-камеру ноутбука, чтобы распознавать жесты, переводить их в голосовые команды для помощника, а полученные ответы выводить на экран в виде текста.
Принцип работы
Программа распознает жесты в реальном времени с помощью алгоритма глубинного обучения на фреймворке TensorFlow.js. Система синтеза речи озвучивает команды, колонка слышит их и дает голосовой ответ от компьютера, который алгоритм Сингха обрабатывает, затем преобразует в текст и выводит на экран.
Пока разработчик не раскрывает технические подробности проекта.
В мае 2018 года в браузере Google Chrome появилось расширение FacePause, которое отслеживает движение лица пользователей на основе FaceDetector.
507 открытий510 показов
Яндекс Практикум изучил самые востребованные навыки для junior, middle и senior дата-инженеров. Разбираемся, где и как себя прокачивать, чтобы войти в профессию и расти в ней.
На YouTube-канале Coding With Adam вышел обзор 20 лучших плагинов для IDE VSCode.
В статье рассказали, как работать с ManageIQ на примерах: создали диалог, сервис и бандл типа PaaS.
Человека они не заменят, но составить документацию, отрефакторить код и проверить синтаксис — вполне могут.