Netravaad

Основная цель мобильного приложения Netravaad — предоставить людям с нарушениями речи возможность общаться с помощью простых жестов. Приложение использует фронтальную камеру мобильного устройства для распознавания жестов пользователя и преобразования их в слова или предложения. Мобильное приложение оптимизирует модель глубокого обучения (DL) для распознавания жестов, разрабатывая новый набор данных для мобильного использования, что позволяет интерпретировать движения глаз в режиме реального времени с помощью алгоритма под названием «Sharani».

Приложение предлагает два языковых режима: английский и малаялам, каждый из которых имеет два варианта. В режимах English1 и Malayalam1 пользователи могут выбирать из десяти предустановленных слов, а в режимах English2 и Malayalam2 доступны режим предложений, алфавит и выбор слов для более гибкого общения.