Фото: consumer.huawei.com
StorySign был разработан при сотрудничестве Huawei, некоммерческого Европейского союза глухих, корпорации Penguin и анимационной компании Aardman. Приложение оптимизировано для смартфонов с операционной системой на базе AI, например для Huawei Mate 20 Pro, а также работает на большинстве других смартфонов с версиями Android 6.0 и выше. Приложение доступно для загрузки на Google Play и в AppGallery от Huawei в десяти странах Европы с 3 декабря 2018 года.
Язык жестов в разных странах отличается, поэтому после загрузки приложение попросит пользователя выбрать предпочтительный вариант языка. По умолчанию StorySign поддерживает жестовый язык в английской, французской, немецкой, итальянской, испанской, голландской, португальской, ирландской, бельгийско- фламандской и швейцарско-немецкой версии.
Пока что в главном разделе приложения размещена только одна одна книга: “Where’s Spot?” (“Где Спот?”) автора Эрика Хилла, написанная в 1980 году. Для использования приложения достаточно разместить телефон над страницей, чтобы аватар по имени Star начал переводить печатный текст на язык жестов. Перевод происходит в реальном времени – при переворачивании страницы Star автоматически транслирует печатный текст на языке глухонемых. Расшифровка возможна даже в том случае, когда телефон расположен под неудобным углом относительно книги – такую точность обеспечивает система OCR.
Недостаток у разработки только один: если у пользователя нет бумажной копии книги, приложение не будет работать.
По словам разработчиков, основной идеей приложения является возможность использования искусственного интеллекта для устранения границ между миром слышащих и глухих людей. В компании уверены, что в будущем приложения, подобные StorySign окажут существенное влияние на качество жизни глухих людей во всем мире.
Не только Huawei работает над созданием инклюзивных приложений. В начале 2018 года студенты Нью-Йоркского университета представили прототип приложения, объединяющего дополненную реальность (AR) и машинный интеллект для перевода жестового английского языка в письменную версию. А в 2017 году исследователи Калифорнийского университета в Сан-Диего создали перчатку, которая трансформирует язык глухонемых в текст.
Читайте также:
Mytaptrack – “умное” приложение для отслеживания состояния здоровья и обучения детей с аутизмом
Роботы никогда не заменят учителей, но повысять уровень образования детей
Новое исследование английских ученых предполагает, что в перспективе роботы будут играть важную роль в развитии современной молодежи, но при этом никогда не смогут полностью вытеснить профессиональных преподавателей
С помощью AI ученые Колумбийского университета создали систему, которая переводит мысли в речь
Работа системы координируется особенным алгоритмом, а весь принцип распознавания принципиально отличается от тех, что использовались ранее. Создатели метода планируют сконструировать носимый имплант, который позволит людям, потерявшим возможность разговаривать из-за болезни или травмы, снова начать общаться
Holographic colour prints (HCP) – новый способ защиты документов от подделок
С помощью метода голографической цветной печати можно предотвратить подделку таких важных документов, как удостоверения личности, паспорта и денежных банкнот. Технология относится к самому современному оптическому способу защиты документов, она будет полезна для борьбы с контрафактом…
Cyberlink презентовали приложение для распознавания лиц FaceMe – его точность составляет 98%
Механизмом распознавания лиц управляет глубокая нейронная сеть – она же гарантирует пользователю защиту от биометрического хакинга. Приложение интегрируется сразу в несколько популярных платформ, таких как Windows, Linux, Android и iOS и может успешно применяться как…
Компания Vuzix выпустила обновленную версию “умных” очков Blade
Использовать устройство можно по-разному: как в привычной пользователю роли развлекательного гаджета, так и для работы. Пока что Blade применяют в складском хозяйстве для сканирования QR-кодов товаров. Очки функционируют на платформе дополненной реальности LogistiVIEW Connected Worker
TrailGuard AI: “умная” камера помогает отслеживать браконьеров в Танзании
Устройство управляется системой искусственного интеллекта. Во время мониторинга территории нейронная сеть распознает как незнакомые объекты, так и лица. Рейнджеры уже протестировали камеру, и теперь могут остановить браконьеров до того, как те причинят вред слонам или…
Компания DeepMind создала AlphaZero – систему AI, освоившую сложные настольные игры
Программа играет в шахматы и сложные логические настольные игры - сёги и го. С момента последней заметной победы машины над человеком во время игры в шахматы прошло уже более 20 лет и ученые уверены, что…