Предприятие Adobe Systems разработало вид графического редактора с управлением голосом.
Для рисования, как правило, необходимы руки (или что-то подобное). Графические редакторы в настоящее время работают с помощью мыши или стилуса на особом графическом планшете. Однако в случае работы на обычном планшете или сенсорном телефоне, и в отсутствии мышки или стилуса у вас для обработки изображения есть только пальцы, то это не совсем удобно.
Adobe предоставляет уникальную возможность управлять командами редактирования рисунков голосовыми указаниями. Adobe Sensei реагирует на указания юзера (если нет доступных подключений – благодаря внедренной системы распознавания голоса, а в случае доступа к интернету при поддержке облачной технологии). Сенсей уясняет потребности пользователя и голосом сообщает о своих действиях. Этот процесс можно увидеть в видео-примере: юзер указывает системе начать исправление рисунка, преобразовать его квадратным, зеркально повернуть, отменить последнюю команду и разместить готовый рисунок в Фейсбук. Интересный нюанс, что программа воспринимает голосовое сообщение «мне нравится!» как указание о сохранении редактирования.
Возможность управлять программой голосом должна вскоре появиться в платформах Adobe для мобильных девайсов. Даты выходов готовых программ все еще не известны.
Создатели программы убеждают, что такое нововведение это только начало для полного мультимодального управления, то есть такого взаимодействия между человеком и программой, имеющей разные способы работы с платформой (здесь голосовое и ручное управление). Также существуют мультимодальные интерфейсы с возможностью давать команды жестами, взмахами руки или даже мимикой: самой наглядный пример – робот Pepper созданный в Японии, который способен распознавать выражение лица человека. В виртуальном мире мультимодальный интерфейс имеет еще одно измерение. К примеру, используя VR-очки и подсоединив подводный робот PowerRay есть возможность командовать перемещением прибора, плавая в виртуальном водоеме, которая передается с камеры робота, находящегося в реальной реке.
Перед этим Adobe представила «фотошоп для аудио» - платформу, которая дает возможность изменять запись речи в строке ввода текста, убирая или изменяя слова и словосочетания.
