Ввод текста и управление мобильными компьютерами и информационными устройствами Мобильный интерфейс

2 Проблема: Многообразие мобильных устройств порождает множество пользовательских интерфейсов 4. Речь 1. Зрение 2. Действие 3. Слух Разные интерфейсы – проблема для пользователей. Значительная часть стоимости устройства - интерфейс.

3 Постановка задачи: каким будет пользовательский интерфейс для широкого спектра устройств? Нужен простой интерфейс Нужен понятный интерфейс Нужен единый эргономичный интерфейс

4 Неважно где находится системный блок, лишь бы он не был помехой. Управление Восприятие Базовые условия: для работы с информационными ресурсами нужно видеть информацию и управлять ею Восприятие: человек имеет качественное зрение – более 90% восприятия. Управление: самый точный инструмент – человеческая рука и пальцы.

5 Действие Видео Мануальная зона действия ~ cm Мануальная зона фовеа: ~ cm Визуальная зона фовеа: ~ ° Зона визуального восприятия ~ ° Палец более точен чем кисть руки Размеры экрана, клавиатуры и манипулятора определены размером мобильного устройства. Пальце-глаз переводит форм-фактор устройства от cm. до cm. Предпосылки решения задачи: области визуальной и сенсомоторной фовеа связаны в единую эргономическую систему

6 Пальце-глаз – практическая метафора вездесущего пальца, который может кликать везде от маленького экрана на Пальме до экрана на стене или в виртуальной реальности. След курсора Размер экранов: от ПальмадоСтены Визуально-моторная обратная связь tWEEt-манипулятор Радиальный угол Фиксированное пространство Угол зрения: радиальный угол любое направление любое расстояние Область действия: 2D плоскость действия, перемещение & клик, произвольное положение манипулятора. Решение проблемы: концепция пальце-глаза основана на визуально-моторной обратной связи

7 A. Обычный курсор мышиБ. Виртуальная клавиатура Курсор мыши tWEEt- клавиатура Указатель символов Символьная ВК Функциональная ВК Фразеологическая ВК Активная позиция Множество tWEEt-клавиатур... Активная позиция 3-D ВК Переключение между курсором и виртуальной клавиатурой tWEEt-клавиатура - идея: два состояния виртуальной клавиатуры, структура и иерархия Выбор объектаРабота с объектом

8 Взаимное положение tWEEt-клавиатуры и активной рабочей позицией стабильно. Решение для мобильных, носимых компьютеров с качественными дисплеями (размера книги, пальма, монитора в очках и настенных экранов) Позиция ввода Текстовый редактор Указатель символов Виртуальная клавиатура Оператор кликает мышиным курсором в позицию текстового ввода. Мышиный курсор трансформируется в виртуальную клавиатуру и привязывается к позиции текстового ввода. Оператор перемещает указатель символов на виртуальной клавиатуре и кликает мышью на выбранном символе. В результате посылается код данного символа в канал текстового ввода. Виртуальная клавиатура перемещается вслед на позицией текстового ввода. tWEEt-клавиатура - реализация: виртуальная клавиатура связана с позицией ввода текста и следует за ней

9 Ввод имени файла Ввод имени иконки tWEEt-клавиатура - реализация: виртуальная клавиатура появляется в активной позиции ввода текста

10 2D - навигация (X, Y) Name 1 Name 2 Name 3 Name 4 Name #12 #23 Ключевые слова Общий вид Y X Ассоциативные цепочки Виртуальная фразеологическая клавиатура: опорные сигналы + ассоциативные цепочки из текстовых сообщений. tWEEt-клавиатура – другие возможности: виртуальная клавиатура в роли фразеологической клавиатуры и базы данных

11 Свойства световой клавиатуры: нужна светлая поверхность ВК для света нужно много энергии для полноценного управления нужна еще мышь занимает две руки Световая клавиатура не годится для мобильного ввода текста ! Компании: Canesta и VKB Проекция изображения на поверхность Тест: ввод текста во время хождения Конкуренты - световая клавиатура: сравнение с tWEEt-технологией Пальце-глаз

12 Дополнительные устройства и аксессуары удовлетворят различных пользователей Основной и дополнительный монитор Основной и дополнительный манипулятор Кабель или BlueTooth tWEEt-манипулятор Очки-монитор Пример реализации мобильного интерфейса для смартфонов нового поколения Концепт модель от Ericsson

13 tWEEt-технология позволяет управлять и вводить символы во всевозможные мобильные устройства различного назначения. Возможность работы в полевых условиях и нестандартных ситуациях (совмещение с другой работой, скрытность и т.д.). Работа с текстом в различных условиях: от маленьких экранов до больших настенных экранов. Модульность. Небольшая стоимость SW & HW и экономные требования к ресурсам (процессор, память). Совместимость с MS-мышью и клавиатурой – совместимость со всеми стандартными программами. Фразеологическая клавиатура и работа с мобильной базой данных. Управление 3D-объектами и навигация в 3D-пространстве. Функции универсального пульта дистанционного управления любыми устройствами и приборами. Основные возможности tWEEt-технологии:

14 значительно упростить разработку и стоимость нового поколения мобильных компьютеров и информационных устройств (Information Appliance) Повод для бизнеса: модульный продукт, позволяющий занять лидирующую позицию на рынке PDA & IA Функции универсального пульта дистанционного управления любыми устройствами и приборами. Внедрение tWEEt-клавиатуры и tWEEt-манипулятора, позволяют: Модуль tWEEt-интерфейса Выделить интерфейсный модуль как отдельный продукт Системные модули

15 В чем бизнес: унифицированные модули интерфейса для PDA & IA унифицированные системные модули для PDA & IA Модули пользовательского tWEEt-интерфейса состоят из персональных средств – tWEEt-манипулятора (1) и визуализации (2), чип сопряжения (3) Потребность в таких модулях соизмерима с количеством пользователей Для упрощенных системных модулей потребуются чипы сопряжения (4) с модулями пользовательского интерфейса Потребность в таких чипов соизмерима с количеством PDA & IA Модуль tWEEt-интерфейса Чип сопряжения Системные модули

16 Выход из кризиса - многоцелевая корпорация Э. Тофлер Эксперт 1 Эксперт 2 Эксперт 3 Мобильная интеллектуальная группа Мобильный офис от IBM Сетевой Spread Sheet – Epsilon Tech. Мобильный офис (МО) – IBM Мобильное интеллектуальное предприятие ("agile" intelligence enterprise) –Intelligence Community" Изменение структуры корпораций: мобильный виртуальный офис – стратегическое направление по выходу корпораций из кризиса

17 В чем бизнес: аппаратные базовые модули поддержки функций мобильного виртуального офиса Одновременный доступ нескольких пользователей к операционной среде Чипы персональных интерфейсов 5 OC Совместная работа по принципуподключение - отключение