Slide 1

Мобильный интерфейс
Ввод текста и управление
мобильными компьютерами
и информационными
устройствами

Проблема:
Многообразие мобильных устройств
порождает множество пользовательских интерфейсов

4. Речь
3. Слух

1. Зрение
2. Действие

Разные интерфейсы – проблема для пользователей.
Значительная часть стоимости устройства - интерфейс.
2

Постановка задачи:
каким будет пользовательский интерфейс для
широкого спектра устройств?

Нужен понятный
интерфейс

Нужен единый
эргономичный
интерфейс

Нужен
простой
интерфейс

3

Базовые условия:
для работы с информационными ресурсами
нужно видеть информацию и управлять ею
Восприятие

Управление
Восприятие:
человек имеет качественное
зрение – более 90% восприятия.
Управление:
самый точный инструмент –
человеческая рука и пальцы.

Неважно где находится
системный блок,
лишь бы он не был помехой.

4

Предпосылки решения задачи:
области визуальной и сенсомоторной “фовеа”
связаны в единую эргономическую систему
Зона визуального восприятия ~ 20 - 45 °

Видео

Визуальная зона фовеа: ~ 2 - 3 °

“Мануальная” зона фовеа: ~ 1.5 - 2.0 cm

Действие

Палец более точен
чем кисть руки

Мануальная зона действия ~ 15 - 25 cm

Размеры экрана, клавиатуры и манипулятора определены размером
мобильного устройства.

Пальце-глаз переводит форм-фактор устройства от 10-15 cm. до 1.5-2.0 cm.
5

Решение проблемы:
концепция “пальце-глаза” основана на
визуально-моторной обратной связи

Область действия:
• 2D плоскость
действия,
• перемещение &
клик,
• произвольное
положение
манипулятора.

Радиальный
угол

Угол зрения:
• радиальный угол
• любое направление
• любое расстояние
Визуально-моторная
обратная связь

Фиксированное пространство

След
курсора

Размер экранов:
от “Пальма”до
“Стены”
tWEEt-манипулятор

“Пальце-глаз” – практическая метафора вездесущего пальца, который может
кликать везде от маленького экрана на “Пальме” до экрана на стене или в
виртуальной реальности.
6

tWEEt-клавиатура - идея:
два состояния виртуальной клавиатуры,
структура и иерархия
Выбор объекта

Работа с объектом

A. Обычный курсор мыши

Б. Виртуальная клавиатура
Активная
позиция

Активная
позиция

tWEEtклавиатура

Курсор
мыши

Указатель
символов

Переключение между
курсором и виртуальной
клавиатурой

Символьная ВК
Функциональная ВК
Фразеологическая ВК
3-D ВК

Множество tWEEt-клавиатур

...
7

tWEEt-клавиатура - реализация:
виртуальная клавиатура связана с
позицией ввода текста и следует за ней
Решение для мобильных, носимых компьютеров с качественными дисплеями
(размера книги, пальма, монитора в очках и настенных экранов)

Текстовый
редактор

Указатель
символов

Позиция
ввода

Виртуальная
клавиатура

Взаимное положение tWEEt-клавиатуры и
активной рабочей позицией стабильно.
• Оператор кликает мышиным курсором в
позицию текстового ввода.
• Мышиный курсор трансформируется в
виртуальную клавиатуру и привязывается к
позиции текстового ввода.
• Оператор перемещает указатель символов на
виртуальной клавиатуре и кликает мышью на
выбранном символе. В результате посылается
код данного символа в канал текстового ввода.
• Виртуальная клавиатура перемещается вслед на
позицией текстового ввода.

8

tWEEt-клавиатура - реализация:
виртуальная клавиатура появляется в
активной позиции ввода текста

Ввод имени иконки

Ввод имени файла
9

tWEEt-клавиатура – другие возможности:
виртуальная клавиатура в роли
фразеологической клавиатуры и базы данных
Виртуальная фразеологическая клавиатура:
опорные сигналы + ассоциативные цепочки из текстовых сообщений.

Y

Ключевые
слова
Name 1

1234567

[email protected]

#12

Name 2

2345671

[email protected]

Ассоциативные цепочки

Name 3

3456712

Name 4

4567123

[email protected]

#23

Name 5

5671234

X

2D - навигация (X, Y)
Общий вид

10

Конкуренты - световая клавиатура:
сравнение с tWEEt-технологией

Проекция изображения на поверхность

“Пальце-глаз”

Тест: ввод текста во
время хождения

Компании: Canesta и VKB

Свойства световой клавиатуры:
• нужна светлая поверхность ВК
• для света нужно много энергии
• для полноценного управления
нужна еще мышь
• занимает две руки
Световая клавиатура не годится
для мобильного ввода текста !
11

Пример реализации мобильного интерфейса
для смартфонов нового поколения

Основной и
дополнительный монитор

Концепт модель
от Ericsson

Кабель или “BlueTooth”

Основной и
дополнительный
манипулятор

Очки-монитор
Дополнительные
устройства и аксессуары
удовлетворят различных
пользователей
tWEEt-манипулятор

12

Основные возможности
tWEEt-технологии:











tWEEt-технология позволяет управлять и вводить символы во
всевозможные мобильные устройства различного назначения.
Возможность работы в полевых условиях и нестандартных
ситуациях (совмещение с другой работой, скрытность и т.д.).
Работа с текстом в различных условиях: от маленьких
экранов до больших настенных экранов.
Модульность.
Небольшая стоимость SW & HW и экономные требования к
ресурсам (процессор, память).
Совместимость с MS-мышью и клавиатурой – совместимость
со всеми стандартными программами.
Фразеологическая клавиатура и работа с мобильной базой
данных.
Управление 3D-объектами и навигация в 3D-пространстве.
Функции универсального пульта дистанционного управления
любыми устройствами и приборами.
13

Повод для бизнеса:

модульный продукт, позволяющий занять
лидирующую позицию на рынке PDA & IA
Внедрение tWEEt-клавиатуры и tWEEt-манипулятора,
позволяют:
Выделить

значительно упростить разработку и
интерфейсный модуль как
стоимость нового поколения мобильных
отдельный продукт
компьютеров и информационных
устройств (Information Appliance)

Модуль
tWEEt-интерфейса
Системные
модули


Функции универсального пульта дистанционного управления любыми
устройствами и приборами.
14

В чем бизнес:

унифицированные модули интерфейса для PDA & IA
унифицированные системные модули для PDA & IA




Модули пользовательского
1
2
tWEEt-интерфейса состоят из
персональных средств –
tWEEt-манипулятора (1) и
Модуль
визуализации (2), чип
tWEEt-интерфейса
сопряжения (3)
Чип
3
Потребность в таких модулях
сопряжения
соизмерима с количеством
пользователей
Чип
Для упрощенных системных
4
сопряжения
модулей потребуются чипы
сопряжения (4) с модулями
Системные
пользовательского интерфейса
модули
Потребность в таких чипов
соизмерима с количеством
PDA & IA

15

Изменение структуры корпораций:
мобильный виртуальный офис –
стратегическое направление по выходу
корпораций из кризиса
Выход из кризиса - многоцелевая корпорация
Э. Тофлер
Сетевой Spread Sheet – Epsilon Tech.

Эксперт
1

Мобильный офис (МО) – IBM

Эксперт
2
Эксперт
3

Мобильная
интеллектуальная группа

Мобильный офис от IBM

Мобильное интеллектуальное
предприятие ("agile" intelligence
enterprise) –
“Intelligence Community"
16

В чем бизнес:

аппаратные базовые модули поддержки
функций мобильного виртуального офиса

Одновременный доступ
нескольких пользователей
к операционной среде

Совместная работа по принципу
“подключение - отключение”

OC

5

Чипы
персональных
интерфейсов

17


Slide 2

Мобильный интерфейс
Ввод текста и управление
мобильными компьютерами
и информационными
устройствами

Проблема:
Многообразие мобильных устройств
порождает множество пользовательских интерфейсов

4. Речь
3. Слух

1. Зрение
2. Действие

Разные интерфейсы – проблема для пользователей.
Значительная часть стоимости устройства - интерфейс.
2

Постановка задачи:
каким будет пользовательский интерфейс для
широкого спектра устройств?

Нужен понятный
интерфейс

Нужен единый
эргономичный
интерфейс

Нужен
простой
интерфейс

3

Базовые условия:
для работы с информационными ресурсами
нужно видеть информацию и управлять ею
Восприятие

Управление
Восприятие:
человек имеет качественное
зрение – более 90% восприятия.
Управление:
самый точный инструмент –
человеческая рука и пальцы.

Неважно где находится
системный блок,
лишь бы он не был помехой.

4

Предпосылки решения задачи:
области визуальной и сенсомоторной “фовеа”
связаны в единую эргономическую систему
Зона визуального восприятия ~ 20 - 45 °

Видео

Визуальная зона фовеа: ~ 2 - 3 °

“Мануальная” зона фовеа: ~ 1.5 - 2.0 cm

Действие

Палец более точен
чем кисть руки

Мануальная зона действия ~ 15 - 25 cm

Размеры экрана, клавиатуры и манипулятора определены размером
мобильного устройства.

Пальце-глаз переводит форм-фактор устройства от 10-15 cm. до 1.5-2.0 cm.
5

Решение проблемы:
концепция “пальце-глаза” основана на
визуально-моторной обратной связи

Область действия:
• 2D плоскость
действия,
• перемещение &
клик,
• произвольное
положение
манипулятора.

Радиальный
угол

Угол зрения:
• радиальный угол
• любое направление
• любое расстояние
Визуально-моторная
обратная связь

Фиксированное пространство

След
курсора

Размер экранов:
от “Пальма”до
“Стены”
tWEEt-манипулятор

“Пальце-глаз” – практическая метафора вездесущего пальца, который может
кликать везде от маленького экрана на “Пальме” до экрана на стене или в
виртуальной реальности.
6

tWEEt-клавиатура - идея:
два состояния виртуальной клавиатуры,
структура и иерархия
Выбор объекта

Работа с объектом

A. Обычный курсор мыши

Б. Виртуальная клавиатура
Активная
позиция

Активная
позиция

tWEEtклавиатура

Курсор
мыши

Указатель
символов

Переключение между
курсором и виртуальной
клавиатурой

Символьная ВК
Функциональная ВК
Фразеологическая ВК
3-D ВК

Множество tWEEt-клавиатур

...
7

tWEEt-клавиатура - реализация:
виртуальная клавиатура связана с
позицией ввода текста и следует за ней
Решение для мобильных, носимых компьютеров с качественными дисплеями
(размера книги, пальма, монитора в очках и настенных экранов)

Текстовый
редактор

Указатель
символов

Позиция
ввода

Виртуальная
клавиатура

Взаимное положение tWEEt-клавиатуры и
активной рабочей позицией стабильно.
• Оператор кликает мышиным курсором в
позицию текстового ввода.
• Мышиный курсор трансформируется в
виртуальную клавиатуру и привязывается к
позиции текстового ввода.
• Оператор перемещает указатель символов на
виртуальной клавиатуре и кликает мышью на
выбранном символе. В результате посылается
код данного символа в канал текстового ввода.
• Виртуальная клавиатура перемещается вслед на
позицией текстового ввода.

8

tWEEt-клавиатура - реализация:
виртуальная клавиатура появляется в
активной позиции ввода текста

Ввод имени иконки

Ввод имени файла
9

tWEEt-клавиатура – другие возможности:
виртуальная клавиатура в роли
фразеологической клавиатуры и базы данных
Виртуальная фразеологическая клавиатура:
опорные сигналы + ассоциативные цепочки из текстовых сообщений.

Y

Ключевые
слова
Name 1

1234567

[email protected]

#12

Name 2

2345671

[email protected]

Ассоциативные цепочки

Name 3

3456712

Name 4

4567123

[email protected]

#23

Name 5

5671234

X

2D - навигация (X, Y)
Общий вид

10

Конкуренты - световая клавиатура:
сравнение с tWEEt-технологией

Проекция изображения на поверхность

“Пальце-глаз”

Тест: ввод текста во
время хождения

Компании: Canesta и VKB

Свойства световой клавиатуры:
• нужна светлая поверхность ВК
• для света нужно много энергии
• для полноценного управления
нужна еще мышь
• занимает две руки
Световая клавиатура не годится
для мобильного ввода текста !
11

Пример реализации мобильного интерфейса
для смартфонов нового поколения

Основной и
дополнительный монитор

Концепт модель
от Ericsson

Кабель или “BlueTooth”

Основной и
дополнительный
манипулятор

Очки-монитор
Дополнительные
устройства и аксессуары
удовлетворят различных
пользователей
tWEEt-манипулятор

12

Основные возможности
tWEEt-технологии:











tWEEt-технология позволяет управлять и вводить символы во
всевозможные мобильные устройства различного назначения.
Возможность работы в полевых условиях и нестандартных
ситуациях (совмещение с другой работой, скрытность и т.д.).
Работа с текстом в различных условиях: от маленьких
экранов до больших настенных экранов.
Модульность.
Небольшая стоимость SW & HW и экономные требования к
ресурсам (процессор, память).
Совместимость с MS-мышью и клавиатурой – совместимость
со всеми стандартными программами.
Фразеологическая клавиатура и работа с мобильной базой
данных.
Управление 3D-объектами и навигация в 3D-пространстве.
Функции универсального пульта дистанционного управления
любыми устройствами и приборами.
13

Повод для бизнеса:

модульный продукт, позволяющий занять
лидирующую позицию на рынке PDA & IA
Внедрение tWEEt-клавиатуры и tWEEt-манипулятора,
позволяют:
Выделить

значительно упростить разработку и
интерфейсный модуль как
стоимость нового поколения мобильных
отдельный продукт
компьютеров и информационных
устройств (Information Appliance)

Модуль
tWEEt-интерфейса
Системные
модули


Функции универсального пульта дистанционного управления любыми
устройствами и приборами.
14

В чем бизнес:

унифицированные модули интерфейса для PDA & IA
унифицированные системные модули для PDA & IA




Модули пользовательского
1
2
tWEEt-интерфейса состоят из
персональных средств –
tWEEt-манипулятора (1) и
Модуль
визуализации (2), чип
tWEEt-интерфейса
сопряжения (3)
Чип
3
Потребность в таких модулях
сопряжения
соизмерима с количеством
пользователей
Чип
Для упрощенных системных
4
сопряжения
модулей потребуются чипы
сопряжения (4) с модулями
Системные
пользовательского интерфейса
модули
Потребность в таких чипов
соизмерима с количеством
PDA & IA

15

Изменение структуры корпораций:
мобильный виртуальный офис –
стратегическое направление по выходу
корпораций из кризиса
Выход из кризиса - многоцелевая корпорация
Э. Тофлер
Сетевой Spread Sheet – Epsilon Tech.

Эксперт
1

Мобильный офис (МО) – IBM

Эксперт
2
Эксперт
3

Мобильная
интеллектуальная группа

Мобильный офис от IBM

Мобильное интеллектуальное
предприятие ("agile" intelligence
enterprise) –
“Intelligence Community"
16

В чем бизнес:

аппаратные базовые модули поддержки
функций мобильного виртуального офиса

Одновременный доступ
нескольких пользователей
к операционной среде

Совместная работа по принципу
“подключение - отключение”

OC

5

Чипы
персональных
интерфейсов

17


Slide 3

Мобильный интерфейс
Ввод текста и управление
мобильными компьютерами
и информационными
устройствами

Проблема:
Многообразие мобильных устройств
порождает множество пользовательских интерфейсов

4. Речь
3. Слух

1. Зрение
2. Действие

Разные интерфейсы – проблема для пользователей.
Значительная часть стоимости устройства - интерфейс.
2

Постановка задачи:
каким будет пользовательский интерфейс для
широкого спектра устройств?

Нужен понятный
интерфейс

Нужен единый
эргономичный
интерфейс

Нужен
простой
интерфейс

3

Базовые условия:
для работы с информационными ресурсами
нужно видеть информацию и управлять ею
Восприятие

Управление
Восприятие:
человек имеет качественное
зрение – более 90% восприятия.
Управление:
самый точный инструмент –
человеческая рука и пальцы.

Неважно где находится
системный блок,
лишь бы он не был помехой.

4

Предпосылки решения задачи:
области визуальной и сенсомоторной “фовеа”
связаны в единую эргономическую систему
Зона визуального восприятия ~ 20 - 45 °

Видео

Визуальная зона фовеа: ~ 2 - 3 °

“Мануальная” зона фовеа: ~ 1.5 - 2.0 cm

Действие

Палец более точен
чем кисть руки

Мануальная зона действия ~ 15 - 25 cm

Размеры экрана, клавиатуры и манипулятора определены размером
мобильного устройства.

Пальце-глаз переводит форм-фактор устройства от 10-15 cm. до 1.5-2.0 cm.
5

Решение проблемы:
концепция “пальце-глаза” основана на
визуально-моторной обратной связи

Область действия:
• 2D плоскость
действия,
• перемещение &
клик,
• произвольное
положение
манипулятора.

Радиальный
угол

Угол зрения:
• радиальный угол
• любое направление
• любое расстояние
Визуально-моторная
обратная связь

Фиксированное пространство

След
курсора

Размер экранов:
от “Пальма”до
“Стены”
tWEEt-манипулятор

“Пальце-глаз” – практическая метафора вездесущего пальца, который может
кликать везде от маленького экрана на “Пальме” до экрана на стене или в
виртуальной реальности.
6

tWEEt-клавиатура - идея:
два состояния виртуальной клавиатуры,
структура и иерархия
Выбор объекта

Работа с объектом

A. Обычный курсор мыши

Б. Виртуальная клавиатура
Активная
позиция

Активная
позиция

tWEEtклавиатура

Курсор
мыши

Указатель
символов

Переключение между
курсором и виртуальной
клавиатурой

Символьная ВК
Функциональная ВК
Фразеологическая ВК
3-D ВК

Множество tWEEt-клавиатур

...
7

tWEEt-клавиатура - реализация:
виртуальная клавиатура связана с
позицией ввода текста и следует за ней
Решение для мобильных, носимых компьютеров с качественными дисплеями
(размера книги, пальма, монитора в очках и настенных экранов)

Текстовый
редактор

Указатель
символов

Позиция
ввода

Виртуальная
клавиатура

Взаимное положение tWEEt-клавиатуры и
активной рабочей позицией стабильно.
• Оператор кликает мышиным курсором в
позицию текстового ввода.
• Мышиный курсор трансформируется в
виртуальную клавиатуру и привязывается к
позиции текстового ввода.
• Оператор перемещает указатель символов на
виртуальной клавиатуре и кликает мышью на
выбранном символе. В результате посылается
код данного символа в канал текстового ввода.
• Виртуальная клавиатура перемещается вслед на
позицией текстового ввода.

8

tWEEt-клавиатура - реализация:
виртуальная клавиатура появляется в
активной позиции ввода текста

Ввод имени иконки

Ввод имени файла
9

tWEEt-клавиатура – другие возможности:
виртуальная клавиатура в роли
фразеологической клавиатуры и базы данных
Виртуальная фразеологическая клавиатура:
опорные сигналы + ассоциативные цепочки из текстовых сообщений.

Y

Ключевые
слова
Name 1

1234567

[email protected]

#12

Name 2

2345671

[email protected]

Ассоциативные цепочки

Name 3

3456712

Name 4

4567123

[email protected]

#23

Name 5

5671234

X

2D - навигация (X, Y)
Общий вид

10

Конкуренты - световая клавиатура:
сравнение с tWEEt-технологией

Проекция изображения на поверхность

“Пальце-глаз”

Тест: ввод текста во
время хождения

Компании: Canesta и VKB

Свойства световой клавиатуры:
• нужна светлая поверхность ВК
• для света нужно много энергии
• для полноценного управления
нужна еще мышь
• занимает две руки
Световая клавиатура не годится
для мобильного ввода текста !
11

Пример реализации мобильного интерфейса
для смартфонов нового поколения

Основной и
дополнительный монитор

Концепт модель
от Ericsson

Кабель или “BlueTooth”

Основной и
дополнительный
манипулятор

Очки-монитор
Дополнительные
устройства и аксессуары
удовлетворят различных
пользователей
tWEEt-манипулятор

12

Основные возможности
tWEEt-технологии:











tWEEt-технология позволяет управлять и вводить символы во
всевозможные мобильные устройства различного назначения.
Возможность работы в полевых условиях и нестандартных
ситуациях (совмещение с другой работой, скрытность и т.д.).
Работа с текстом в различных условиях: от маленьких
экранов до больших настенных экранов.
Модульность.
Небольшая стоимость SW & HW и экономные требования к
ресурсам (процессор, память).
Совместимость с MS-мышью и клавиатурой – совместимость
со всеми стандартными программами.
Фразеологическая клавиатура и работа с мобильной базой
данных.
Управление 3D-объектами и навигация в 3D-пространстве.
Функции универсального пульта дистанционного управления
любыми устройствами и приборами.
13

Повод для бизнеса:

модульный продукт, позволяющий занять
лидирующую позицию на рынке PDA & IA
Внедрение tWEEt-клавиатуры и tWEEt-манипулятора,
позволяют:
Выделить

значительно упростить разработку и
интерфейсный модуль как
стоимость нового поколения мобильных
отдельный продукт
компьютеров и информационных
устройств (Information Appliance)

Модуль
tWEEt-интерфейса
Системные
модули


Функции универсального пульта дистанционного управления любыми
устройствами и приборами.
14

В чем бизнес:

унифицированные модули интерфейса для PDA & IA
унифицированные системные модули для PDA & IA




Модули пользовательского
1
2
tWEEt-интерфейса состоят из
персональных средств –
tWEEt-манипулятора (1) и
Модуль
визуализации (2), чип
tWEEt-интерфейса
сопряжения (3)
Чип
3
Потребность в таких модулях
сопряжения
соизмерима с количеством
пользователей
Чип
Для упрощенных системных
4
сопряжения
модулей потребуются чипы
сопряжения (4) с модулями
Системные
пользовательского интерфейса
модули
Потребность в таких чипов
соизмерима с количеством
PDA & IA

15

Изменение структуры корпораций:
мобильный виртуальный офис –
стратегическое направление по выходу
корпораций из кризиса
Выход из кризиса - многоцелевая корпорация
Э. Тофлер
Сетевой Spread Sheet – Epsilon Tech.

Эксперт
1

Мобильный офис (МО) – IBM

Эксперт
2
Эксперт
3

Мобильная
интеллектуальная группа

Мобильный офис от IBM

Мобильное интеллектуальное
предприятие ("agile" intelligence
enterprise) –
“Intelligence Community"
16

В чем бизнес:

аппаратные базовые модули поддержки
функций мобильного виртуального офиса

Одновременный доступ
нескольких пользователей
к операционной среде

Совместная работа по принципу
“подключение - отключение”

OC

5

Чипы
персональных
интерфейсов

17


Slide 4

Мобильный интерфейс
Ввод текста и управление
мобильными компьютерами
и информационными
устройствами

Проблема:
Многообразие мобильных устройств
порождает множество пользовательских интерфейсов

4. Речь
3. Слух

1. Зрение
2. Действие

Разные интерфейсы – проблема для пользователей.
Значительная часть стоимости устройства - интерфейс.
2

Постановка задачи:
каким будет пользовательский интерфейс для
широкого спектра устройств?

Нужен понятный
интерфейс

Нужен единый
эргономичный
интерфейс

Нужен
простой
интерфейс

3

Базовые условия:
для работы с информационными ресурсами
нужно видеть информацию и управлять ею
Восприятие

Управление
Восприятие:
человек имеет качественное
зрение – более 90% восприятия.
Управление:
самый точный инструмент –
человеческая рука и пальцы.

Неважно где находится
системный блок,
лишь бы он не был помехой.

4

Предпосылки решения задачи:
области визуальной и сенсомоторной “фовеа”
связаны в единую эргономическую систему
Зона визуального восприятия ~ 20 - 45 °

Видео

Визуальная зона фовеа: ~ 2 - 3 °

“Мануальная” зона фовеа: ~ 1.5 - 2.0 cm

Действие

Палец более точен
чем кисть руки

Мануальная зона действия ~ 15 - 25 cm

Размеры экрана, клавиатуры и манипулятора определены размером
мобильного устройства.

Пальце-глаз переводит форм-фактор устройства от 10-15 cm. до 1.5-2.0 cm.
5

Решение проблемы:
концепция “пальце-глаза” основана на
визуально-моторной обратной связи

Область действия:
• 2D плоскость
действия,
• перемещение &
клик,
• произвольное
положение
манипулятора.

Радиальный
угол

Угол зрения:
• радиальный угол
• любое направление
• любое расстояние
Визуально-моторная
обратная связь

Фиксированное пространство

След
курсора

Размер экранов:
от “Пальма”до
“Стены”
tWEEt-манипулятор

“Пальце-глаз” – практическая метафора вездесущего пальца, который может
кликать везде от маленького экрана на “Пальме” до экрана на стене или в
виртуальной реальности.
6

tWEEt-клавиатура - идея:
два состояния виртуальной клавиатуры,
структура и иерархия
Выбор объекта

Работа с объектом

A. Обычный курсор мыши

Б. Виртуальная клавиатура
Активная
позиция

Активная
позиция

tWEEtклавиатура

Курсор
мыши

Указатель
символов

Переключение между
курсором и виртуальной
клавиатурой

Символьная ВК
Функциональная ВК
Фразеологическая ВК
3-D ВК

Множество tWEEt-клавиатур

...
7

tWEEt-клавиатура - реализация:
виртуальная клавиатура связана с
позицией ввода текста и следует за ней
Решение для мобильных, носимых компьютеров с качественными дисплеями
(размера книги, пальма, монитора в очках и настенных экранов)

Текстовый
редактор

Указатель
символов

Позиция
ввода

Виртуальная
клавиатура

Взаимное положение tWEEt-клавиатуры и
активной рабочей позицией стабильно.
• Оператор кликает мышиным курсором в
позицию текстового ввода.
• Мышиный курсор трансформируется в
виртуальную клавиатуру и привязывается к
позиции текстового ввода.
• Оператор перемещает указатель символов на
виртуальной клавиатуре и кликает мышью на
выбранном символе. В результате посылается
код данного символа в канал текстового ввода.
• Виртуальная клавиатура перемещается вслед на
позицией текстового ввода.

8

tWEEt-клавиатура - реализация:
виртуальная клавиатура появляется в
активной позиции ввода текста

Ввод имени иконки

Ввод имени файла
9

tWEEt-клавиатура – другие возможности:
виртуальная клавиатура в роли
фразеологической клавиатуры и базы данных
Виртуальная фразеологическая клавиатура:
опорные сигналы + ассоциативные цепочки из текстовых сообщений.

Y

Ключевые
слова
Name 1

1234567

[email protected]

#12

Name 2

2345671

[email protected]

Ассоциативные цепочки

Name 3

3456712

Name 4

4567123

[email protected]

#23

Name 5

5671234

X

2D - навигация (X, Y)
Общий вид

10

Конкуренты - световая клавиатура:
сравнение с tWEEt-технологией

Проекция изображения на поверхность

“Пальце-глаз”

Тест: ввод текста во
время хождения

Компании: Canesta и VKB

Свойства световой клавиатуры:
• нужна светлая поверхность ВК
• для света нужно много энергии
• для полноценного управления
нужна еще мышь
• занимает две руки
Световая клавиатура не годится
для мобильного ввода текста !
11

Пример реализации мобильного интерфейса
для смартфонов нового поколения

Основной и
дополнительный монитор

Концепт модель
от Ericsson

Кабель или “BlueTooth”

Основной и
дополнительный
манипулятор

Очки-монитор
Дополнительные
устройства и аксессуары
удовлетворят различных
пользователей
tWEEt-манипулятор

12

Основные возможности
tWEEt-технологии:











tWEEt-технология позволяет управлять и вводить символы во
всевозможные мобильные устройства различного назначения.
Возможность работы в полевых условиях и нестандартных
ситуациях (совмещение с другой работой, скрытность и т.д.).
Работа с текстом в различных условиях: от маленьких
экранов до больших настенных экранов.
Модульность.
Небольшая стоимость SW & HW и экономные требования к
ресурсам (процессор, память).
Совместимость с MS-мышью и клавиатурой – совместимость
со всеми стандартными программами.
Фразеологическая клавиатура и работа с мобильной базой
данных.
Управление 3D-объектами и навигация в 3D-пространстве.
Функции универсального пульта дистанционного управления
любыми устройствами и приборами.
13

Повод для бизнеса:

модульный продукт, позволяющий занять
лидирующую позицию на рынке PDA & IA
Внедрение tWEEt-клавиатуры и tWEEt-манипулятора,
позволяют:
Выделить

значительно упростить разработку и
интерфейсный модуль как
стоимость нового поколения мобильных
отдельный продукт
компьютеров и информационных
устройств (Information Appliance)

Модуль
tWEEt-интерфейса
Системные
модули


Функции универсального пульта дистанционного управления любыми
устройствами и приборами.
14

В чем бизнес:

унифицированные модули интерфейса для PDA & IA
унифицированные системные модули для PDA & IA




Модули пользовательского
1
2
tWEEt-интерфейса состоят из
персональных средств –
tWEEt-манипулятора (1) и
Модуль
визуализации (2), чип
tWEEt-интерфейса
сопряжения (3)
Чип
3
Потребность в таких модулях
сопряжения
соизмерима с количеством
пользователей
Чип
Для упрощенных системных
4
сопряжения
модулей потребуются чипы
сопряжения (4) с модулями
Системные
пользовательского интерфейса
модули
Потребность в таких чипов
соизмерима с количеством
PDA & IA

15

Изменение структуры корпораций:
мобильный виртуальный офис –
стратегическое направление по выходу
корпораций из кризиса
Выход из кризиса - многоцелевая корпорация
Э. Тофлер
Сетевой Spread Sheet – Epsilon Tech.

Эксперт
1

Мобильный офис (МО) – IBM

Эксперт
2
Эксперт
3

Мобильная
интеллектуальная группа

Мобильный офис от IBM

Мобильное интеллектуальное
предприятие ("agile" intelligence
enterprise) –
“Intelligence Community"
16

В чем бизнес:

аппаратные базовые модули поддержки
функций мобильного виртуального офиса

Одновременный доступ
нескольких пользователей
к операционной среде

Совместная работа по принципу
“подключение - отключение”

OC

5

Чипы
персональных
интерфейсов

17


Slide 5

Мобильный интерфейс
Ввод текста и управление
мобильными компьютерами
и информационными
устройствами

Проблема:
Многообразие мобильных устройств
порождает множество пользовательских интерфейсов

4. Речь
3. Слух

1. Зрение
2. Действие

Разные интерфейсы – проблема для пользователей.
Значительная часть стоимости устройства - интерфейс.
2

Постановка задачи:
каким будет пользовательский интерфейс для
широкого спектра устройств?

Нужен понятный
интерфейс

Нужен единый
эргономичный
интерфейс

Нужен
простой
интерфейс

3

Базовые условия:
для работы с информационными ресурсами
нужно видеть информацию и управлять ею
Восприятие

Управление
Восприятие:
человек имеет качественное
зрение – более 90% восприятия.
Управление:
самый точный инструмент –
человеческая рука и пальцы.

Неважно где находится
системный блок,
лишь бы он не был помехой.

4

Предпосылки решения задачи:
области визуальной и сенсомоторной “фовеа”
связаны в единую эргономическую систему
Зона визуального восприятия ~ 20 - 45 °

Видео

Визуальная зона фовеа: ~ 2 - 3 °

“Мануальная” зона фовеа: ~ 1.5 - 2.0 cm

Действие

Палец более точен
чем кисть руки

Мануальная зона действия ~ 15 - 25 cm

Размеры экрана, клавиатуры и манипулятора определены размером
мобильного устройства.

Пальце-глаз переводит форм-фактор устройства от 10-15 cm. до 1.5-2.0 cm.
5

Решение проблемы:
концепция “пальце-глаза” основана на
визуально-моторной обратной связи

Область действия:
• 2D плоскость
действия,
• перемещение &
клик,
• произвольное
положение
манипулятора.

Радиальный
угол

Угол зрения:
• радиальный угол
• любое направление
• любое расстояние
Визуально-моторная
обратная связь

Фиксированное пространство

След
курсора

Размер экранов:
от “Пальма”до
“Стены”
tWEEt-манипулятор

“Пальце-глаз” – практическая метафора вездесущего пальца, который может
кликать везде от маленького экрана на “Пальме” до экрана на стене или в
виртуальной реальности.
6

tWEEt-клавиатура - идея:
два состояния виртуальной клавиатуры,
структура и иерархия
Выбор объекта

Работа с объектом

A. Обычный курсор мыши

Б. Виртуальная клавиатура
Активная
позиция

Активная
позиция

tWEEtклавиатура

Курсор
мыши

Указатель
символов

Переключение между
курсором и виртуальной
клавиатурой

Символьная ВК
Функциональная ВК
Фразеологическая ВК
3-D ВК

Множество tWEEt-клавиатур

...
7

tWEEt-клавиатура - реализация:
виртуальная клавиатура связана с
позицией ввода текста и следует за ней
Решение для мобильных, носимых компьютеров с качественными дисплеями
(размера книги, пальма, монитора в очках и настенных экранов)

Текстовый
редактор

Указатель
символов

Позиция
ввода

Виртуальная
клавиатура

Взаимное положение tWEEt-клавиатуры и
активной рабочей позицией стабильно.
• Оператор кликает мышиным курсором в
позицию текстового ввода.
• Мышиный курсор трансформируется в
виртуальную клавиатуру и привязывается к
позиции текстового ввода.
• Оператор перемещает указатель символов на
виртуальной клавиатуре и кликает мышью на
выбранном символе. В результате посылается
код данного символа в канал текстового ввода.
• Виртуальная клавиатура перемещается вслед на
позицией текстового ввода.

8

tWEEt-клавиатура - реализация:
виртуальная клавиатура появляется в
активной позиции ввода текста

Ввод имени иконки

Ввод имени файла
9

tWEEt-клавиатура – другие возможности:
виртуальная клавиатура в роли
фразеологической клавиатуры и базы данных
Виртуальная фразеологическая клавиатура:
опорные сигналы + ассоциативные цепочки из текстовых сообщений.

Y

Ключевые
слова
Name 1

1234567

[email protected]

#12

Name 2

2345671

[email protected]

Ассоциативные цепочки

Name 3

3456712

Name 4

4567123

[email protected]

#23

Name 5

5671234

X

2D - навигация (X, Y)
Общий вид

10

Конкуренты - световая клавиатура:
сравнение с tWEEt-технологией

Проекция изображения на поверхность

“Пальце-глаз”

Тест: ввод текста во
время хождения

Компании: Canesta и VKB

Свойства световой клавиатуры:
• нужна светлая поверхность ВК
• для света нужно много энергии
• для полноценного управления
нужна еще мышь
• занимает две руки
Световая клавиатура не годится
для мобильного ввода текста !
11

Пример реализации мобильного интерфейса
для смартфонов нового поколения

Основной и
дополнительный монитор

Концепт модель
от Ericsson

Кабель или “BlueTooth”

Основной и
дополнительный
манипулятор

Очки-монитор
Дополнительные
устройства и аксессуары
удовлетворят различных
пользователей
tWEEt-манипулятор

12

Основные возможности
tWEEt-технологии:











tWEEt-технология позволяет управлять и вводить символы во
всевозможные мобильные устройства различного назначения.
Возможность работы в полевых условиях и нестандартных
ситуациях (совмещение с другой работой, скрытность и т.д.).
Работа с текстом в различных условиях: от маленьких
экранов до больших настенных экранов.
Модульность.
Небольшая стоимость SW & HW и экономные требования к
ресурсам (процессор, память).
Совместимость с MS-мышью и клавиатурой – совместимость
со всеми стандартными программами.
Фразеологическая клавиатура и работа с мобильной базой
данных.
Управление 3D-объектами и навигация в 3D-пространстве.
Функции универсального пульта дистанционного управления
любыми устройствами и приборами.
13

Повод для бизнеса:

модульный продукт, позволяющий занять
лидирующую позицию на рынке PDA & IA
Внедрение tWEEt-клавиатуры и tWEEt-манипулятора,
позволяют:
Выделить

значительно упростить разработку и
интерфейсный модуль как
стоимость нового поколения мобильных
отдельный продукт
компьютеров и информационных
устройств (Information Appliance)

Модуль
tWEEt-интерфейса
Системные
модули


Функции универсального пульта дистанционного управления любыми
устройствами и приборами.
14

В чем бизнес:

унифицированные модули интерфейса для PDA & IA
унифицированные системные модули для PDA & IA




Модули пользовательского
1
2
tWEEt-интерфейса состоят из
персональных средств –
tWEEt-манипулятора (1) и
Модуль
визуализации (2), чип
tWEEt-интерфейса
сопряжения (3)
Чип
3
Потребность в таких модулях
сопряжения
соизмерима с количеством
пользователей
Чип
Для упрощенных системных
4
сопряжения
модулей потребуются чипы
сопряжения (4) с модулями
Системные
пользовательского интерфейса
модули
Потребность в таких чипов
соизмерима с количеством
PDA & IA

15

Изменение структуры корпораций:
мобильный виртуальный офис –
стратегическое направление по выходу
корпораций из кризиса
Выход из кризиса - многоцелевая корпорация
Э. Тофлер
Сетевой Spread Sheet – Epsilon Tech.

Эксперт
1

Мобильный офис (МО) – IBM

Эксперт
2
Эксперт
3

Мобильная
интеллектуальная группа

Мобильный офис от IBM

Мобильное интеллектуальное
предприятие ("agile" intelligence
enterprise) –
“Intelligence Community"
16

В чем бизнес:

аппаратные базовые модули поддержки
функций мобильного виртуального офиса

Одновременный доступ
нескольких пользователей
к операционной среде

Совместная работа по принципу
“подключение - отключение”

OC

5

Чипы
персональных
интерфейсов

17


Slide 6

Мобильный интерфейс
Ввод текста и управление
мобильными компьютерами
и информационными
устройствами

Проблема:
Многообразие мобильных устройств
порождает множество пользовательских интерфейсов

4. Речь
3. Слух

1. Зрение
2. Действие

Разные интерфейсы – проблема для пользователей.
Значительная часть стоимости устройства - интерфейс.
2

Постановка задачи:
каким будет пользовательский интерфейс для
широкого спектра устройств?

Нужен понятный
интерфейс

Нужен единый
эргономичный
интерфейс

Нужен
простой
интерфейс

3

Базовые условия:
для работы с информационными ресурсами
нужно видеть информацию и управлять ею
Восприятие

Управление
Восприятие:
человек имеет качественное
зрение – более 90% восприятия.
Управление:
самый точный инструмент –
человеческая рука и пальцы.

Неважно где находится
системный блок,
лишь бы он не был помехой.

4

Предпосылки решения задачи:
области визуальной и сенсомоторной “фовеа”
связаны в единую эргономическую систему
Зона визуального восприятия ~ 20 - 45 °

Видео

Визуальная зона фовеа: ~ 2 - 3 °

“Мануальная” зона фовеа: ~ 1.5 - 2.0 cm

Действие

Палец более точен
чем кисть руки

Мануальная зона действия ~ 15 - 25 cm

Размеры экрана, клавиатуры и манипулятора определены размером
мобильного устройства.

Пальце-глаз переводит форм-фактор устройства от 10-15 cm. до 1.5-2.0 cm.
5

Решение проблемы:
концепция “пальце-глаза” основана на
визуально-моторной обратной связи

Область действия:
• 2D плоскость
действия,
• перемещение &
клик,
• произвольное
положение
манипулятора.

Радиальный
угол

Угол зрения:
• радиальный угол
• любое направление
• любое расстояние
Визуально-моторная
обратная связь

Фиксированное пространство

След
курсора

Размер экранов:
от “Пальма”до
“Стены”
tWEEt-манипулятор

“Пальце-глаз” – практическая метафора вездесущего пальца, который может
кликать везде от маленького экрана на “Пальме” до экрана на стене или в
виртуальной реальности.
6

tWEEt-клавиатура - идея:
два состояния виртуальной клавиатуры,
структура и иерархия
Выбор объекта

Работа с объектом

A. Обычный курсор мыши

Б. Виртуальная клавиатура
Активная
позиция

Активная
позиция

tWEEtклавиатура

Курсор
мыши

Указатель
символов

Переключение между
курсором и виртуальной
клавиатурой

Символьная ВК
Функциональная ВК
Фразеологическая ВК
3-D ВК

Множество tWEEt-клавиатур

...
7

tWEEt-клавиатура - реализация:
виртуальная клавиатура связана с
позицией ввода текста и следует за ней
Решение для мобильных, носимых компьютеров с качественными дисплеями
(размера книги, пальма, монитора в очках и настенных экранов)

Текстовый
редактор

Указатель
символов

Позиция
ввода

Виртуальная
клавиатура

Взаимное положение tWEEt-клавиатуры и
активной рабочей позицией стабильно.
• Оператор кликает мышиным курсором в
позицию текстового ввода.
• Мышиный курсор трансформируется в
виртуальную клавиатуру и привязывается к
позиции текстового ввода.
• Оператор перемещает указатель символов на
виртуальной клавиатуре и кликает мышью на
выбранном символе. В результате посылается
код данного символа в канал текстового ввода.
• Виртуальная клавиатура перемещается вслед на
позицией текстового ввода.

8

tWEEt-клавиатура - реализация:
виртуальная клавиатура появляется в
активной позиции ввода текста

Ввод имени иконки

Ввод имени файла
9

tWEEt-клавиатура – другие возможности:
виртуальная клавиатура в роли
фразеологической клавиатуры и базы данных
Виртуальная фразеологическая клавиатура:
опорные сигналы + ассоциативные цепочки из текстовых сообщений.

Y

Ключевые
слова
Name 1

1234567

[email protected]

#12

Name 2

2345671

[email protected]

Ассоциативные цепочки

Name 3

3456712

Name 4

4567123

[email protected]

#23

Name 5

5671234

X

2D - навигация (X, Y)
Общий вид

10

Конкуренты - световая клавиатура:
сравнение с tWEEt-технологией

Проекция изображения на поверхность

“Пальце-глаз”

Тест: ввод текста во
время хождения

Компании: Canesta и VKB

Свойства световой клавиатуры:
• нужна светлая поверхность ВК
• для света нужно много энергии
• для полноценного управления
нужна еще мышь
• занимает две руки
Световая клавиатура не годится
для мобильного ввода текста !
11

Пример реализации мобильного интерфейса
для смартфонов нового поколения

Основной и
дополнительный монитор

Концепт модель
от Ericsson

Кабель или “BlueTooth”

Основной и
дополнительный
манипулятор

Очки-монитор
Дополнительные
устройства и аксессуары
удовлетворят различных
пользователей
tWEEt-манипулятор

12

Основные возможности
tWEEt-технологии:











tWEEt-технология позволяет управлять и вводить символы во
всевозможные мобильные устройства различного назначения.
Возможность работы в полевых условиях и нестандартных
ситуациях (совмещение с другой работой, скрытность и т.д.).
Работа с текстом в различных условиях: от маленьких
экранов до больших настенных экранов.
Модульность.
Небольшая стоимость SW & HW и экономные требования к
ресурсам (процессор, память).
Совместимость с MS-мышью и клавиатурой – совместимость
со всеми стандартными программами.
Фразеологическая клавиатура и работа с мобильной базой
данных.
Управление 3D-объектами и навигация в 3D-пространстве.
Функции универсального пульта дистанционного управления
любыми устройствами и приборами.
13

Повод для бизнеса:

модульный продукт, позволяющий занять
лидирующую позицию на рынке PDA & IA
Внедрение tWEEt-клавиатуры и tWEEt-манипулятора,
позволяют:
Выделить

значительно упростить разработку и
интерфейсный модуль как
стоимость нового поколения мобильных
отдельный продукт
компьютеров и информационных
устройств (Information Appliance)

Модуль
tWEEt-интерфейса
Системные
модули


Функции универсального пульта дистанционного управления любыми
устройствами и приборами.
14

В чем бизнес:

унифицированные модули интерфейса для PDA & IA
унифицированные системные модули для PDA & IA




Модули пользовательского
1
2
tWEEt-интерфейса состоят из
персональных средств –
tWEEt-манипулятора (1) и
Модуль
визуализации (2), чип
tWEEt-интерфейса
сопряжения (3)
Чип
3
Потребность в таких модулях
сопряжения
соизмерима с количеством
пользователей
Чип
Для упрощенных системных
4
сопряжения
модулей потребуются чипы
сопряжения (4) с модулями
Системные
пользовательского интерфейса
модули
Потребность в таких чипов
соизмерима с количеством
PDA & IA

15

Изменение структуры корпораций:
мобильный виртуальный офис –
стратегическое направление по выходу
корпораций из кризиса
Выход из кризиса - многоцелевая корпорация
Э. Тофлер
Сетевой Spread Sheet – Epsilon Tech.

Эксперт
1

Мобильный офис (МО) – IBM

Эксперт
2
Эксперт
3

Мобильная
интеллектуальная группа

Мобильный офис от IBM

Мобильное интеллектуальное
предприятие ("agile" intelligence
enterprise) –
“Intelligence Community"
16

В чем бизнес:

аппаратные базовые модули поддержки
функций мобильного виртуального офиса

Одновременный доступ
нескольких пользователей
к операционной среде

Совместная работа по принципу
“подключение - отключение”

OC

5

Чипы
персональных
интерфейсов

17


Slide 7

Мобильный интерфейс
Ввод текста и управление
мобильными компьютерами
и информационными
устройствами

Проблема:
Многообразие мобильных устройств
порождает множество пользовательских интерфейсов

4. Речь
3. Слух

1. Зрение
2. Действие

Разные интерфейсы – проблема для пользователей.
Значительная часть стоимости устройства - интерфейс.
2

Постановка задачи:
каким будет пользовательский интерфейс для
широкого спектра устройств?

Нужен понятный
интерфейс

Нужен единый
эргономичный
интерфейс

Нужен
простой
интерфейс

3

Базовые условия:
для работы с информационными ресурсами
нужно видеть информацию и управлять ею
Восприятие

Управление
Восприятие:
человек имеет качественное
зрение – более 90% восприятия.
Управление:
самый точный инструмент –
человеческая рука и пальцы.

Неважно где находится
системный блок,
лишь бы он не был помехой.

4

Предпосылки решения задачи:
области визуальной и сенсомоторной “фовеа”
связаны в единую эргономическую систему
Зона визуального восприятия ~ 20 - 45 °

Видео

Визуальная зона фовеа: ~ 2 - 3 °

“Мануальная” зона фовеа: ~ 1.5 - 2.0 cm

Действие

Палец более точен
чем кисть руки

Мануальная зона действия ~ 15 - 25 cm

Размеры экрана, клавиатуры и манипулятора определены размером
мобильного устройства.

Пальце-глаз переводит форм-фактор устройства от 10-15 cm. до 1.5-2.0 cm.
5

Решение проблемы:
концепция “пальце-глаза” основана на
визуально-моторной обратной связи

Область действия:
• 2D плоскость
действия,
• перемещение &
клик,
• произвольное
положение
манипулятора.

Радиальный
угол

Угол зрения:
• радиальный угол
• любое направление
• любое расстояние
Визуально-моторная
обратная связь

Фиксированное пространство

След
курсора

Размер экранов:
от “Пальма”до
“Стены”
tWEEt-манипулятор

“Пальце-глаз” – практическая метафора вездесущего пальца, который может
кликать везде от маленького экрана на “Пальме” до экрана на стене или в
виртуальной реальности.
6

tWEEt-клавиатура - идея:
два состояния виртуальной клавиатуры,
структура и иерархия
Выбор объекта

Работа с объектом

A. Обычный курсор мыши

Б. Виртуальная клавиатура
Активная
позиция

Активная
позиция

tWEEtклавиатура

Курсор
мыши

Указатель
символов

Переключение между
курсором и виртуальной
клавиатурой

Символьная ВК
Функциональная ВК
Фразеологическая ВК
3-D ВК

Множество tWEEt-клавиатур

...
7

tWEEt-клавиатура - реализация:
виртуальная клавиатура связана с
позицией ввода текста и следует за ней
Решение для мобильных, носимых компьютеров с качественными дисплеями
(размера книги, пальма, монитора в очках и настенных экранов)

Текстовый
редактор

Указатель
символов

Позиция
ввода

Виртуальная
клавиатура

Взаимное положение tWEEt-клавиатуры и
активной рабочей позицией стабильно.
• Оператор кликает мышиным курсором в
позицию текстового ввода.
• Мышиный курсор трансформируется в
виртуальную клавиатуру и привязывается к
позиции текстового ввода.
• Оператор перемещает указатель символов на
виртуальной клавиатуре и кликает мышью на
выбранном символе. В результате посылается
код данного символа в канал текстового ввода.
• Виртуальная клавиатура перемещается вслед на
позицией текстового ввода.

8

tWEEt-клавиатура - реализация:
виртуальная клавиатура появляется в
активной позиции ввода текста

Ввод имени иконки

Ввод имени файла
9

tWEEt-клавиатура – другие возможности:
виртуальная клавиатура в роли
фразеологической клавиатуры и базы данных
Виртуальная фразеологическая клавиатура:
опорные сигналы + ассоциативные цепочки из текстовых сообщений.

Y

Ключевые
слова
Name 1

1234567

[email protected]

#12

Name 2

2345671

[email protected]

Ассоциативные цепочки

Name 3

3456712

Name 4

4567123

[email protected]

#23

Name 5

5671234

X

2D - навигация (X, Y)
Общий вид

10

Конкуренты - световая клавиатура:
сравнение с tWEEt-технологией

Проекция изображения на поверхность

“Пальце-глаз”

Тест: ввод текста во
время хождения

Компании: Canesta и VKB

Свойства световой клавиатуры:
• нужна светлая поверхность ВК
• для света нужно много энергии
• для полноценного управления
нужна еще мышь
• занимает две руки
Световая клавиатура не годится
для мобильного ввода текста !
11

Пример реализации мобильного интерфейса
для смартфонов нового поколения

Основной и
дополнительный монитор

Концепт модель
от Ericsson

Кабель или “BlueTooth”

Основной и
дополнительный
манипулятор

Очки-монитор
Дополнительные
устройства и аксессуары
удовлетворят различных
пользователей
tWEEt-манипулятор

12

Основные возможности
tWEEt-технологии:











tWEEt-технология позволяет управлять и вводить символы во
всевозможные мобильные устройства различного назначения.
Возможность работы в полевых условиях и нестандартных
ситуациях (совмещение с другой работой, скрытность и т.д.).
Работа с текстом в различных условиях: от маленьких
экранов до больших настенных экранов.
Модульность.
Небольшая стоимость SW & HW и экономные требования к
ресурсам (процессор, память).
Совместимость с MS-мышью и клавиатурой – совместимость
со всеми стандартными программами.
Фразеологическая клавиатура и работа с мобильной базой
данных.
Управление 3D-объектами и навигация в 3D-пространстве.
Функции универсального пульта дистанционного управления
любыми устройствами и приборами.
13

Повод для бизнеса:

модульный продукт, позволяющий занять
лидирующую позицию на рынке PDA & IA
Внедрение tWEEt-клавиатуры и tWEEt-манипулятора,
позволяют:
Выделить

значительно упростить разработку и
интерфейсный модуль как
стоимость нового поколения мобильных
отдельный продукт
компьютеров и информационных
устройств (Information Appliance)

Модуль
tWEEt-интерфейса
Системные
модули


Функции универсального пульта дистанционного управления любыми
устройствами и приборами.
14

В чем бизнес:

унифицированные модули интерфейса для PDA & IA
унифицированные системные модули для PDA & IA




Модули пользовательского
1
2
tWEEt-интерфейса состоят из
персональных средств –
tWEEt-манипулятора (1) и
Модуль
визуализации (2), чип
tWEEt-интерфейса
сопряжения (3)
Чип
3
Потребность в таких модулях
сопряжения
соизмерима с количеством
пользователей
Чип
Для упрощенных системных
4
сопряжения
модулей потребуются чипы
сопряжения (4) с модулями
Системные
пользовательского интерфейса
модули
Потребность в таких чипов
соизмерима с количеством
PDA & IA

15

Изменение структуры корпораций:
мобильный виртуальный офис –
стратегическое направление по выходу
корпораций из кризиса
Выход из кризиса - многоцелевая корпорация
Э. Тофлер
Сетевой Spread Sheet – Epsilon Tech.

Эксперт
1

Мобильный офис (МО) – IBM

Эксперт
2
Эксперт
3

Мобильная
интеллектуальная группа

Мобильный офис от IBM

Мобильное интеллектуальное
предприятие ("agile" intelligence
enterprise) –
“Intelligence Community"
16

В чем бизнес:

аппаратные базовые модули поддержки
функций мобильного виртуального офиса

Одновременный доступ
нескольких пользователей
к операционной среде

Совместная работа по принципу
“подключение - отключение”

OC

5

Чипы
персональных
интерфейсов

17


Slide 8

Мобильный интерфейс
Ввод текста и управление
мобильными компьютерами
и информационными
устройствами

Проблема:
Многообразие мобильных устройств
порождает множество пользовательских интерфейсов

4. Речь
3. Слух

1. Зрение
2. Действие

Разные интерфейсы – проблема для пользователей.
Значительная часть стоимости устройства - интерфейс.
2

Постановка задачи:
каким будет пользовательский интерфейс для
широкого спектра устройств?

Нужен понятный
интерфейс

Нужен единый
эргономичный
интерфейс

Нужен
простой
интерфейс

3

Базовые условия:
для работы с информационными ресурсами
нужно видеть информацию и управлять ею
Восприятие

Управление
Восприятие:
человек имеет качественное
зрение – более 90% восприятия.
Управление:
самый точный инструмент –
человеческая рука и пальцы.

Неважно где находится
системный блок,
лишь бы он не был помехой.

4

Предпосылки решения задачи:
области визуальной и сенсомоторной “фовеа”
связаны в единую эргономическую систему
Зона визуального восприятия ~ 20 - 45 °

Видео

Визуальная зона фовеа: ~ 2 - 3 °

“Мануальная” зона фовеа: ~ 1.5 - 2.0 cm

Действие

Палец более точен
чем кисть руки

Мануальная зона действия ~ 15 - 25 cm

Размеры экрана, клавиатуры и манипулятора определены размером
мобильного устройства.

Пальце-глаз переводит форм-фактор устройства от 10-15 cm. до 1.5-2.0 cm.
5

Решение проблемы:
концепция “пальце-глаза” основана на
визуально-моторной обратной связи

Область действия:
• 2D плоскость
действия,
• перемещение &
клик,
• произвольное
положение
манипулятора.

Радиальный
угол

Угол зрения:
• радиальный угол
• любое направление
• любое расстояние
Визуально-моторная
обратная связь

Фиксированное пространство

След
курсора

Размер экранов:
от “Пальма”до
“Стены”
tWEEt-манипулятор

“Пальце-глаз” – практическая метафора вездесущего пальца, который может
кликать везде от маленького экрана на “Пальме” до экрана на стене или в
виртуальной реальности.
6

tWEEt-клавиатура - идея:
два состояния виртуальной клавиатуры,
структура и иерархия
Выбор объекта

Работа с объектом

A. Обычный курсор мыши

Б. Виртуальная клавиатура
Активная
позиция

Активная
позиция

tWEEtклавиатура

Курсор
мыши

Указатель
символов

Переключение между
курсором и виртуальной
клавиатурой

Символьная ВК
Функциональная ВК
Фразеологическая ВК
3-D ВК

Множество tWEEt-клавиатур

...
7

tWEEt-клавиатура - реализация:
виртуальная клавиатура связана с
позицией ввода текста и следует за ней
Решение для мобильных, носимых компьютеров с качественными дисплеями
(размера книги, пальма, монитора в очках и настенных экранов)

Текстовый
редактор

Указатель
символов

Позиция
ввода

Виртуальная
клавиатура

Взаимное положение tWEEt-клавиатуры и
активной рабочей позицией стабильно.
• Оператор кликает мышиным курсором в
позицию текстового ввода.
• Мышиный курсор трансформируется в
виртуальную клавиатуру и привязывается к
позиции текстового ввода.
• Оператор перемещает указатель символов на
виртуальной клавиатуре и кликает мышью на
выбранном символе. В результате посылается
код данного символа в канал текстового ввода.
• Виртуальная клавиатура перемещается вслед на
позицией текстового ввода.

8

tWEEt-клавиатура - реализация:
виртуальная клавиатура появляется в
активной позиции ввода текста

Ввод имени иконки

Ввод имени файла
9

tWEEt-клавиатура – другие возможности:
виртуальная клавиатура в роли
фразеологической клавиатуры и базы данных
Виртуальная фразеологическая клавиатура:
опорные сигналы + ассоциативные цепочки из текстовых сообщений.

Y

Ключевые
слова
Name 1

1234567

[email protected]

#12

Name 2

2345671

[email protected]

Ассоциативные цепочки

Name 3

3456712

Name 4

4567123

[email protected]

#23

Name 5

5671234

X

2D - навигация (X, Y)
Общий вид

10

Конкуренты - световая клавиатура:
сравнение с tWEEt-технологией

Проекция изображения на поверхность

“Пальце-глаз”

Тест: ввод текста во
время хождения

Компании: Canesta и VKB

Свойства световой клавиатуры:
• нужна светлая поверхность ВК
• для света нужно много энергии
• для полноценного управления
нужна еще мышь
• занимает две руки
Световая клавиатура не годится
для мобильного ввода текста !
11

Пример реализации мобильного интерфейса
для смартфонов нового поколения

Основной и
дополнительный монитор

Концепт модель
от Ericsson

Кабель или “BlueTooth”

Основной и
дополнительный
манипулятор

Очки-монитор
Дополнительные
устройства и аксессуары
удовлетворят различных
пользователей
tWEEt-манипулятор

12

Основные возможности
tWEEt-технологии:











tWEEt-технология позволяет управлять и вводить символы во
всевозможные мобильные устройства различного назначения.
Возможность работы в полевых условиях и нестандартных
ситуациях (совмещение с другой работой, скрытность и т.д.).
Работа с текстом в различных условиях: от маленьких
экранов до больших настенных экранов.
Модульность.
Небольшая стоимость SW & HW и экономные требования к
ресурсам (процессор, память).
Совместимость с MS-мышью и клавиатурой – совместимость
со всеми стандартными программами.
Фразеологическая клавиатура и работа с мобильной базой
данных.
Управление 3D-объектами и навигация в 3D-пространстве.
Функции универсального пульта дистанционного управления
любыми устройствами и приборами.
13

Повод для бизнеса:

модульный продукт, позволяющий занять
лидирующую позицию на рынке PDA & IA
Внедрение tWEEt-клавиатуры и tWEEt-манипулятора,
позволяют:
Выделить

значительно упростить разработку и
интерфейсный модуль как
стоимость нового поколения мобильных
отдельный продукт
компьютеров и информационных
устройств (Information Appliance)

Модуль
tWEEt-интерфейса
Системные
модули


Функции универсального пульта дистанционного управления любыми
устройствами и приборами.
14

В чем бизнес:

унифицированные модули интерфейса для PDA & IA
унифицированные системные модули для PDA & IA




Модули пользовательского
1
2
tWEEt-интерфейса состоят из
персональных средств –
tWEEt-манипулятора (1) и
Модуль
визуализации (2), чип
tWEEt-интерфейса
сопряжения (3)
Чип
3
Потребность в таких модулях
сопряжения
соизмерима с количеством
пользователей
Чип
Для упрощенных системных
4
сопряжения
модулей потребуются чипы
сопряжения (4) с модулями
Системные
пользовательского интерфейса
модули
Потребность в таких чипов
соизмерима с количеством
PDA & IA

15

Изменение структуры корпораций:
мобильный виртуальный офис –
стратегическое направление по выходу
корпораций из кризиса
Выход из кризиса - многоцелевая корпорация
Э. Тофлер
Сетевой Spread Sheet – Epsilon Tech.

Эксперт
1

Мобильный офис (МО) – IBM

Эксперт
2
Эксперт
3

Мобильная
интеллектуальная группа

Мобильный офис от IBM

Мобильное интеллектуальное
предприятие ("agile" intelligence
enterprise) –
“Intelligence Community"
16

В чем бизнес:

аппаратные базовые модули поддержки
функций мобильного виртуального офиса

Одновременный доступ
нескольких пользователей
к операционной среде

Совместная работа по принципу
“подключение - отключение”

OC

5

Чипы
персональных
интерфейсов

17


Slide 9

Мобильный интерфейс
Ввод текста и управление
мобильными компьютерами
и информационными
устройствами

Проблема:
Многообразие мобильных устройств
порождает множество пользовательских интерфейсов

4. Речь
3. Слух

1. Зрение
2. Действие

Разные интерфейсы – проблема для пользователей.
Значительная часть стоимости устройства - интерфейс.
2

Постановка задачи:
каким будет пользовательский интерфейс для
широкого спектра устройств?

Нужен понятный
интерфейс

Нужен единый
эргономичный
интерфейс

Нужен
простой
интерфейс

3

Базовые условия:
для работы с информационными ресурсами
нужно видеть информацию и управлять ею
Восприятие

Управление
Восприятие:
человек имеет качественное
зрение – более 90% восприятия.
Управление:
самый точный инструмент –
человеческая рука и пальцы.

Неважно где находится
системный блок,
лишь бы он не был помехой.

4

Предпосылки решения задачи:
области визуальной и сенсомоторной “фовеа”
связаны в единую эргономическую систему
Зона визуального восприятия ~ 20 - 45 °

Видео

Визуальная зона фовеа: ~ 2 - 3 °

“Мануальная” зона фовеа: ~ 1.5 - 2.0 cm

Действие

Палец более точен
чем кисть руки

Мануальная зона действия ~ 15 - 25 cm

Размеры экрана, клавиатуры и манипулятора определены размером
мобильного устройства.

Пальце-глаз переводит форм-фактор устройства от 10-15 cm. до 1.5-2.0 cm.
5

Решение проблемы:
концепция “пальце-глаза” основана на
визуально-моторной обратной связи

Область действия:
• 2D плоскость
действия,
• перемещение &
клик,
• произвольное
положение
манипулятора.

Радиальный
угол

Угол зрения:
• радиальный угол
• любое направление
• любое расстояние
Визуально-моторная
обратная связь

Фиксированное пространство

След
курсора

Размер экранов:
от “Пальма”до
“Стены”
tWEEt-манипулятор

“Пальце-глаз” – практическая метафора вездесущего пальца, который может
кликать везде от маленького экрана на “Пальме” до экрана на стене или в
виртуальной реальности.
6

tWEEt-клавиатура - идея:
два состояния виртуальной клавиатуры,
структура и иерархия
Выбор объекта

Работа с объектом

A. Обычный курсор мыши

Б. Виртуальная клавиатура
Активная
позиция

Активная
позиция

tWEEtклавиатура

Курсор
мыши

Указатель
символов

Переключение между
курсором и виртуальной
клавиатурой

Символьная ВК
Функциональная ВК
Фразеологическая ВК
3-D ВК

Множество tWEEt-клавиатур

...
7

tWEEt-клавиатура - реализация:
виртуальная клавиатура связана с
позицией ввода текста и следует за ней
Решение для мобильных, носимых компьютеров с качественными дисплеями
(размера книги, пальма, монитора в очках и настенных экранов)

Текстовый
редактор

Указатель
символов

Позиция
ввода

Виртуальная
клавиатура

Взаимное положение tWEEt-клавиатуры и
активной рабочей позицией стабильно.
• Оператор кликает мышиным курсором в
позицию текстового ввода.
• Мышиный курсор трансформируется в
виртуальную клавиатуру и привязывается к
позиции текстового ввода.
• Оператор перемещает указатель символов на
виртуальной клавиатуре и кликает мышью на
выбранном символе. В результате посылается
код данного символа в канал текстового ввода.
• Виртуальная клавиатура перемещается вслед на
позицией текстового ввода.

8

tWEEt-клавиатура - реализация:
виртуальная клавиатура появляется в
активной позиции ввода текста

Ввод имени иконки

Ввод имени файла
9

tWEEt-клавиатура – другие возможности:
виртуальная клавиатура в роли
фразеологической клавиатуры и базы данных
Виртуальная фразеологическая клавиатура:
опорные сигналы + ассоциативные цепочки из текстовых сообщений.

Y

Ключевые
слова
Name 1

1234567

[email protected]

#12

Name 2

2345671

[email protected]

Ассоциативные цепочки

Name 3

3456712

Name 4

4567123

[email protected]

#23

Name 5

5671234

X

2D - навигация (X, Y)
Общий вид

10

Конкуренты - световая клавиатура:
сравнение с tWEEt-технологией

Проекция изображения на поверхность

“Пальце-глаз”

Тест: ввод текста во
время хождения

Компании: Canesta и VKB

Свойства световой клавиатуры:
• нужна светлая поверхность ВК
• для света нужно много энергии
• для полноценного управления
нужна еще мышь
• занимает две руки
Световая клавиатура не годится
для мобильного ввода текста !
11

Пример реализации мобильного интерфейса
для смартфонов нового поколения

Основной и
дополнительный монитор

Концепт модель
от Ericsson

Кабель или “BlueTooth”

Основной и
дополнительный
манипулятор

Очки-монитор
Дополнительные
устройства и аксессуары
удовлетворят различных
пользователей
tWEEt-манипулятор

12

Основные возможности
tWEEt-технологии:











tWEEt-технология позволяет управлять и вводить символы во
всевозможные мобильные устройства различного назначения.
Возможность работы в полевых условиях и нестандартных
ситуациях (совмещение с другой работой, скрытность и т.д.).
Работа с текстом в различных условиях: от маленьких
экранов до больших настенных экранов.
Модульность.
Небольшая стоимость SW & HW и экономные требования к
ресурсам (процессор, память).
Совместимость с MS-мышью и клавиатурой – совместимость
со всеми стандартными программами.
Фразеологическая клавиатура и работа с мобильной базой
данных.
Управление 3D-объектами и навигация в 3D-пространстве.
Функции универсального пульта дистанционного управления
любыми устройствами и приборами.
13

Повод для бизнеса:

модульный продукт, позволяющий занять
лидирующую позицию на рынке PDA & IA
Внедрение tWEEt-клавиатуры и tWEEt-манипулятора,
позволяют:
Выделить

значительно упростить разработку и
интерфейсный модуль как
стоимость нового поколения мобильных
отдельный продукт
компьютеров и информационных
устройств (Information Appliance)

Модуль
tWEEt-интерфейса
Системные
модули


Функции универсального пульта дистанционного управления любыми
устройствами и приборами.
14

В чем бизнес:

унифицированные модули интерфейса для PDA & IA
унифицированные системные модули для PDA & IA




Модули пользовательского
1
2
tWEEt-интерфейса состоят из
персональных средств –
tWEEt-манипулятора (1) и
Модуль
визуализации (2), чип
tWEEt-интерфейса
сопряжения (3)
Чип
3
Потребность в таких модулях
сопряжения
соизмерима с количеством
пользователей
Чип
Для упрощенных системных
4
сопряжения
модулей потребуются чипы
сопряжения (4) с модулями
Системные
пользовательского интерфейса
модули
Потребность в таких чипов
соизмерима с количеством
PDA & IA

15

Изменение структуры корпораций:
мобильный виртуальный офис –
стратегическое направление по выходу
корпораций из кризиса
Выход из кризиса - многоцелевая корпорация
Э. Тофлер
Сетевой Spread Sheet – Epsilon Tech.

Эксперт
1

Мобильный офис (МО) – IBM

Эксперт
2
Эксперт
3

Мобильная
интеллектуальная группа

Мобильный офис от IBM

Мобильное интеллектуальное
предприятие ("agile" intelligence
enterprise) –
“Intelligence Community"
16

В чем бизнес:

аппаратные базовые модули поддержки
функций мобильного виртуального офиса

Одновременный доступ
нескольких пользователей
к операционной среде

Совместная работа по принципу
“подключение - отключение”

OC

5

Чипы
персональных
интерфейсов

17


Slide 10

Мобильный интерфейс
Ввод текста и управление
мобильными компьютерами
и информационными
устройствами

Проблема:
Многообразие мобильных устройств
порождает множество пользовательских интерфейсов

4. Речь
3. Слух

1. Зрение
2. Действие

Разные интерфейсы – проблема для пользователей.
Значительная часть стоимости устройства - интерфейс.
2

Постановка задачи:
каким будет пользовательский интерфейс для
широкого спектра устройств?

Нужен понятный
интерфейс

Нужен единый
эргономичный
интерфейс

Нужен
простой
интерфейс

3

Базовые условия:
для работы с информационными ресурсами
нужно видеть информацию и управлять ею
Восприятие

Управление
Восприятие:
человек имеет качественное
зрение – более 90% восприятия.
Управление:
самый точный инструмент –
человеческая рука и пальцы.

Неважно где находится
системный блок,
лишь бы он не был помехой.

4

Предпосылки решения задачи:
области визуальной и сенсомоторной “фовеа”
связаны в единую эргономическую систему
Зона визуального восприятия ~ 20 - 45 °

Видео

Визуальная зона фовеа: ~ 2 - 3 °

“Мануальная” зона фовеа: ~ 1.5 - 2.0 cm

Действие

Палец более точен
чем кисть руки

Мануальная зона действия ~ 15 - 25 cm

Размеры экрана, клавиатуры и манипулятора определены размером
мобильного устройства.

Пальце-глаз переводит форм-фактор устройства от 10-15 cm. до 1.5-2.0 cm.
5

Решение проблемы:
концепция “пальце-глаза” основана на
визуально-моторной обратной связи

Область действия:
• 2D плоскость
действия,
• перемещение &
клик,
• произвольное
положение
манипулятора.

Радиальный
угол

Угол зрения:
• радиальный угол
• любое направление
• любое расстояние
Визуально-моторная
обратная связь

Фиксированное пространство

След
курсора

Размер экранов:
от “Пальма”до
“Стены”
tWEEt-манипулятор

“Пальце-глаз” – практическая метафора вездесущего пальца, который может
кликать везде от маленького экрана на “Пальме” до экрана на стене или в
виртуальной реальности.
6

tWEEt-клавиатура - идея:
два состояния виртуальной клавиатуры,
структура и иерархия
Выбор объекта

Работа с объектом

A. Обычный курсор мыши

Б. Виртуальная клавиатура
Активная
позиция

Активная
позиция

tWEEtклавиатура

Курсор
мыши

Указатель
символов

Переключение между
курсором и виртуальной
клавиатурой

Символьная ВК
Функциональная ВК
Фразеологическая ВК
3-D ВК

Множество tWEEt-клавиатур

...
7

tWEEt-клавиатура - реализация:
виртуальная клавиатура связана с
позицией ввода текста и следует за ней
Решение для мобильных, носимых компьютеров с качественными дисплеями
(размера книги, пальма, монитора в очках и настенных экранов)

Текстовый
редактор

Указатель
символов

Позиция
ввода

Виртуальная
клавиатура

Взаимное положение tWEEt-клавиатуры и
активной рабочей позицией стабильно.
• Оператор кликает мышиным курсором в
позицию текстового ввода.
• Мышиный курсор трансформируется в
виртуальную клавиатуру и привязывается к
позиции текстового ввода.
• Оператор перемещает указатель символов на
виртуальной клавиатуре и кликает мышью на
выбранном символе. В результате посылается
код данного символа в канал текстового ввода.
• Виртуальная клавиатура перемещается вслед на
позицией текстового ввода.

8

tWEEt-клавиатура - реализация:
виртуальная клавиатура появляется в
активной позиции ввода текста

Ввод имени иконки

Ввод имени файла
9

tWEEt-клавиатура – другие возможности:
виртуальная клавиатура в роли
фразеологической клавиатуры и базы данных
Виртуальная фразеологическая клавиатура:
опорные сигналы + ассоциативные цепочки из текстовых сообщений.

Y

Ключевые
слова
Name 1

1234567

[email protected]

#12

Name 2

2345671

[email protected]

Ассоциативные цепочки

Name 3

3456712

Name 4

4567123

[email protected]

#23

Name 5

5671234

X

2D - навигация (X, Y)
Общий вид

10

Конкуренты - световая клавиатура:
сравнение с tWEEt-технологией

Проекция изображения на поверхность

“Пальце-глаз”

Тест: ввод текста во
время хождения

Компании: Canesta и VKB

Свойства световой клавиатуры:
• нужна светлая поверхность ВК
• для света нужно много энергии
• для полноценного управления
нужна еще мышь
• занимает две руки
Световая клавиатура не годится
для мобильного ввода текста !
11

Пример реализации мобильного интерфейса
для смартфонов нового поколения

Основной и
дополнительный монитор

Концепт модель
от Ericsson

Кабель или “BlueTooth”

Основной и
дополнительный
манипулятор

Очки-монитор
Дополнительные
устройства и аксессуары
удовлетворят различных
пользователей
tWEEt-манипулятор

12

Основные возможности
tWEEt-технологии:











tWEEt-технология позволяет управлять и вводить символы во
всевозможные мобильные устройства различного назначения.
Возможность работы в полевых условиях и нестандартных
ситуациях (совмещение с другой работой, скрытность и т.д.).
Работа с текстом в различных условиях: от маленьких
экранов до больших настенных экранов.
Модульность.
Небольшая стоимость SW & HW и экономные требования к
ресурсам (процессор, память).
Совместимость с MS-мышью и клавиатурой – совместимость
со всеми стандартными программами.
Фразеологическая клавиатура и работа с мобильной базой
данных.
Управление 3D-объектами и навигация в 3D-пространстве.
Функции универсального пульта дистанционного управления
любыми устройствами и приборами.
13

Повод для бизнеса:

модульный продукт, позволяющий занять
лидирующую позицию на рынке PDA & IA
Внедрение tWEEt-клавиатуры и tWEEt-манипулятора,
позволяют:
Выделить

значительно упростить разработку и
интерфейсный модуль как
стоимость нового поколения мобильных
отдельный продукт
компьютеров и информационных
устройств (Information Appliance)

Модуль
tWEEt-интерфейса
Системные
модули


Функции универсального пульта дистанционного управления любыми
устройствами и приборами.
14

В чем бизнес:

унифицированные модули интерфейса для PDA & IA
унифицированные системные модули для PDA & IA




Модули пользовательского
1
2
tWEEt-интерфейса состоят из
персональных средств –
tWEEt-манипулятора (1) и
Модуль
визуализации (2), чип
tWEEt-интерфейса
сопряжения (3)
Чип
3
Потребность в таких модулях
сопряжения
соизмерима с количеством
пользователей
Чип
Для упрощенных системных
4
сопряжения
модулей потребуются чипы
сопряжения (4) с модулями
Системные
пользовательского интерфейса
модули
Потребность в таких чипов
соизмерима с количеством
PDA & IA

15

Изменение структуры корпораций:
мобильный виртуальный офис –
стратегическое направление по выходу
корпораций из кризиса
Выход из кризиса - многоцелевая корпорация
Э. Тофлер
Сетевой Spread Sheet – Epsilon Tech.

Эксперт
1

Мобильный офис (МО) – IBM

Эксперт
2
Эксперт
3

Мобильная
интеллектуальная группа

Мобильный офис от IBM

Мобильное интеллектуальное
предприятие ("agile" intelligence
enterprise) –
“Intelligence Community"
16

В чем бизнес:

аппаратные базовые модули поддержки
функций мобильного виртуального офиса

Одновременный доступ
нескольких пользователей
к операционной среде

Совместная работа по принципу
“подключение - отключение”

OC

5

Чипы
персональных
интерфейсов

17


Slide 11

Мобильный интерфейс
Ввод текста и управление
мобильными компьютерами
и информационными
устройствами

Проблема:
Многообразие мобильных устройств
порождает множество пользовательских интерфейсов

4. Речь
3. Слух

1. Зрение
2. Действие

Разные интерфейсы – проблема для пользователей.
Значительная часть стоимости устройства - интерфейс.
2

Постановка задачи:
каким будет пользовательский интерфейс для
широкого спектра устройств?

Нужен понятный
интерфейс

Нужен единый
эргономичный
интерфейс

Нужен
простой
интерфейс

3

Базовые условия:
для работы с информационными ресурсами
нужно видеть информацию и управлять ею
Восприятие

Управление
Восприятие:
человек имеет качественное
зрение – более 90% восприятия.
Управление:
самый точный инструмент –
человеческая рука и пальцы.

Неважно где находится
системный блок,
лишь бы он не был помехой.

4

Предпосылки решения задачи:
области визуальной и сенсомоторной “фовеа”
связаны в единую эргономическую систему
Зона визуального восприятия ~ 20 - 45 °

Видео

Визуальная зона фовеа: ~ 2 - 3 °

“Мануальная” зона фовеа: ~ 1.5 - 2.0 cm

Действие

Палец более точен
чем кисть руки

Мануальная зона действия ~ 15 - 25 cm

Размеры экрана, клавиатуры и манипулятора определены размером
мобильного устройства.

Пальце-глаз переводит форм-фактор устройства от 10-15 cm. до 1.5-2.0 cm.
5

Решение проблемы:
концепция “пальце-глаза” основана на
визуально-моторной обратной связи

Область действия:
• 2D плоскость
действия,
• перемещение &
клик,
• произвольное
положение
манипулятора.

Радиальный
угол

Угол зрения:
• радиальный угол
• любое направление
• любое расстояние
Визуально-моторная
обратная связь

Фиксированное пространство

След
курсора

Размер экранов:
от “Пальма”до
“Стены”
tWEEt-манипулятор

“Пальце-глаз” – практическая метафора вездесущего пальца, который может
кликать везде от маленького экрана на “Пальме” до экрана на стене или в
виртуальной реальности.
6

tWEEt-клавиатура - идея:
два состояния виртуальной клавиатуры,
структура и иерархия
Выбор объекта

Работа с объектом

A. Обычный курсор мыши

Б. Виртуальная клавиатура
Активная
позиция

Активная
позиция

tWEEtклавиатура

Курсор
мыши

Указатель
символов

Переключение между
курсором и виртуальной
клавиатурой

Символьная ВК
Функциональная ВК
Фразеологическая ВК
3-D ВК

Множество tWEEt-клавиатур

...
7

tWEEt-клавиатура - реализация:
виртуальная клавиатура связана с
позицией ввода текста и следует за ней
Решение для мобильных, носимых компьютеров с качественными дисплеями
(размера книги, пальма, монитора в очках и настенных экранов)

Текстовый
редактор

Указатель
символов

Позиция
ввода

Виртуальная
клавиатура

Взаимное положение tWEEt-клавиатуры и
активной рабочей позицией стабильно.
• Оператор кликает мышиным курсором в
позицию текстового ввода.
• Мышиный курсор трансформируется в
виртуальную клавиатуру и привязывается к
позиции текстового ввода.
• Оператор перемещает указатель символов на
виртуальной клавиатуре и кликает мышью на
выбранном символе. В результате посылается
код данного символа в канал текстового ввода.
• Виртуальная клавиатура перемещается вслед на
позицией текстового ввода.

8

tWEEt-клавиатура - реализация:
виртуальная клавиатура появляется в
активной позиции ввода текста

Ввод имени иконки

Ввод имени файла
9

tWEEt-клавиатура – другие возможности:
виртуальная клавиатура в роли
фразеологической клавиатуры и базы данных
Виртуальная фразеологическая клавиатура:
опорные сигналы + ассоциативные цепочки из текстовых сообщений.

Y

Ключевые
слова
Name 1

1234567

[email protected]

#12

Name 2

2345671

[email protected]

Ассоциативные цепочки

Name 3

3456712

Name 4

4567123

[email protected]

#23

Name 5

5671234

X

2D - навигация (X, Y)
Общий вид

10

Конкуренты - световая клавиатура:
сравнение с tWEEt-технологией

Проекция изображения на поверхность

“Пальце-глаз”

Тест: ввод текста во
время хождения

Компании: Canesta и VKB

Свойства световой клавиатуры:
• нужна светлая поверхность ВК
• для света нужно много энергии
• для полноценного управления
нужна еще мышь
• занимает две руки
Световая клавиатура не годится
для мобильного ввода текста !
11

Пример реализации мобильного интерфейса
для смартфонов нового поколения

Основной и
дополнительный монитор

Концепт модель
от Ericsson

Кабель или “BlueTooth”

Основной и
дополнительный
манипулятор

Очки-монитор
Дополнительные
устройства и аксессуары
удовлетворят различных
пользователей
tWEEt-манипулятор

12

Основные возможности
tWEEt-технологии:











tWEEt-технология позволяет управлять и вводить символы во
всевозможные мобильные устройства различного назначения.
Возможность работы в полевых условиях и нестандартных
ситуациях (совмещение с другой работой, скрытность и т.д.).
Работа с текстом в различных условиях: от маленьких
экранов до больших настенных экранов.
Модульность.
Небольшая стоимость SW & HW и экономные требования к
ресурсам (процессор, память).
Совместимость с MS-мышью и клавиатурой – совместимость
со всеми стандартными программами.
Фразеологическая клавиатура и работа с мобильной базой
данных.
Управление 3D-объектами и навигация в 3D-пространстве.
Функции универсального пульта дистанционного управления
любыми устройствами и приборами.
13

Повод для бизнеса:

модульный продукт, позволяющий занять
лидирующую позицию на рынке PDA & IA
Внедрение tWEEt-клавиатуры и tWEEt-манипулятора,
позволяют:
Выделить

значительно упростить разработку и
интерфейсный модуль как
стоимость нового поколения мобильных
отдельный продукт
компьютеров и информационных
устройств (Information Appliance)

Модуль
tWEEt-интерфейса
Системные
модули


Функции универсального пульта дистанционного управления любыми
устройствами и приборами.
14

В чем бизнес:

унифицированные модули интерфейса для PDA & IA
унифицированные системные модули для PDA & IA




Модули пользовательского
1
2
tWEEt-интерфейса состоят из
персональных средств –
tWEEt-манипулятора (1) и
Модуль
визуализации (2), чип
tWEEt-интерфейса
сопряжения (3)
Чип
3
Потребность в таких модулях
сопряжения
соизмерима с количеством
пользователей
Чип
Для упрощенных системных
4
сопряжения
модулей потребуются чипы
сопряжения (4) с модулями
Системные
пользовательского интерфейса
модули
Потребность в таких чипов
соизмерима с количеством
PDA & IA

15

Изменение структуры корпораций:
мобильный виртуальный офис –
стратегическое направление по выходу
корпораций из кризиса
Выход из кризиса - многоцелевая корпорация
Э. Тофлер
Сетевой Spread Sheet – Epsilon Tech.

Эксперт
1

Мобильный офис (МО) – IBM

Эксперт
2
Эксперт
3

Мобильная
интеллектуальная группа

Мобильный офис от IBM

Мобильное интеллектуальное
предприятие ("agile" intelligence
enterprise) –
“Intelligence Community"
16

В чем бизнес:

аппаратные базовые модули поддержки
функций мобильного виртуального офиса

Одновременный доступ
нескольких пользователей
к операционной среде

Совместная работа по принципу
“подключение - отключение”

OC

5

Чипы
персональных
интерфейсов

17


Slide 12

Мобильный интерфейс
Ввод текста и управление
мобильными компьютерами
и информационными
устройствами

Проблема:
Многообразие мобильных устройств
порождает множество пользовательских интерфейсов

4. Речь
3. Слух

1. Зрение
2. Действие

Разные интерфейсы – проблема для пользователей.
Значительная часть стоимости устройства - интерфейс.
2

Постановка задачи:
каким будет пользовательский интерфейс для
широкого спектра устройств?

Нужен понятный
интерфейс

Нужен единый
эргономичный
интерфейс

Нужен
простой
интерфейс

3

Базовые условия:
для работы с информационными ресурсами
нужно видеть информацию и управлять ею
Восприятие

Управление
Восприятие:
человек имеет качественное
зрение – более 90% восприятия.
Управление:
самый точный инструмент –
человеческая рука и пальцы.

Неважно где находится
системный блок,
лишь бы он не был помехой.

4

Предпосылки решения задачи:
области визуальной и сенсомоторной “фовеа”
связаны в единую эргономическую систему
Зона визуального восприятия ~ 20 - 45 °

Видео

Визуальная зона фовеа: ~ 2 - 3 °

“Мануальная” зона фовеа: ~ 1.5 - 2.0 cm

Действие

Палец более точен
чем кисть руки

Мануальная зона действия ~ 15 - 25 cm

Размеры экрана, клавиатуры и манипулятора определены размером
мобильного устройства.

Пальце-глаз переводит форм-фактор устройства от 10-15 cm. до 1.5-2.0 cm.
5

Решение проблемы:
концепция “пальце-глаза” основана на
визуально-моторной обратной связи

Область действия:
• 2D плоскость
действия,
• перемещение &
клик,
• произвольное
положение
манипулятора.

Радиальный
угол

Угол зрения:
• радиальный угол
• любое направление
• любое расстояние
Визуально-моторная
обратная связь

Фиксированное пространство

След
курсора

Размер экранов:
от “Пальма”до
“Стены”
tWEEt-манипулятор

“Пальце-глаз” – практическая метафора вездесущего пальца, который может
кликать везде от маленького экрана на “Пальме” до экрана на стене или в
виртуальной реальности.
6

tWEEt-клавиатура - идея:
два состояния виртуальной клавиатуры,
структура и иерархия
Выбор объекта

Работа с объектом

A. Обычный курсор мыши

Б. Виртуальная клавиатура
Активная
позиция

Активная
позиция

tWEEtклавиатура

Курсор
мыши

Указатель
символов

Переключение между
курсором и виртуальной
клавиатурой

Символьная ВК
Функциональная ВК
Фразеологическая ВК
3-D ВК

Множество tWEEt-клавиатур

...
7

tWEEt-клавиатура - реализация:
виртуальная клавиатура связана с
позицией ввода текста и следует за ней
Решение для мобильных, носимых компьютеров с качественными дисплеями
(размера книги, пальма, монитора в очках и настенных экранов)

Текстовый
редактор

Указатель
символов

Позиция
ввода

Виртуальная
клавиатура

Взаимное положение tWEEt-клавиатуры и
активной рабочей позицией стабильно.
• Оператор кликает мышиным курсором в
позицию текстового ввода.
• Мышиный курсор трансформируется в
виртуальную клавиатуру и привязывается к
позиции текстового ввода.
• Оператор перемещает указатель символов на
виртуальной клавиатуре и кликает мышью на
выбранном символе. В результате посылается
код данного символа в канал текстового ввода.
• Виртуальная клавиатура перемещается вслед на
позицией текстового ввода.

8

tWEEt-клавиатура - реализация:
виртуальная клавиатура появляется в
активной позиции ввода текста

Ввод имени иконки

Ввод имени файла
9

tWEEt-клавиатура – другие возможности:
виртуальная клавиатура в роли
фразеологической клавиатуры и базы данных
Виртуальная фразеологическая клавиатура:
опорные сигналы + ассоциативные цепочки из текстовых сообщений.

Y

Ключевые
слова
Name 1

1234567

[email protected]

#12

Name 2

2345671

[email protected]

Ассоциативные цепочки

Name 3

3456712

Name 4

4567123

[email protected]

#23

Name 5

5671234

X

2D - навигация (X, Y)
Общий вид

10

Конкуренты - световая клавиатура:
сравнение с tWEEt-технологией

Проекция изображения на поверхность

“Пальце-глаз”

Тест: ввод текста во
время хождения

Компании: Canesta и VKB

Свойства световой клавиатуры:
• нужна светлая поверхность ВК
• для света нужно много энергии
• для полноценного управления
нужна еще мышь
• занимает две руки
Световая клавиатура не годится
для мобильного ввода текста !
11

Пример реализации мобильного интерфейса
для смартфонов нового поколения

Основной и
дополнительный монитор

Концепт модель
от Ericsson

Кабель или “BlueTooth”

Основной и
дополнительный
манипулятор

Очки-монитор
Дополнительные
устройства и аксессуары
удовлетворят различных
пользователей
tWEEt-манипулятор

12

Основные возможности
tWEEt-технологии:











tWEEt-технология позволяет управлять и вводить символы во
всевозможные мобильные устройства различного назначения.
Возможность работы в полевых условиях и нестандартных
ситуациях (совмещение с другой работой, скрытность и т.д.).
Работа с текстом в различных условиях: от маленьких
экранов до больших настенных экранов.
Модульность.
Небольшая стоимость SW & HW и экономные требования к
ресурсам (процессор, память).
Совместимость с MS-мышью и клавиатурой – совместимость
со всеми стандартными программами.
Фразеологическая клавиатура и работа с мобильной базой
данных.
Управление 3D-объектами и навигация в 3D-пространстве.
Функции универсального пульта дистанционного управления
любыми устройствами и приборами.
13

Повод для бизнеса:

модульный продукт, позволяющий занять
лидирующую позицию на рынке PDA & IA
Внедрение tWEEt-клавиатуры и tWEEt-манипулятора,
позволяют:
Выделить

значительно упростить разработку и
интерфейсный модуль как
стоимость нового поколения мобильных
отдельный продукт
компьютеров и информационных
устройств (Information Appliance)

Модуль
tWEEt-интерфейса
Системные
модули


Функции универсального пульта дистанционного управления любыми
устройствами и приборами.
14

В чем бизнес:

унифицированные модули интерфейса для PDA & IA
унифицированные системные модули для PDA & IA




Модули пользовательского
1
2
tWEEt-интерфейса состоят из
персональных средств –
tWEEt-манипулятора (1) и
Модуль
визуализации (2), чип
tWEEt-интерфейса
сопряжения (3)
Чип
3
Потребность в таких модулях
сопряжения
соизмерима с количеством
пользователей
Чип
Для упрощенных системных
4
сопряжения
модулей потребуются чипы
сопряжения (4) с модулями
Системные
пользовательского интерфейса
модули
Потребность в таких чипов
соизмерима с количеством
PDA & IA

15

Изменение структуры корпораций:
мобильный виртуальный офис –
стратегическое направление по выходу
корпораций из кризиса
Выход из кризиса - многоцелевая корпорация
Э. Тофлер
Сетевой Spread Sheet – Epsilon Tech.

Эксперт
1

Мобильный офис (МО) – IBM

Эксперт
2
Эксперт
3

Мобильная
интеллектуальная группа

Мобильный офис от IBM

Мобильное интеллектуальное
предприятие ("agile" intelligence
enterprise) –
“Intelligence Community"
16

В чем бизнес:

аппаратные базовые модули поддержки
функций мобильного виртуального офиса

Одновременный доступ
нескольких пользователей
к операционной среде

Совместная работа по принципу
“подключение - отключение”

OC

5

Чипы
персональных
интерфейсов

17


Slide 13

Мобильный интерфейс
Ввод текста и управление
мобильными компьютерами
и информационными
устройствами

Проблема:
Многообразие мобильных устройств
порождает множество пользовательских интерфейсов

4. Речь
3. Слух

1. Зрение
2. Действие

Разные интерфейсы – проблема для пользователей.
Значительная часть стоимости устройства - интерфейс.
2

Постановка задачи:
каким будет пользовательский интерфейс для
широкого спектра устройств?

Нужен понятный
интерфейс

Нужен единый
эргономичный
интерфейс

Нужен
простой
интерфейс

3

Базовые условия:
для работы с информационными ресурсами
нужно видеть информацию и управлять ею
Восприятие

Управление
Восприятие:
человек имеет качественное
зрение – более 90% восприятия.
Управление:
самый точный инструмент –
человеческая рука и пальцы.

Неважно где находится
системный блок,
лишь бы он не был помехой.

4

Предпосылки решения задачи:
области визуальной и сенсомоторной “фовеа”
связаны в единую эргономическую систему
Зона визуального восприятия ~ 20 - 45 °

Видео

Визуальная зона фовеа: ~ 2 - 3 °

“Мануальная” зона фовеа: ~ 1.5 - 2.0 cm

Действие

Палец более точен
чем кисть руки

Мануальная зона действия ~ 15 - 25 cm

Размеры экрана, клавиатуры и манипулятора определены размером
мобильного устройства.

Пальце-глаз переводит форм-фактор устройства от 10-15 cm. до 1.5-2.0 cm.
5

Решение проблемы:
концепция “пальце-глаза” основана на
визуально-моторной обратной связи

Область действия:
• 2D плоскость
действия,
• перемещение &
клик,
• произвольное
положение
манипулятора.

Радиальный
угол

Угол зрения:
• радиальный угол
• любое направление
• любое расстояние
Визуально-моторная
обратная связь

Фиксированное пространство

След
курсора

Размер экранов:
от “Пальма”до
“Стены”
tWEEt-манипулятор

“Пальце-глаз” – практическая метафора вездесущего пальца, который может
кликать везде от маленького экрана на “Пальме” до экрана на стене или в
виртуальной реальности.
6

tWEEt-клавиатура - идея:
два состояния виртуальной клавиатуры,
структура и иерархия
Выбор объекта

Работа с объектом

A. Обычный курсор мыши

Б. Виртуальная клавиатура
Активная
позиция

Активная
позиция

tWEEtклавиатура

Курсор
мыши

Указатель
символов

Переключение между
курсором и виртуальной
клавиатурой

Символьная ВК
Функциональная ВК
Фразеологическая ВК
3-D ВК

Множество tWEEt-клавиатур

...
7

tWEEt-клавиатура - реализация:
виртуальная клавиатура связана с
позицией ввода текста и следует за ней
Решение для мобильных, носимых компьютеров с качественными дисплеями
(размера книги, пальма, монитора в очках и настенных экранов)

Текстовый
редактор

Указатель
символов

Позиция
ввода

Виртуальная
клавиатура

Взаимное положение tWEEt-клавиатуры и
активной рабочей позицией стабильно.
• Оператор кликает мышиным курсором в
позицию текстового ввода.
• Мышиный курсор трансформируется в
виртуальную клавиатуру и привязывается к
позиции текстового ввода.
• Оператор перемещает указатель символов на
виртуальной клавиатуре и кликает мышью на
выбранном символе. В результате посылается
код данного символа в канал текстового ввода.
• Виртуальная клавиатура перемещается вслед на
позицией текстового ввода.

8

tWEEt-клавиатура - реализация:
виртуальная клавиатура появляется в
активной позиции ввода текста

Ввод имени иконки

Ввод имени файла
9

tWEEt-клавиатура – другие возможности:
виртуальная клавиатура в роли
фразеологической клавиатуры и базы данных
Виртуальная фразеологическая клавиатура:
опорные сигналы + ассоциативные цепочки из текстовых сообщений.

Y

Ключевые
слова
Name 1

1234567

[email protected]

#12

Name 2

2345671

[email protected]

Ассоциативные цепочки

Name 3

3456712

Name 4

4567123

[email protected]

#23

Name 5

5671234

X

2D - навигация (X, Y)
Общий вид

10

Конкуренты - световая клавиатура:
сравнение с tWEEt-технологией

Проекция изображения на поверхность

“Пальце-глаз”

Тест: ввод текста во
время хождения

Компании: Canesta и VKB

Свойства световой клавиатуры:
• нужна светлая поверхность ВК
• для света нужно много энергии
• для полноценного управления
нужна еще мышь
• занимает две руки
Световая клавиатура не годится
для мобильного ввода текста !
11

Пример реализации мобильного интерфейса
для смартфонов нового поколения

Основной и
дополнительный монитор

Концепт модель
от Ericsson

Кабель или “BlueTooth”

Основной и
дополнительный
манипулятор

Очки-монитор
Дополнительные
устройства и аксессуары
удовлетворят различных
пользователей
tWEEt-манипулятор

12

Основные возможности
tWEEt-технологии:











tWEEt-технология позволяет управлять и вводить символы во
всевозможные мобильные устройства различного назначения.
Возможность работы в полевых условиях и нестандартных
ситуациях (совмещение с другой работой, скрытность и т.д.).
Работа с текстом в различных условиях: от маленьких
экранов до больших настенных экранов.
Модульность.
Небольшая стоимость SW & HW и экономные требования к
ресурсам (процессор, память).
Совместимость с MS-мышью и клавиатурой – совместимость
со всеми стандартными программами.
Фразеологическая клавиатура и работа с мобильной базой
данных.
Управление 3D-объектами и навигация в 3D-пространстве.
Функции универсального пульта дистанционного управления
любыми устройствами и приборами.
13

Повод для бизнеса:

модульный продукт, позволяющий занять
лидирующую позицию на рынке PDA & IA
Внедрение tWEEt-клавиатуры и tWEEt-манипулятора,
позволяют:
Выделить

значительно упростить разработку и
интерфейсный модуль как
стоимость нового поколения мобильных
отдельный продукт
компьютеров и информационных
устройств (Information Appliance)

Модуль
tWEEt-интерфейса
Системные
модули


Функции универсального пульта дистанционного управления любыми
устройствами и приборами.
14

В чем бизнес:

унифицированные модули интерфейса для PDA & IA
унифицированные системные модули для PDA & IA




Модули пользовательского
1
2
tWEEt-интерфейса состоят из
персональных средств –
tWEEt-манипулятора (1) и
Модуль
визуализации (2), чип
tWEEt-интерфейса
сопряжения (3)
Чип
3
Потребность в таких модулях
сопряжения
соизмерима с количеством
пользователей
Чип
Для упрощенных системных
4
сопряжения
модулей потребуются чипы
сопряжения (4) с модулями
Системные
пользовательского интерфейса
модули
Потребность в таких чипов
соизмерима с количеством
PDA & IA

15

Изменение структуры корпораций:
мобильный виртуальный офис –
стратегическое направление по выходу
корпораций из кризиса
Выход из кризиса - многоцелевая корпорация
Э. Тофлер
Сетевой Spread Sheet – Epsilon Tech.

Эксперт
1

Мобильный офис (МО) – IBM

Эксперт
2
Эксперт
3

Мобильная
интеллектуальная группа

Мобильный офис от IBM

Мобильное интеллектуальное
предприятие ("agile" intelligence
enterprise) –
“Intelligence Community"
16

В чем бизнес:

аппаратные базовые модули поддержки
функций мобильного виртуального офиса

Одновременный доступ
нескольких пользователей
к операционной среде

Совместная работа по принципу
“подключение - отключение”

OC

5

Чипы
персональных
интерфейсов

17


Slide 14

Мобильный интерфейс
Ввод текста и управление
мобильными компьютерами
и информационными
устройствами

Проблема:
Многообразие мобильных устройств
порождает множество пользовательских интерфейсов

4. Речь
3. Слух

1. Зрение
2. Действие

Разные интерфейсы – проблема для пользователей.
Значительная часть стоимости устройства - интерфейс.
2

Постановка задачи:
каким будет пользовательский интерфейс для
широкого спектра устройств?

Нужен понятный
интерфейс

Нужен единый
эргономичный
интерфейс

Нужен
простой
интерфейс

3

Базовые условия:
для работы с информационными ресурсами
нужно видеть информацию и управлять ею
Восприятие

Управление
Восприятие:
человек имеет качественное
зрение – более 90% восприятия.
Управление:
самый точный инструмент –
человеческая рука и пальцы.

Неважно где находится
системный блок,
лишь бы он не был помехой.

4

Предпосылки решения задачи:
области визуальной и сенсомоторной “фовеа”
связаны в единую эргономическую систему
Зона визуального восприятия ~ 20 - 45 °

Видео

Визуальная зона фовеа: ~ 2 - 3 °

“Мануальная” зона фовеа: ~ 1.5 - 2.0 cm

Действие

Палец более точен
чем кисть руки

Мануальная зона действия ~ 15 - 25 cm

Размеры экрана, клавиатуры и манипулятора определены размером
мобильного устройства.

Пальце-глаз переводит форм-фактор устройства от 10-15 cm. до 1.5-2.0 cm.
5

Решение проблемы:
концепция “пальце-глаза” основана на
визуально-моторной обратной связи

Область действия:
• 2D плоскость
действия,
• перемещение &
клик,
• произвольное
положение
манипулятора.

Радиальный
угол

Угол зрения:
• радиальный угол
• любое направление
• любое расстояние
Визуально-моторная
обратная связь

Фиксированное пространство

След
курсора

Размер экранов:
от “Пальма”до
“Стены”
tWEEt-манипулятор

“Пальце-глаз” – практическая метафора вездесущего пальца, который может
кликать везде от маленького экрана на “Пальме” до экрана на стене или в
виртуальной реальности.
6

tWEEt-клавиатура - идея:
два состояния виртуальной клавиатуры,
структура и иерархия
Выбор объекта

Работа с объектом

A. Обычный курсор мыши

Б. Виртуальная клавиатура
Активная
позиция

Активная
позиция

tWEEtклавиатура

Курсор
мыши

Указатель
символов

Переключение между
курсором и виртуальной
клавиатурой

Символьная ВК
Функциональная ВК
Фразеологическая ВК
3-D ВК

Множество tWEEt-клавиатур

...
7

tWEEt-клавиатура - реализация:
виртуальная клавиатура связана с
позицией ввода текста и следует за ней
Решение для мобильных, носимых компьютеров с качественными дисплеями
(размера книги, пальма, монитора в очках и настенных экранов)

Текстовый
редактор

Указатель
символов

Позиция
ввода

Виртуальная
клавиатура

Взаимное положение tWEEt-клавиатуры и
активной рабочей позицией стабильно.
• Оператор кликает мышиным курсором в
позицию текстового ввода.
• Мышиный курсор трансформируется в
виртуальную клавиатуру и привязывается к
позиции текстового ввода.
• Оператор перемещает указатель символов на
виртуальной клавиатуре и кликает мышью на
выбранном символе. В результате посылается
код данного символа в канал текстового ввода.
• Виртуальная клавиатура перемещается вслед на
позицией текстового ввода.

8

tWEEt-клавиатура - реализация:
виртуальная клавиатура появляется в
активной позиции ввода текста

Ввод имени иконки

Ввод имени файла
9

tWEEt-клавиатура – другие возможности:
виртуальная клавиатура в роли
фразеологической клавиатуры и базы данных
Виртуальная фразеологическая клавиатура:
опорные сигналы + ассоциативные цепочки из текстовых сообщений.

Y

Ключевые
слова
Name 1

1234567

[email protected]

#12

Name 2

2345671

[email protected]

Ассоциативные цепочки

Name 3

3456712

Name 4

4567123

[email protected]

#23

Name 5

5671234

X

2D - навигация (X, Y)
Общий вид

10

Конкуренты - световая клавиатура:
сравнение с tWEEt-технологией

Проекция изображения на поверхность

“Пальце-глаз”

Тест: ввод текста во
время хождения

Компании: Canesta и VKB

Свойства световой клавиатуры:
• нужна светлая поверхность ВК
• для света нужно много энергии
• для полноценного управления
нужна еще мышь
• занимает две руки
Световая клавиатура не годится
для мобильного ввода текста !
11

Пример реализации мобильного интерфейса
для смартфонов нового поколения

Основной и
дополнительный монитор

Концепт модель
от Ericsson

Кабель или “BlueTooth”

Основной и
дополнительный
манипулятор

Очки-монитор
Дополнительные
устройства и аксессуары
удовлетворят различных
пользователей
tWEEt-манипулятор

12

Основные возможности
tWEEt-технологии:











tWEEt-технология позволяет управлять и вводить символы во
всевозможные мобильные устройства различного назначения.
Возможность работы в полевых условиях и нестандартных
ситуациях (совмещение с другой работой, скрытность и т.д.).
Работа с текстом в различных условиях: от маленьких
экранов до больших настенных экранов.
Модульность.
Небольшая стоимость SW & HW и экономные требования к
ресурсам (процессор, память).
Совместимость с MS-мышью и клавиатурой – совместимость
со всеми стандартными программами.
Фразеологическая клавиатура и работа с мобильной базой
данных.
Управление 3D-объектами и навигация в 3D-пространстве.
Функции универсального пульта дистанционного управления
любыми устройствами и приборами.
13

Повод для бизнеса:

модульный продукт, позволяющий занять
лидирующую позицию на рынке PDA & IA
Внедрение tWEEt-клавиатуры и tWEEt-манипулятора,
позволяют:
Выделить

значительно упростить разработку и
интерфейсный модуль как
стоимость нового поколения мобильных
отдельный продукт
компьютеров и информационных
устройств (Information Appliance)

Модуль
tWEEt-интерфейса
Системные
модули


Функции универсального пульта дистанционного управления любыми
устройствами и приборами.
14

В чем бизнес:

унифицированные модули интерфейса для PDA & IA
унифицированные системные модули для PDA & IA




Модули пользовательского
1
2
tWEEt-интерфейса состоят из
персональных средств –
tWEEt-манипулятора (1) и
Модуль
визуализации (2), чип
tWEEt-интерфейса
сопряжения (3)
Чип
3
Потребность в таких модулях
сопряжения
соизмерима с количеством
пользователей
Чип
Для упрощенных системных
4
сопряжения
модулей потребуются чипы
сопряжения (4) с модулями
Системные
пользовательского интерфейса
модули
Потребность в таких чипов
соизмерима с количеством
PDA & IA

15

Изменение структуры корпораций:
мобильный виртуальный офис –
стратегическое направление по выходу
корпораций из кризиса
Выход из кризиса - многоцелевая корпорация
Э. Тофлер
Сетевой Spread Sheet – Epsilon Tech.

Эксперт
1

Мобильный офис (МО) – IBM

Эксперт
2
Эксперт
3

Мобильная
интеллектуальная группа

Мобильный офис от IBM

Мобильное интеллектуальное
предприятие ("agile" intelligence
enterprise) –
“Intelligence Community"
16

В чем бизнес:

аппаратные базовые модули поддержки
функций мобильного виртуального офиса

Одновременный доступ
нескольких пользователей
к операционной среде

Совместная работа по принципу
“подключение - отключение”

OC

5

Чипы
персональных
интерфейсов

17


Slide 15

Мобильный интерфейс
Ввод текста и управление
мобильными компьютерами
и информационными
устройствами

Проблема:
Многообразие мобильных устройств
порождает множество пользовательских интерфейсов

4. Речь
3. Слух

1. Зрение
2. Действие

Разные интерфейсы – проблема для пользователей.
Значительная часть стоимости устройства - интерфейс.
2

Постановка задачи:
каким будет пользовательский интерфейс для
широкого спектра устройств?

Нужен понятный
интерфейс

Нужен единый
эргономичный
интерфейс

Нужен
простой
интерфейс

3

Базовые условия:
для работы с информационными ресурсами
нужно видеть информацию и управлять ею
Восприятие

Управление
Восприятие:
человек имеет качественное
зрение – более 90% восприятия.
Управление:
самый точный инструмент –
человеческая рука и пальцы.

Неважно где находится
системный блок,
лишь бы он не был помехой.

4

Предпосылки решения задачи:
области визуальной и сенсомоторной “фовеа”
связаны в единую эргономическую систему
Зона визуального восприятия ~ 20 - 45 °

Видео

Визуальная зона фовеа: ~ 2 - 3 °

“Мануальная” зона фовеа: ~ 1.5 - 2.0 cm

Действие

Палец более точен
чем кисть руки

Мануальная зона действия ~ 15 - 25 cm

Размеры экрана, клавиатуры и манипулятора определены размером
мобильного устройства.

Пальце-глаз переводит форм-фактор устройства от 10-15 cm. до 1.5-2.0 cm.
5

Решение проблемы:
концепция “пальце-глаза” основана на
визуально-моторной обратной связи

Область действия:
• 2D плоскость
действия,
• перемещение &
клик,
• произвольное
положение
манипулятора.

Радиальный
угол

Угол зрения:
• радиальный угол
• любое направление
• любое расстояние
Визуально-моторная
обратная связь

Фиксированное пространство

След
курсора

Размер экранов:
от “Пальма”до
“Стены”
tWEEt-манипулятор

“Пальце-глаз” – практическая метафора вездесущего пальца, который может
кликать везде от маленького экрана на “Пальме” до экрана на стене или в
виртуальной реальности.
6

tWEEt-клавиатура - идея:
два состояния виртуальной клавиатуры,
структура и иерархия
Выбор объекта

Работа с объектом

A. Обычный курсор мыши

Б. Виртуальная клавиатура
Активная
позиция

Активная
позиция

tWEEtклавиатура

Курсор
мыши

Указатель
символов

Переключение между
курсором и виртуальной
клавиатурой

Символьная ВК
Функциональная ВК
Фразеологическая ВК
3-D ВК

Множество tWEEt-клавиатур

...
7

tWEEt-клавиатура - реализация:
виртуальная клавиатура связана с
позицией ввода текста и следует за ней
Решение для мобильных, носимых компьютеров с качественными дисплеями
(размера книги, пальма, монитора в очках и настенных экранов)

Текстовый
редактор

Указатель
символов

Позиция
ввода

Виртуальная
клавиатура

Взаимное положение tWEEt-клавиатуры и
активной рабочей позицией стабильно.
• Оператор кликает мышиным курсором в
позицию текстового ввода.
• Мышиный курсор трансформируется в
виртуальную клавиатуру и привязывается к
позиции текстового ввода.
• Оператор перемещает указатель символов на
виртуальной клавиатуре и кликает мышью на
выбранном символе. В результате посылается
код данного символа в канал текстового ввода.
• Виртуальная клавиатура перемещается вслед на
позицией текстового ввода.

8

tWEEt-клавиатура - реализация:
виртуальная клавиатура появляется в
активной позиции ввода текста

Ввод имени иконки

Ввод имени файла
9

tWEEt-клавиатура – другие возможности:
виртуальная клавиатура в роли
фразеологической клавиатуры и базы данных
Виртуальная фразеологическая клавиатура:
опорные сигналы + ассоциативные цепочки из текстовых сообщений.

Y

Ключевые
слова
Name 1

1234567

[email protected]

#12

Name 2

2345671

[email protected]

Ассоциативные цепочки

Name 3

3456712

Name 4

4567123

[email protected]

#23

Name 5

5671234

X

2D - навигация (X, Y)
Общий вид

10

Конкуренты - световая клавиатура:
сравнение с tWEEt-технологией

Проекция изображения на поверхность

“Пальце-глаз”

Тест: ввод текста во
время хождения

Компании: Canesta и VKB

Свойства световой клавиатуры:
• нужна светлая поверхность ВК
• для света нужно много энергии
• для полноценного управления
нужна еще мышь
• занимает две руки
Световая клавиатура не годится
для мобильного ввода текста !
11

Пример реализации мобильного интерфейса
для смартфонов нового поколения

Основной и
дополнительный монитор

Концепт модель
от Ericsson

Кабель или “BlueTooth”

Основной и
дополнительный
манипулятор

Очки-монитор
Дополнительные
устройства и аксессуары
удовлетворят различных
пользователей
tWEEt-манипулятор

12

Основные возможности
tWEEt-технологии:











tWEEt-технология позволяет управлять и вводить символы во
всевозможные мобильные устройства различного назначения.
Возможность работы в полевых условиях и нестандартных
ситуациях (совмещение с другой работой, скрытность и т.д.).
Работа с текстом в различных условиях: от маленьких
экранов до больших настенных экранов.
Модульность.
Небольшая стоимость SW & HW и экономные требования к
ресурсам (процессор, память).
Совместимость с MS-мышью и клавиатурой – совместимость
со всеми стандартными программами.
Фразеологическая клавиатура и работа с мобильной базой
данных.
Управление 3D-объектами и навигация в 3D-пространстве.
Функции универсального пульта дистанционного управления
любыми устройствами и приборами.
13

Повод для бизнеса:

модульный продукт, позволяющий занять
лидирующую позицию на рынке PDA & IA
Внедрение tWEEt-клавиатуры и tWEEt-манипулятора,
позволяют:
Выделить

значительно упростить разработку и
интерфейсный модуль как
стоимость нового поколения мобильных
отдельный продукт
компьютеров и информационных
устройств (Information Appliance)

Модуль
tWEEt-интерфейса
Системные
модули


Функции универсального пульта дистанционного управления любыми
устройствами и приборами.
14

В чем бизнес:

унифицированные модули интерфейса для PDA & IA
унифицированные системные модули для PDA & IA




Модули пользовательского
1
2
tWEEt-интерфейса состоят из
персональных средств –
tWEEt-манипулятора (1) и
Модуль
визуализации (2), чип
tWEEt-интерфейса
сопряжения (3)
Чип
3
Потребность в таких модулях
сопряжения
соизмерима с количеством
пользователей
Чип
Для упрощенных системных
4
сопряжения
модулей потребуются чипы
сопряжения (4) с модулями
Системные
пользовательского интерфейса
модули
Потребность в таких чипов
соизмерима с количеством
PDA & IA

15

Изменение структуры корпораций:
мобильный виртуальный офис –
стратегическое направление по выходу
корпораций из кризиса
Выход из кризиса - многоцелевая корпорация
Э. Тофлер
Сетевой Spread Sheet – Epsilon Tech.

Эксперт
1

Мобильный офис (МО) – IBM

Эксперт
2
Эксперт
3

Мобильная
интеллектуальная группа

Мобильный офис от IBM

Мобильное интеллектуальное
предприятие ("agile" intelligence
enterprise) –
“Intelligence Community"
16

В чем бизнес:

аппаратные базовые модули поддержки
функций мобильного виртуального офиса

Одновременный доступ
нескольких пользователей
к операционной среде

Совместная работа по принципу
“подключение - отключение”

OC

5

Чипы
персональных
интерфейсов

17


Slide 16

Мобильный интерфейс
Ввод текста и управление
мобильными компьютерами
и информационными
устройствами

Проблема:
Многообразие мобильных устройств
порождает множество пользовательских интерфейсов

4. Речь
3. Слух

1. Зрение
2. Действие

Разные интерфейсы – проблема для пользователей.
Значительная часть стоимости устройства - интерфейс.
2

Постановка задачи:
каким будет пользовательский интерфейс для
широкого спектра устройств?

Нужен понятный
интерфейс

Нужен единый
эргономичный
интерфейс

Нужен
простой
интерфейс

3

Базовые условия:
для работы с информационными ресурсами
нужно видеть информацию и управлять ею
Восприятие

Управление
Восприятие:
человек имеет качественное
зрение – более 90% восприятия.
Управление:
самый точный инструмент –
человеческая рука и пальцы.

Неважно где находится
системный блок,
лишь бы он не был помехой.

4

Предпосылки решения задачи:
области визуальной и сенсомоторной “фовеа”
связаны в единую эргономическую систему
Зона визуального восприятия ~ 20 - 45 °

Видео

Визуальная зона фовеа: ~ 2 - 3 °

“Мануальная” зона фовеа: ~ 1.5 - 2.0 cm

Действие

Палец более точен
чем кисть руки

Мануальная зона действия ~ 15 - 25 cm

Размеры экрана, клавиатуры и манипулятора определены размером
мобильного устройства.

Пальце-глаз переводит форм-фактор устройства от 10-15 cm. до 1.5-2.0 cm.
5

Решение проблемы:
концепция “пальце-глаза” основана на
визуально-моторной обратной связи

Область действия:
• 2D плоскость
действия,
• перемещение &
клик,
• произвольное
положение
манипулятора.

Радиальный
угол

Угол зрения:
• радиальный угол
• любое направление
• любое расстояние
Визуально-моторная
обратная связь

Фиксированное пространство

След
курсора

Размер экранов:
от “Пальма”до
“Стены”
tWEEt-манипулятор

“Пальце-глаз” – практическая метафора вездесущего пальца, который может
кликать везде от маленького экрана на “Пальме” до экрана на стене или в
виртуальной реальности.
6

tWEEt-клавиатура - идея:
два состояния виртуальной клавиатуры,
структура и иерархия
Выбор объекта

Работа с объектом

A. Обычный курсор мыши

Б. Виртуальная клавиатура
Активная
позиция

Активная
позиция

tWEEtклавиатура

Курсор
мыши

Указатель
символов

Переключение между
курсором и виртуальной
клавиатурой

Символьная ВК
Функциональная ВК
Фразеологическая ВК
3-D ВК

Множество tWEEt-клавиатур

...
7

tWEEt-клавиатура - реализация:
виртуальная клавиатура связана с
позицией ввода текста и следует за ней
Решение для мобильных, носимых компьютеров с качественными дисплеями
(размера книги, пальма, монитора в очках и настенных экранов)

Текстовый
редактор

Указатель
символов

Позиция
ввода

Виртуальная
клавиатура

Взаимное положение tWEEt-клавиатуры и
активной рабочей позицией стабильно.
• Оператор кликает мышиным курсором в
позицию текстового ввода.
• Мышиный курсор трансформируется в
виртуальную клавиатуру и привязывается к
позиции текстового ввода.
• Оператор перемещает указатель символов на
виртуальной клавиатуре и кликает мышью на
выбранном символе. В результате посылается
код данного символа в канал текстового ввода.
• Виртуальная клавиатура перемещается вслед на
позицией текстового ввода.

8

tWEEt-клавиатура - реализация:
виртуальная клавиатура появляется в
активной позиции ввода текста

Ввод имени иконки

Ввод имени файла
9

tWEEt-клавиатура – другие возможности:
виртуальная клавиатура в роли
фразеологической клавиатуры и базы данных
Виртуальная фразеологическая клавиатура:
опорные сигналы + ассоциативные цепочки из текстовых сообщений.

Y

Ключевые
слова
Name 1

1234567

[email protected]

#12

Name 2

2345671

[email protected]

Ассоциативные цепочки

Name 3

3456712

Name 4

4567123

[email protected]

#23

Name 5

5671234

X

2D - навигация (X, Y)
Общий вид

10

Конкуренты - световая клавиатура:
сравнение с tWEEt-технологией

Проекция изображения на поверхность

“Пальце-глаз”

Тест: ввод текста во
время хождения

Компании: Canesta и VKB

Свойства световой клавиатуры:
• нужна светлая поверхность ВК
• для света нужно много энергии
• для полноценного управления
нужна еще мышь
• занимает две руки
Световая клавиатура не годится
для мобильного ввода текста !
11

Пример реализации мобильного интерфейса
для смартфонов нового поколения

Основной и
дополнительный монитор

Концепт модель
от Ericsson

Кабель или “BlueTooth”

Основной и
дополнительный
манипулятор

Очки-монитор
Дополнительные
устройства и аксессуары
удовлетворят различных
пользователей
tWEEt-манипулятор

12

Основные возможности
tWEEt-технологии:











tWEEt-технология позволяет управлять и вводить символы во
всевозможные мобильные устройства различного назначения.
Возможность работы в полевых условиях и нестандартных
ситуациях (совмещение с другой работой, скрытность и т.д.).
Работа с текстом в различных условиях: от маленьких
экранов до больших настенных экранов.
Модульность.
Небольшая стоимость SW & HW и экономные требования к
ресурсам (процессор, память).
Совместимость с MS-мышью и клавиатурой – совместимость
со всеми стандартными программами.
Фразеологическая клавиатура и работа с мобильной базой
данных.
Управление 3D-объектами и навигация в 3D-пространстве.
Функции универсального пульта дистанционного управления
любыми устройствами и приборами.
13

Повод для бизнеса:

модульный продукт, позволяющий занять
лидирующую позицию на рынке PDA & IA
Внедрение tWEEt-клавиатуры и tWEEt-манипулятора,
позволяют:
Выделить

значительно упростить разработку и
интерфейсный модуль как
стоимость нового поколения мобильных
отдельный продукт
компьютеров и информационных
устройств (Information Appliance)

Модуль
tWEEt-интерфейса
Системные
модули


Функции универсального пульта дистанционного управления любыми
устройствами и приборами.
14

В чем бизнес:

унифицированные модули интерфейса для PDA & IA
унифицированные системные модули для PDA & IA




Модули пользовательского
1
2
tWEEt-интерфейса состоят из
персональных средств –
tWEEt-манипулятора (1) и
Модуль
визуализации (2), чип
tWEEt-интерфейса
сопряжения (3)
Чип
3
Потребность в таких модулях
сопряжения
соизмерима с количеством
пользователей
Чип
Для упрощенных системных
4
сопряжения
модулей потребуются чипы
сопряжения (4) с модулями
Системные
пользовательского интерфейса
модули
Потребность в таких чипов
соизмерима с количеством
PDA & IA

15

Изменение структуры корпораций:
мобильный виртуальный офис –
стратегическое направление по выходу
корпораций из кризиса
Выход из кризиса - многоцелевая корпорация
Э. Тофлер
Сетевой Spread Sheet – Epsilon Tech.

Эксперт
1

Мобильный офис (МО) – IBM

Эксперт
2
Эксперт
3

Мобильная
интеллектуальная группа

Мобильный офис от IBM

Мобильное интеллектуальное
предприятие ("agile" intelligence
enterprise) –
“Intelligence Community"
16

В чем бизнес:

аппаратные базовые модули поддержки
функций мобильного виртуального офиса

Одновременный доступ
нескольких пользователей
к операционной среде

Совместная работа по принципу
“подключение - отключение”

OC

5

Чипы
персональных
интерфейсов

17


Slide 17

Мобильный интерфейс
Ввод текста и управление
мобильными компьютерами
и информационными
устройствами

Проблема:
Многообразие мобильных устройств
порождает множество пользовательских интерфейсов

4. Речь
3. Слух

1. Зрение
2. Действие

Разные интерфейсы – проблема для пользователей.
Значительная часть стоимости устройства - интерфейс.
2

Постановка задачи:
каким будет пользовательский интерфейс для
широкого спектра устройств?

Нужен понятный
интерфейс

Нужен единый
эргономичный
интерфейс

Нужен
простой
интерфейс

3

Базовые условия:
для работы с информационными ресурсами
нужно видеть информацию и управлять ею
Восприятие

Управление
Восприятие:
человек имеет качественное
зрение – более 90% восприятия.
Управление:
самый точный инструмент –
человеческая рука и пальцы.

Неважно где находится
системный блок,
лишь бы он не был помехой.

4

Предпосылки решения задачи:
области визуальной и сенсомоторной “фовеа”
связаны в единую эргономическую систему
Зона визуального восприятия ~ 20 - 45 °

Видео

Визуальная зона фовеа: ~ 2 - 3 °

“Мануальная” зона фовеа: ~ 1.5 - 2.0 cm

Действие

Палец более точен
чем кисть руки

Мануальная зона действия ~ 15 - 25 cm

Размеры экрана, клавиатуры и манипулятора определены размером
мобильного устройства.

Пальце-глаз переводит форм-фактор устройства от 10-15 cm. до 1.5-2.0 cm.
5

Решение проблемы:
концепция “пальце-глаза” основана на
визуально-моторной обратной связи

Область действия:
• 2D плоскость
действия,
• перемещение &
клик,
• произвольное
положение
манипулятора.

Радиальный
угол

Угол зрения:
• радиальный угол
• любое направление
• любое расстояние
Визуально-моторная
обратная связь

Фиксированное пространство

След
курсора

Размер экранов:
от “Пальма”до
“Стены”
tWEEt-манипулятор

“Пальце-глаз” – практическая метафора вездесущего пальца, который может
кликать везде от маленького экрана на “Пальме” до экрана на стене или в
виртуальной реальности.
6

tWEEt-клавиатура - идея:
два состояния виртуальной клавиатуры,
структура и иерархия
Выбор объекта

Работа с объектом

A. Обычный курсор мыши

Б. Виртуальная клавиатура
Активная
позиция

Активная
позиция

tWEEtклавиатура

Курсор
мыши

Указатель
символов

Переключение между
курсором и виртуальной
клавиатурой

Символьная ВК
Функциональная ВК
Фразеологическая ВК
3-D ВК

Множество tWEEt-клавиатур

...
7

tWEEt-клавиатура - реализация:
виртуальная клавиатура связана с
позицией ввода текста и следует за ней
Решение для мобильных, носимых компьютеров с качественными дисплеями
(размера книги, пальма, монитора в очках и настенных экранов)

Текстовый
редактор

Указатель
символов

Позиция
ввода

Виртуальная
клавиатура

Взаимное положение tWEEt-клавиатуры и
активной рабочей позицией стабильно.
• Оператор кликает мышиным курсором в
позицию текстового ввода.
• Мышиный курсор трансформируется в
виртуальную клавиатуру и привязывается к
позиции текстового ввода.
• Оператор перемещает указатель символов на
виртуальной клавиатуре и кликает мышью на
выбранном символе. В результате посылается
код данного символа в канал текстового ввода.
• Виртуальная клавиатура перемещается вслед на
позицией текстового ввода.

8

tWEEt-клавиатура - реализация:
виртуальная клавиатура появляется в
активной позиции ввода текста

Ввод имени иконки

Ввод имени файла
9

tWEEt-клавиатура – другие возможности:
виртуальная клавиатура в роли
фразеологической клавиатуры и базы данных
Виртуальная фразеологическая клавиатура:
опорные сигналы + ассоциативные цепочки из текстовых сообщений.

Y

Ключевые
слова
Name 1

1234567

[email protected]

#12

Name 2

2345671

[email protected]

Ассоциативные цепочки

Name 3

3456712

Name 4

4567123

[email protected]

#23

Name 5

5671234

X

2D - навигация (X, Y)
Общий вид

10

Конкуренты - световая клавиатура:
сравнение с tWEEt-технологией

Проекция изображения на поверхность

“Пальце-глаз”

Тест: ввод текста во
время хождения

Компании: Canesta и VKB

Свойства световой клавиатуры:
• нужна светлая поверхность ВК
• для света нужно много энергии
• для полноценного управления
нужна еще мышь
• занимает две руки
Световая клавиатура не годится
для мобильного ввода текста !
11

Пример реализации мобильного интерфейса
для смартфонов нового поколения

Основной и
дополнительный монитор

Концепт модель
от Ericsson

Кабель или “BlueTooth”

Основной и
дополнительный
манипулятор

Очки-монитор
Дополнительные
устройства и аксессуары
удовлетворят различных
пользователей
tWEEt-манипулятор

12

Основные возможности
tWEEt-технологии:











tWEEt-технология позволяет управлять и вводить символы во
всевозможные мобильные устройства различного назначения.
Возможность работы в полевых условиях и нестандартных
ситуациях (совмещение с другой работой, скрытность и т.д.).
Работа с текстом в различных условиях: от маленьких
экранов до больших настенных экранов.
Модульность.
Небольшая стоимость SW & HW и экономные требования к
ресурсам (процессор, память).
Совместимость с MS-мышью и клавиатурой – совместимость
со всеми стандартными программами.
Фразеологическая клавиатура и работа с мобильной базой
данных.
Управление 3D-объектами и навигация в 3D-пространстве.
Функции универсального пульта дистанционного управления
любыми устройствами и приборами.
13

Повод для бизнеса:

модульный продукт, позволяющий занять
лидирующую позицию на рынке PDA & IA
Внедрение tWEEt-клавиатуры и tWEEt-манипулятора,
позволяют:
Выделить

значительно упростить разработку и
интерфейсный модуль как
стоимость нового поколения мобильных
отдельный продукт
компьютеров и информационных
устройств (Information Appliance)

Модуль
tWEEt-интерфейса
Системные
модули


Функции универсального пульта дистанционного управления любыми
устройствами и приборами.
14

В чем бизнес:

унифицированные модули интерфейса для PDA & IA
унифицированные системные модули для PDA & IA




Модули пользовательского
1
2
tWEEt-интерфейса состоят из
персональных средств –
tWEEt-манипулятора (1) и
Модуль
визуализации (2), чип
tWEEt-интерфейса
сопряжения (3)
Чип
3
Потребность в таких модулях
сопряжения
соизмерима с количеством
пользователей
Чип
Для упрощенных системных
4
сопряжения
модулей потребуются чипы
сопряжения (4) с модулями
Системные
пользовательского интерфейса
модули
Потребность в таких чипов
соизмерима с количеством
PDA & IA

15

Изменение структуры корпораций:
мобильный виртуальный офис –
стратегическое направление по выходу
корпораций из кризиса
Выход из кризиса - многоцелевая корпорация
Э. Тофлер
Сетевой Spread Sheet – Epsilon Tech.

Эксперт
1

Мобильный офис (МО) – IBM

Эксперт
2
Эксперт
3

Мобильная
интеллектуальная группа

Мобильный офис от IBM

Мобильное интеллектуальное
предприятие ("agile" intelligence
enterprise) –
“Intelligence Community"
16

В чем бизнес:

аппаратные базовые модули поддержки
функций мобильного виртуального офиса

Одновременный доступ
нескольких пользователей
к операционной среде

Совместная работа по принципу
“подключение - отключение”

OC

5

Чипы
персональных
интерфейсов

17