Аудио- и видеоочки предоставляют уникальную возможность для нового взаимодействия, сочетая в себе новый, высококонтекстуальный и персональный форм-фактор с развивающимися моделями ИИ. У вас есть доступ к аппаратным компонентам и функциям устройства, включая камеру, микрофон и сенсорную панель. Это позволяет изучать новые модели взаимодействия между ИИ, вашим приложением и очками, не забывая о комфорте и безопасности пользователей.
Аудио- и видеоочки позволяют пользователям видеть и слышать ИИ-функции. При разработке таких функций используйте шаблоны, которые представляют ИИ как помощника с наглядными визуальными элементами.
Естественный разговор
ИИ-модели позволяют вести непрерывный диалог на естественном языке, а не просто передавать короткие сообщения или использовать статичные деревья диалогов. Отдавайте приоритет продолжительным и полезным разговорам с агентами, а не коротким сеансам.
Пауза и остановка воспроизведения
Позвольте пользователю сделать перерыв и прервать разговор или задачу. Это может быть физическое прикосновение, жест или устное взаимодействие. Ваш агент может продолжать прислушиваться к дополнительным сигналам взаимодействия и установить индивидуальный шаблон, чтобы продолжать учиться у пользователя. Пользователи могут выйти из сеанса, проведя назад по аудиоочкам или вниз по видеоочкам.
Мультимодальные
Очки могут использовать несколько аппаратных функций вместе с ИИ, чтобы предоставлять более широкие возможности. Например, вы можете использовать камеру для контекстной помощи, разрешив пользователю активировать камеру во время разговора, чтобы понять окружающий мир.
Не держите камеру включенной, так как это влияет на производительность батареи. Вместо этого разрешите пользователю активировать камеру для дополнительного ввода.
Внимательность к окружающей среде
При необходимости ИИ может предоставить дополнительную информацию или повторить ответ. Если у устройства есть экран, вы можете показывать на нем визуальные элементы, которые дополняют аудиоответ. Пользователь должен иметь возможность сосредоточиться на реальном мире, получая информацию в удобном и понятном виде.
