音频和显示眼镜可提供用户与环境互动的第一人称和多模态视角。结合语音输入和硬件传感器,这有可能为您的应用提供前所未有的上下文信息。如需在应用中利用此上下文,您可以使用应用内智能体,并将这些多模态输入路由到 LLM。您的应用可以利用 Gemini Live API 或集成自定义 AI 智能体。
以负责任的方式使用 AI
从感官、认知、社交和 AI 舒适度等各个方面,为用户打造舒适体验。
设计应用时,请遵循“征得同意优先”原则:
- 不要以为应用打开了就可以录制。
- 在激活传感器之前,请使用明确的触发器(例如身体手势)。
- 如果代理认为活动需要,请让其请求开启摄像头。
- 仅收集提供价值所需的最少数据,处理这些数据,然后将其舍弃。
智能体设计注意事项
对于音频和显示眼镜,AI 功能提供了一种高效的方式来完成文字转语音和图像识别等任务。AI 支持通过自然语言进行交互,而不是静态树。
AI 可以通过自然的音频提示和微妙的视觉效果,帮助您更自然地在手机和眼镜之间完成任务。
在应用中集成代理时,请考虑以下事项:
- Voice and tone
- 用户在日常生活中的情境
- 用户安全
- 不要让用户感到无所适从
- 设计社交舒适度
AI 智能体应遵循对话式用户体验最佳实践和 AI 模式,做到简洁且不打扰用户