1. 产品简介

1.1 背景介绍

本项目是面向汽车行业B端客户的大模型能力展示Demo，旨在通过智能车机交互场景，全方位展现模型在车载场景的优越性能与商业价值。

1.2 核心功能

功能主要包括基础语义理解及增强，端侧语义支持：车控、导航、音乐、电话、全局垂域的全意图。

注本车机助手Demo是面向汽车行业B端客户的，所以实际用户并不是车主，使用场景也不是驾驶环境。因此，不必按照实际车机产品进行设计（例如实际车机产品触摸区域需要大一些；布局需要考虑驾驶员位置靠左等）

2. 语音助手核心交互

2.1 核心交互流程

其中：中断关闭的意思是关闭的优先级是最高的，无论是处于唤醒、思考还是执行指令状态，用户下达关闭指令后关闭立刻停止交互。

2.2 整体界面

理想同学的设计参见：解锁理想汽车 AI 密码：革新智能座舱，引领驾驶未来

使用理想同学的设计会存在一些问题： 1. 理想同学是根据实际驾驶场景设计的，所以考虑用户在使用导航、影音等功能的时候唤醒。所以理想同学采用在原有界面上悬浮弹出的交互方式。而我们的Demo并不会有App跳转流程，也不会真实地调用软件的API。 2. 理想同学还有Chatbot模式，流式输出文本较多。而我们的Demo功能主要集中在车控部分，交互以图片为主，文字较少。

本Demo的整体界面如下图所示：

1.左侧为车况显示界面，固定不变。

2.右侧为语音助手交互部分，主要包括聊天内容、状态反馈两个区域。

交互内容：（输入源于用户，输出源于模型，需进行前后端联调，具体内容待定）。该区域主要包括语音助手拟人形象以及交互的内容（流式文本展示）；
状态反馈：初始化不显示该区域，在用户输入某些指令后出现。该区域内容与对话内容所在场景对应，例如用户说“查一下天气”，则出现状态反馈区域，显示对应的卡片；
唤醒按钮：点击音助手拟人形象即可实现唤醒。

3.底部为车内高频使用的控制功能按键（对应着以前车内的实体按键）。

2.3 形象

语音助手在不同状态下应具备不同形象：

其他参考：三星语音助手形象

2.4 唤醒

唤醒主要有两种方案：

1.（首选）用户通过点击唤醒按钮进行唤醒。

2. 通过特定语音唤醒。

唤醒后语音助手切换对应的形象，并在聊天内容显示特定的交互提示词，引导用户进行进一步语音指令的输入。

2.5 等待

等待模型输出时，语音助手需切换对应的形象，体现出“思考中”的状态。

2.6 关闭

2.6.1 交互内容关闭

关闭的优先级是最高的，无论是处于唤醒、思考还是执行指令状态，用户下达关闭指令后关闭立刻停止交互。

关闭同时使用以下两种方案：

1. 点击拟人形象关闭。

2. 在交互内容区域添加特定的关闭按钮。

2.6.2 状态反馈关闭

关闭主要有两种方案：

1. 滑动状态反馈区域弹出的卡片关闭。

2. 在状态反馈区域添加特定的关闭按钮。

3. 功能模块详细交互

功能模块主要针对车控、音乐、电话、导航、全局五个方面进行设计，在Demo中只选取核心的功能点进行展示

小米澎湃智能座舱的车模交互非常亮眼。但是由于开发难度较大，成本较高，所以当前版本的车机demo不采用车模方案进行交互。

3.1 车控功能

展示功能点列表：

大意图	功能描述
空调类	打开空调
空调类	关闭空调
车窗类	打开<位置>车窗
灯光类	打开氛围灯
灯光类	关闭氛围灯
座椅类	打开座椅通风
座椅类	关闭座椅通风
背门类	打开背门
背门类	关闭背门