本示例将在大模型套件上展示如何使用开发板和超拟人大模型进行语音交互,支持单轮和多轮交互。
应用图标:
本示例主要功能:
开发套件默认出厂 TF 卡中已包含本应用,可直接进行功能体验。
若您需要下载单独的应用示例固件,请参照本示例的 《固件下载与烧录》进行操作。
在运行本应用前,进行以下硬件准备:
部分电脑 USB 接口可能供电不足,若上电后运行异常,请尝试使用单独的电源适配器进行供电或同时使用开发套件上两个 USB 接口进行供电。
程序首页下滑进入菜单,点击设置
按钮跳转到交互模式设置页
选择以下其中一种方式完成配网:
最新版固件支持UI配网,如果您通过 TF 卡加载本应用,可参照《应用合集TF卡》更新 TF 卡内的应用镜像,以获取本应用的最新版本。
如果您不是通过 TF 卡加载本应用,请参照本示例的 《固件下载与烧录》进行最新固件的下载烧录。
点击网络
标签,滑动WiFi列表,选择想要连接的wifi,输入密码:
点击右下角 √
按键即可回到待机页面,此时右上角 WIFI 图标已正常,表示当前设备已处于联网状态。
注意:目前仅支持 2.4G 频段的 WIFI 网络接入,请选择 2.4G网络
注意:使用 iPhone 的个人热点
为开发板提供网络时,请启用手机配置中的【最大兼容性】
注意:部分路由器网络存在安全策略限制、不稳定等因素,出现联网故障时建议改用 2.4G 频段的手机热点进行尝试
使用手机扫描屏幕上的二维码,进入WIFI 账号密码配置生成页:
在弹出的网页中填写 WIFI 的账号与密码,并点击生成按钮,生成二维码:
生成二维码后,点击开发套件触摸屏上的已扫描二维码
按钮,将摄像头对准手机屏幕上的 WIFI 二维码,完成配网:
配网完成后,点击左上角 Home
按键即可回到待机页面,此时右上角 WIFI 图标已正常,表示当前设备已处于联网状态。
若你配置网络遇到异常,可参照以下指引进行排查:
1.目前仅支持 2.4G 频段的 WIFI 网络接入,请选择 2.4G网络
2.使用 iPhone 的个人热点
为开发板提供网络时,请启用手机配置中的【最大兼容性】
3.部分路由器网络存在安全策略限制、不稳定等因素,出现联网故障时建议改用 2.4G 频段的手机热点进行尝试
本示例支持三种交互方式,其特点如下:
模式 | 唤醒方式 | 交互方式 |
---|---|---|
按键交互 | 按下屏幕麦克风图标或开发板K3按键 | 按住按键说话,松开提交 |
语音唤醒(单轮) | 唤醒词 “小美小美” |
听到提示音 “在呢” 后进行提问,每次提问均需要唤醒 |
语音唤醒(多轮) | 唤醒词 “小美小美” |
听到提示音 “在呢” 后进行提问,可持续对话,当超过20秒无语音输入时自动结束本次交互 |
本示例的唤醒词 (小美小美) 暂不支持用户自定义替换,若有具体业务项目的定制需求,请扫描开发套件背面二维码联系小助手。
在待机页面,下滑可调出下滑菜单,点击下滑菜单中的 设置
图标,可进行配置页面:
选中对应的模式后,点击左上角即可回到待机页面并生效。
设置成按键交互(按键唤醒)
模式下,按住屏幕上的麦克风按钮
或开发板上的K3
按键,即进入录音状态,松开按键则结束录音并提交。
当设置为语音唤醒(单轮)
或语音唤醒(多轮)
时,可通过唤醒词 —— “小美小美” 对设备进行唤醒,当听到 “在呢” 的提示音后,即可正常进行语音输入。
在应用首页下滑可调出设置菜单,通过滑动音量条可进行回复音量的调整。