CSK6 大模型开发套件可以对用户的语音输入进行准确的单词识别,并对单词的发音、错读、漏读、多读等方面进行评估,进行音素级的识别,根据用户的发音给出相应的建议和纠正,帮助用户更好地掌握单词的发音。
离线单词评测 算法具备以下特性:
视觉语音大模型AI开发套件SDK 配套了离线单词评测这一示例工程,文本将对本示例工程进行说明。
单词评测的示例包含在 语音视觉大模型开发板 SDK 的 apps
目录下,工程目录名称为 lcd_csps
。
请参照《获取开发环境与SDK》进行大模型AI开发套件SDK的下载与初始化,若您之前已经操作过,可忽略本步骤。
建议您在开发前,参照《本地SDK更新》将SDK更新至最新版本。
在 duomotai_ap
目录下,执行以下指令进行代码编译(以 Windows CMD 终端为例):
lisa zep build -b csk6_duomotai_devkit apps\lcd_csps\ -p
编译完成后,编译产物二进制文件为 build\zephyr\zephyr.bin
使用 Type-C 数据线连接开发套件的 DAP_USB
接口,执行以下命令进行烧录:
lisa zep exec cskburn -s \\.\COMxx -C 6 -b 1500000 0x000000 --verify-all .\build\zephyr\zephyr.bin
或
lisa zep flash -r pyocd --frequency 20000000
其中的 COMx 代表开发套件连接到 PC 上对应的串口号(可通过设备管理器查看)。例如:COM3
。
lisa zep exec cskburn -s PORT -C 6 0x000000 --verify-all ./build/zephyr/zephyr.bin -b 1500000
其中的 PORT 代表开发套件连接到 PC 上对应的串口号。例如:/dev/ttyUSB0
。
烧录完成后,程序将自动运行,你也可以通过按压开发板上的复位按键(RTS)进行复位运行。
1.固件运行后,可以在显示屏上看到 单词评测 的图标,点击图标即可进入单词评测应用:
2.目前固件提供了三种单词
、短语
、句子
评测模式,点击对应选项课进入对应的模式:
3.以单词
评测为例,进入该模式后,固件将给出若干个英文单词,可点击右下角评测
按钮进行评测:
4.对着开发套件读出单词后,点击右下角图标结束评测,固件将给出此次评测的结果: