​​聆思CSK6大模型语音视觉开发板接入AIUI技能实操(控制风扇开关)

💡 原文中文,约4700字,阅读约需11分钟。
📝

内容提要

本文以大模型语音控制灯的开关为例,介绍了如何通过LSPlatform的云端编排功能加入AIUI技能,实现更丰富的产品功能。文章详细讲解了硬件准备、连接方式和代码修改步骤。同时,还解释了大模型语音接入AIUI实现风扇控制功能的云端配置和开发板对接LSPlatform云端应用绑定的步骤。

🎯

关键要点

  • 本文以大模型语音控制灯的开关为例,介绍如何通过LSPlatform的云端编排功能加入AIUI技能。
  • 硬件准备包括聆思CSK6大模型开发板和风扇,注意开发板引脚电压电流有限,风扇需单独供电。
  • 连接方式为从续流二极管引出导线接GND和GPIO接口,模拟风扇开关。
  • 开发环境部署和SDK工程拉取需参考聆思文档中心,代码修改涉及GPIO引脚和控制逻辑。
  • 编译和烧录固件的步骤包括使用Windows PowerShell进行编译和烧录命令。
  • 大模型语音接入AIUI实现风扇控制功能的云端配置需创建新应用并导入示例工程文件。
  • 示例工程实现图生文、文生图、风扇控制等功能,流程包括历史对话判断和意图分类。
  • 关键节点讲解包括语义改写、分类提示词和落域结果判断,提升用户问题处理效果。
  • 开发板对接LSPlatform云端应用需创建产品并绑定云端应用和设备ID。
  • 设备ID是唯一标识,需在设备管理页面导入以实现端云交互,配置完成后可进行大模型语音交互。
➡️

继续阅读