前言
该上手流程为通用流程,有大模型使用经验的用户,按照本文提供的资料即可进行大模型+AI智能语音交互硬件的相关实操。方案支持提示词优化、接入私有服务和其他大模型,建议在完成上手实操熟悉相关功能后再进行其他二次开发。
上手准备
1、聆思平台功能介绍:https://docs2.listenai.com/x/WqRCmE3dA
2、 创建平台账号和密钥:https://docs2.listenai.com/x/fZw6AJhn-
3、 了解聆思CSK6大模型开发板:https://b23.tv/0Fk5PyC
自建流程实操
1、把出厂示例连接的大模型改为自建的大模型应用:https://docs2.listenai.com/x/jSfMqbsH_
2、创建可编排流程模板:https://docs2.listenai.com/x/jSfMqbsH_
自建知识库
1、构建大模型知识库:https://docs2.listenai.com/x/JdL8tHI4k
2、知识库文档规范说明:https://docs2.listenai.com/x/SL3Ako5an
实操CSK6大模型语音开发板对接RAG知识库
1、 实操讲解视频: https://b23.tv/IlAzyOu
2、 知识库对接大模型开发板:https://blog.51cto.com/u_15947017/12118295
3、知识库排错流程参考:https://blog.51cto.com/u_15947017/12129427
实操大模型语音控制外设
1、 实操解说视频: https://b23.tv/VMGjKGu
2、 大模型控制GPIO示例-灯控:https://docs2.listenai.com/x/6TmcIYS1T
3、大模型开发板串口通讯示例-串口屏同步显示:https://blog.51cto.com/u_15947017/12822271
其他进阶资料
大模型超拟人语音交互示例开发:https://docs2.listenai.com/x/6SuptkFAr
支持的外设和服务:https://docs2.listenai.com/x/gobGZJTYE
接入第三方大模型
接入主流大模型的视频讲解教程:https://b23.tv/ml6XGR3
豆包:https://blog.51cto.com/u_15947017/11981837
KIMI:https://blog.51cto.com/u_15947017/11917172
智谱清言chatglm:https://blog.51cto.com/u_15947017/11981851
百度文心一言:https://blog.51cto.com/u_15947017/11917150
以上即为当前可直接实操上手的大模型+AI智能语音交互硬件方案的资料,如有更多落地需求和问题可以留言,合适的需求我们会放入后续版本迭代实现。
实操使用的CSK6大模型语音开发板硬件信息和设计资料都已公开,有想做详细了解的可以参考这个文档:https://docs2.listenai.com/x/nTn9kMMCU