资讯详情

资讯详情

建站行业动态 · 设计趋势 · 数字化升级干货

免费开源桌面智能小助手(类Agent)开发指南

免费开源桌面智能小助手(类Agent)开发指南 一、安装软件文件解压缩找到exe文件双击运行绿色软件免安装软件启动后显示设置页面可以看到需要配置名称3D数字人应用ID、应用密钥DeepSeek大预言模型API Key信息。名称根据个人喜好输入即可3D数字人应用ID、应用密钥见第二节内容DeepSeek大语言模型API Key见第三节内容二、3D数字人配置注册魔珐星云账户https://xingyun3d.com/点击右上角登录/注册按钮进入注册流程。图1 魔珐星云网站首页在注册页面勾选同意按钮选择其它登录方式输入手机号、验证码及邀请码XDBAC5Q6KM注册使用此内测邀请码可得2000分钟免费体验权加上本身新用户注册赠送的200分钟体验时长合计2200分钟免费时长。图2 注册页面登录后进入具身驱动页面选择个人喜欢的数字人形象然后点击创建同款应用。图3 具身驱动页面在设置页输入应用信息点击创建并进入调试即可。图4 应用设置页面创建成功后点击场景选择形象背景我们这里选择透明“背景-全身”音色、表演等功能按照个人喜好设置即可人物配置设置完成后点击右上角的预览效果查看数字人实际呈现效果。图5 人物设置页面图6 人物预览效果确认人物语音播放正常点击右上角“接入SDK”按钮记录App ID、App Secret信息这两段信息就是调用此数字人的钥匙做好保存一会我们把它们复制到软件设置页面的对应位置。图7 魔珐星云数字人应用ID及密钥三、DeepSeek账号注册注册DeepSeek账户https://www.deepseek.com点击API开放平台进行注册。图8 DeepSeek首页图图9 DeepSeek注册页面登录后点击左侧充值页面DeepSeek作为最具性价比的国内大语言模型为智能助手充值10元足够你用一年了感谢梁圣图10 DeepSeek充值页面账户充值完毕后点击左侧的API Keys按钮点击创建API Key输入名称比如“桌面智能小助手”点击创建此时弹出API key该串字符就是外部调用DeepSeek大模型对话的钥匙此页面仅显示一次点击复制后做好留存一会我们把它们复制到软件设置页面的对应位置。图11 DeepSeek创建API Key页面四、配置桌面智能小助手双击打开软件软件启动后显示设置页面可以看到需要配置名称3D数字人应用ID、应用密钥DeepSeek大预言模型API Key信息。名称根据个人喜好输入即可3D数字人应用ID、应用密钥输入魔珐星云创建应用的ID和密钥DeepSeek大预言模型API Key输入DeepSeek API Key点击右下角的保存及校验按钮稍等片刻后确认校验无误则配置成功此时小助手将成功渲染到桌面。图12 桌面小助手运行图五、开发介绍1.具备功能人物支持桌面内随意拖拽点击人物身体听到“滴”提示音开启语音对话初次对话需要几秒钟加载语音识别模型默认接入DeepSeek大模式快速响应人物口型、表情、动作及情绪等和对话内容高度统一情绪价值拉满文件包含所有工程文件支持二次开发优化离线语音识别模型高隐私性、响应快配置VAD语音活动检测功能准确识别人声开始及结束2.软件整体结构级联链路ASRLLMTTS采用OpenAI开源的whisper语音识别模型ASR识别用户说话并转化为文字送至LLM采用DeepSeek国内最高性价比大语言模型LLM处理ASR转化的文字并输出反馈至TTS采用魔珐星云3D数字人自带语音合成模型TTS将LLM反馈的文本合成带语气、语调的音频播放给用户。3.二次开发方向升级ASR当前采用的whisper体积小便携性高但是参数也小语音识别准确率并不是最优的不考虑软件体积情况下可以考虑升级参数更高的ASR模型。可以考虑原生Realtime Speech-to-Speech方法取消本地离线ASR缺点识别准确率不高直接调用多模态大模型用户输入音频至大模型大模型反馈文本至魔珐星云输出。增加唤醒词检测如“Hey 宝贝”比点击人物体验感更好。增加功能性偏向Agent通过语音对话让其帮忙设置定时任务操作电脑增删文件等等…

相关资讯