GPT-SoVITS教程,接入酒馆AI,SillyTavern-1.11.5,让AI女友声若幽兰

GPT-SoVITS教程,接入酒馆AI,SillyTavern-1.11.5,让AI女友声若幽兰

💡 原文中文,约3900字,阅读约需10分钟。
📝

内容提要

本文介绍了将GPT-SoVITS接入SillyTavern-1.11.5项目的步骤,包括部署SillyTavern、Koboldcpp和GPT-SoVITS。SillyTavern是一个前端项目,需要后端api服务来生成对话文本。

🔎

延伸解读

架构解析:前后端分离的语音对话流程

文章明确SillyTavern仅为前端,需搭配Koboldcpp生成文本、GPT-SoVITS合成语音。流程为:SillyTavern向Koboldcpp请求流式文本,接收完毕后将全量文本传给GPT-SoVITS,后者返回音频二进制,前端播放。这种分离设计让各组件可独立替换,但需确保接口兼容。

关键修改:适配GPT-SoVITS的接口调整

由于SillyTavern未预留GPT-SoVITS位置,需将原XTTS的fetchTtsGeneration方法改为调用GPT-SoVITS的tts_to_audio接口。同时,GPT-SoVITS需新增GET /speakers_list和POST /tts_to_audio/接口,后者仅接收text参数。这些修改是打通流程的核心,否则语音生成无法触发。

部署要点:各服务的启动与依赖

部署SillyTavern直接运行start.sh或start.bat;Koboldcpp需编译(Windows用make,Mac用make LLAMA_METAL=1)并安装requirements.txt,启动时指定模型路径和参数;GPT-SoVITS克隆后安装依赖并修改api逻辑。注意Koboldcpp默认运行在5001端口,需确保端口不冲突。

❓

Q&A

如何将GPT-SoVITS接入SillyTavern-1.11.5项目?

首先克隆SillyTavern项目并运行启动脚本,然后将XTTS改为GPT-SoVITS,接着部署Koboldcpp和GPT-SoVITS,最后配置接口。

SillyTavern的主要功能是什么?

SillyTavern是一个前端项目,负责向后端发起请求并展示生成的对话文本。

Koboldcpp在这个项目中扮演什么角色?

Koboldcpp作为后端服务,负责流式返回对话文本供SillyTavern展示。

如何部署Koboldcpp?

克隆Koboldcpp项目,编译并安装依赖,然后启动服务。

GPT-SoVITS的接口逻辑需要如何修改?

需要修改api接口逻辑以适应新的请求格式,包括添加新的speakers_list和tts_to_audio接口。

是否有视频教程可以参考?

有,文中提供了视频教程链接供参考。

🏷️

标签

➡️

继续阅读