【开源项目】AI Vtuber 一个由多LLM驱动的虚拟主播，可以在Bilibili/抖音 直播中与观众实时互动或本地聊天。使用多种TTS技术并可进行AI变声。通过特定指令协同SD绘图。并有循环文案

{
  // 你的直播间号,兼容全平台，都是直播间页面的链接中最后的数字和字母。例如:123
  "room_display_id": "你的直播间号",
  // 选用的聊天类型：chatterbot/chatgpt/claude/chat_with_file/chatglm/none 其中none就是复读机模式
  "chat_type": "none",
  // 弹幕语言筛选，none就是全部语言，en英文，jp日文，zh中文
  "need_lang": "none",
  // 请求chatgpt/claude时，携带的字符串头部，用于给每个对话追加固定限制
  "before_prompt": "请简要回复:",
  // 请求chatgpt/claude时，携带的字符串尾部
  "after_prompt": "",
  // 弹幕日志类型，用于记录弹幕触发时记录的内容，默认只记录回答，降低当用户使用弹幕日志显示在直播间时，因为用户的不良弹幕造成直播间被封禁问题
  "commit_log_type": "回答",
  "filter": {
    // 弹幕过滤，必须携带的触发前缀字符串（任一）
    "before_must_str": [],
    // 弹幕过滤，必须携带的触发后缀字符串（任一）
    "after_must_str": [
      ".",
      "。",
      "?",
      "？"
    ],
    // 本地违禁词数据路径（你如果不需要，可以清空文件内容）
    "badwords_path": "data/badwords.txt",
    // 最长阅读的英文单词数（空格分隔）
    "max_len": 30,
    // 最长阅读的字符数，双重过滤，避免溢出
    "max_char_len": 50
  },
  // 答谢相关配置
  "thanks": {
    // 是否启用入场欢迎
    "entrance_enable": true,
    // 是否启用礼物答谢
    "gift_enable": true,
    // 入场欢迎文案
    "entrance_copy": "欢迎 {username}",
    // 礼物答谢文案
    "gift_copy": "感谢 {username} 送的 {gift_name}",
    // 最低礼物答谢金额
    "lowest_price": 1.0
  },
  // Live2D皮
  "live2d": {
    // 是否启用
    "enable": true,
    // web服务监听端口
    "port": 12345
  },
  "openai": {
    "api": "https://api.openai.com/v1",
    "api_key": [
      "你的api key"
    ]
  },
  // claude相关配置
  "claude": {
    // claude相关配置
    // 参考：https://github.com/bincooo/claude-api#readme
    "slack_user_token": "",
    "bot_user_id": ""
  },
  // chatglm相关配置
  "chatglm": {
    "api_ip_port": "http://127.0.0.1:8000",
    "max_length": 2048,
    "top_p": 0.7,
    "temperature": 0.95
  },
  "chat_with_file": {
    // 本地向量数据库模式
    "chat_mode": "claude",
    // 本地文件地址
    "data_path": "data/伊卡洛斯百度百科.zip",
    // 切分数据块的标志
    "separator": "\n",
    // 向量数据库数据分块
    "chunk_size": 100,
    // 每个分块之间的重叠字数。字数越多，块与块之间的上下文联系更强，但不能超过chunk_size的大小。同时chunk_size和chunk_overlap越接近，构造向量数据库的耗时越长
    "chunk_overlap": 50,
    "chain_type": "stuff",
    // 适用于openai模式，显示消耗的token数目
    "show_token_cost": false,
    "question_prompt": "请根据以上content信息进行归纳总结，并结合question的内容给出一个符合content和question语气、语调、背景的回答。不要出现'概括''综上''感谢'等字样，向朋友直接互相交流即可。如果发现不能content的信息与question不相符，抛弃content的提示，直接回答question即可。任何情况下都要简要地回答!",
    // 最大查询数据库次数。限制次数有助于节省token
    "local_max_query": 3,
    // 默认本地向量数据库模型
    "local_vector_embedding_model": "sebastian-hofstaetter/distilbert-dot-tas_b-b256-msmarco"
  },
  // 语音合成类型选择 edge-tts/vits/elevenlabs
  "audio_synthesis_type": "edge-tts",
  // vits相关配置
  "vits": {
    // 配置文件的路径
    "vits_config_path": "E:\\GitHub_pro\\VITS-fast-fine-tuning\\inference\\finetune_speaker.json",
    // 推理服务运行的链接（需要完整的URL）
    "vits_api_ip_port": "http://127.0.0.1:7860",
    // 选择的说话人，配置文件中的speaker中的其中一个
    "character": "ikaros"
  },
  // so-vits-svc相关配置
  "so_vits_svc": {
    // 启用功能 true启用 false关闭
    "enable": false,
    // 模型配置文件路径
    "config_path": "D:\\so-vits-svc\\configs\\ikaros_v1.json",
    // 服务运行的ip端口（注意，请运行flask_api_full_song.py）
    "api_ip_port": "http://127.0.0.1:1145",
    // 说话人，源自配置文件
    "spk": "ikaros",
    // 音调
    "tran": 1.0,
    // 输出音频格式
    "wav_format": "wav"
  },
  // edge-tts相关配置
  "edge-tts": {
    // edge-tts选定的说话人(cmd执行：edge-tts -l 可以查看所有支持的说话人)
    "voice": "zh-CN-XiaoyiNeural"
    // 语速增益 默认是 +0%，可以增减，注意 + - %符合别搞没了，不然会影响语音合成
    "rate": "+0%",
    // 音量增益 默认是 +0%，可以增减，注意 + - %符合别搞没了，不然会影响语音合成
    "volume": "+0%",
    // 语速
    "speed": 1
  },
  // elevenlabs相关配置
  "elevenlabs": {
    // elevenlabs密钥，可以不填，默认也有一定额度的免费使用权限，具体多少不知道
    "api_key": "",
    // 选择的说话人名
    "voice": "Domi",
    // 选择的模型
    "model": "eleven_monolingual_v1"
  },
  // genshinvoice.top相关配置
  "genshinvoice_top": {
    // 说话人
    "speaker": "神里绫华",
    // 输出音频格式 不建议修改
    "format": "wav",
    // 可用于控制整体语速。默认为1.2
    "length": "1.25",
    // 控制感情变化程度，默认为0.2
    "noise": "0.2",
    // 控制音节发音长度变化程度，默认为0.9
    "noisew": "0.9"
  },
  // chatterbot相关配置
  "chatterbot": {
    // 机器人名
    "name": "bot",
    // bot数据库路径
    "db_path": "db.sqlite3"
  },
  // chatgpt相关配置
  "chatgpt": {
    "model": "gpt-3.5-turbo",
    // 控制生成文本的随机性。较高的温度值会使生成的文本更随机和多样化，而较低的温度值会使生成的文本更加确定和一致。
    "temperature": 0.9,
    "max_tokens": 2048,
    "top_p": 1,
    "presence_penalty": 0,
    "frequency_penalty": 0,
    "preset": "请扮演一个AI虚拟主播。不要回答任何敏感问题！不要强调你是主播，只需要回答问题！"
  },
  // text-generation-webui相关配置
  "text_generation_webui": {
    // 服务监听的IP和端口
    "api_ip_port": "http://127.0.0.1:5000",
    "max_new_tokens": 250,
    // 有 'chat', 'chat-instruct', 'instruct'
    "mode": "chat",
    // 角色
    "character": "Example",
    // 聊天指导模板
    "instruction_template": "Vicuna-v1.1",
    // 你的名字
    "your_name": "你"
  },
  // 是否启用本地问答库匹配机制，优先级最高，如果匹配则直接合成问答库内的内容/返回本地音频，如果不匹配则按照正常流程继续。
  "local_qa": {
    // 文本匹配模式
    "text": {
      // 是否启用
      "enable": true,
      // 文本问答库文件路径，数据为一问一答形式（换行分隔）
      "file_path": "data/本地问答库.txt"
    },
    // 音频匹配模式
    "audio": {
      // 是否启用
      "enable": true,
      // 文本问答库音频文件路径，匹配的关键词就是音频文件名，为模糊最优匹配
      "file_path": "out/本地问答音频/"
    }
  },
  // 点歌模式设置
  "choose_song": {
    // 是否启用 true启用 false关闭
    "enable": true,
    // 点歌触发命令（完全匹配才行）
    "start_cmd": "点歌 ",
    // 停止点歌命令（完全匹配才行）
    "stop_cmd": "取消点歌",
    // 歌曲音频路径（默认为本项目的song文件夹）
    "song_path": "song",
    // 匹配失败返回的音频文案 注意 {content} 这个是用于替换用户发送的歌名的，请务必不要乱删！影响使用！
    "match_fail_copy": "抱歉，我还没学会唱{content}"
  },
  // stable diffusion相关配置
  "sd": {
    // 是否启用
    "enable": false,
    // 触发的关键词（弹幕头部触发）
    "trigger": "画画：",
    // 服务运行的IP地址
    "ip": "127.0.0.1",
    // 服务运行的端口
    "port": 7860,
    // 负面文本提示，用于指定与生成图像相矛盾或相反的内容
    "negative_prompt": "ufsw, longbody, lowres, bad anatomy, bad hands, missing fingers, pubic hair,extra digit, fewer digits, cropped, worst quality, low quality",
    // 随机种子，用于控制生成过程的随机性。可以设置一个整数值，以获得可重复的结果。
    "seed": -1,
    // 样式列表，用于指定生成图像的风格。可以包含多个风格，例如 ["anime", "portrait"]。
    "styles": [],
    // 提示词相关性，无分类器指导信息影响尺度(Classifier Free Guidance Scale) -图像应在多大程度上服从提示词-较低的值会产生更有创意的结果。
    "cfg_scale": 7,
    // 生成图像的步数，用于控制生成的精确程度。
    "steps": 30,
    // 是否启用高分辨率生成。默认为 False。
    "enable_hr": false,
    // 高分辨率缩放因子，用于指定生成图像的高分辨率缩放级别。
    "hr_scale": 2,
    // 高分辨率生成的第二次传递步数。
    "hr_second_pass_steps": 20,
    // 生成图像的水平尺寸。
    "hr_resize_x": 512,
    // 生成图像的垂直尺寸。
    "hr_resize_y": 512,
    // 去噪强度，用于控制生成图像中的噪点。
    "denoising_strength": 0.4
  },
  // 文案相关配置
  "copywriting": {
    // 文案文件存储路径，不建议更改。
    "file_path": "data/copywriting/",
    // 文案文件存储路径2，不建议更改。
    "file_path2": "data/copywriting2/",
    // 文案音频文件存储路径，不建议更改。
    "audio_path": "out/copywriting/",
    // 文案音频文件存储路径2，不建议更改。
    "audio_path2": "out/copywriting2/",
    // 播放音频文件列表
    "play_list": [
      "测试文案2.wav",
      "测试文案3.wav",
      "吐槽.wav"
    ],
    // 播放音频文件列表2
    "play_list": [
      "test.wav"
    ],
    // 文案音频播放之间的间隔时间。就是前一个文案播放完成后，到后一个文案开始播放之间的间隔时间。
    "audio_interval": 5,
    // 文案音频切换到弹幕音频的切换间隔时间（反之一样）。就是在播放文案时，有弹幕触发并合成完毕，此时会暂停文案播放，然后等待这个间隔时间后，再播放弹幕回复音频。
    "switching_interval": 5,
    // 文案随机播放，就是不根据播放音频文件列表的顺序播放，而是随机打乱顺序进行播放。
    "random_play": true
  },
  "header": {
    "userAgent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/113.0.0.0 Safari/537.36 Edg/113.0.1774.42"
  },
  // 聊天模式相关配置
  "talk": {
    // 你的名称
    "username": "主人",
    // 使用的语音识别类型 baidu / google
    "type": "google",
    // 录音触发按键（长按此按键进行录音）
    "trigger_key": "1",
    // 音量阈值，指的是触发录音的起始音量值，请根据自己的麦克风进行微调到最佳
    "volume_threshold": 800,
    // 沉默阈值，指的是触发停止路径的最低音量值，请根据自己的麦克风进行微调到最佳
    "silence_threshold": 15,
    // 百度语音识别 申请：https://console.bce.baidu.com/ai/#/ai/speech/overview/index
    "baidu": {
      // 百度云 语音识别应用的 AppID
      "app_id": "",
      // 百度云 语音识别应用的 API Key
      "api_key": "",
      // 百度云 语音识别应用的 Secret Key
      "secret_key": ""
    },
    // 谷歌语音识别
    "google": {
      // 录音后识别转换成的目标语言（就是你说的语言）
      "tgt_lang": "zh-CN"
    }
  },
  // 字幕相关配置
  "captions": {
    // 是否启用字幕记录
    "enable": true,
    // 字幕输出路径
    "file_path": "log/字幕.txt"
  }
}

1.CondaSSLError: OpenSSL appears to be unavailable on this machine

本地已经有Anaconda环境，在执行 半自动包的1.创建虚拟环境.bat时，出现报错CondaSSLError: OpenSSL appears to be unavailable on this machine

解决方案：参考https://blog.csdn.net/mynameisyaxuan/article/details/128323026

2.ModuleNotFoundError: No module named 'xxx' 大同小异

都是依赖库缺失问题，可以打开requirements_bilibili.txt/requirements_dy.txt/requirements_ks.txt内查看需要安装的依赖（可能还是遗漏...）
视情况更换镜像源，国内推荐清华源，如果清华源没有缺失的库，可以走pypi的源，安装命令如：pip install PyQt5 -i https://pypi.tuna.tsinghua.edu.cn/simple
注意：请在虚拟环境中安装！！！（如果你是根据半自动整合包做的话，先激活虚拟环境conda activate ai_vtb，然后进行安装）

https://pypi.org/simple
https://pypi.python.org/simple/
https://pypi.tuna.tsinghua.edu.cn/simple

ModuleNotFoundError: No module named 'PyQt5'

半自动包 运行3.GUI运行.bat时，出现

Traceback (most recent call last):
  File "F:\github_pro\AI-Vtuber\main.py", line 10, in <module>
    from PyQt5.QtWidgets import QApplication, QMainWindow, QMessageBox, QLabel, QComboBox, QLineEdit, QTextEdit, QDialog
ModuleNotFoundError: No module named 'PyQt5'

解决方案：手动补装PyQt5，需要注意，得在ai_vtb的虚拟环境中安装
可以发现最左侧有这个括号，表示你激活了ai_vtb的虚拟环境中，然后你在运行 后面的pip安装 (ai_vtb) F:\github_pro\AI-Vtuber>pip install PyQt5

ModuleNotFoundError: No module named 'langid'

半自动包 运行3.GUI运行.bat时，出现

Traceback (most recent call last):
  File "F:\github_pro\AI-Vtuber\main.py", line 20, in <module>
    from utils.common import Common
  File "F:\github_pro\AI-Vtuber\utils\common.py", line 8, in <module>
    import langid
ModuleNotFoundError: No module named 'langid'

解决方案：手动补装langid，需要注意，得在ai_vtb的虚拟环境中安装， pip install langid

如果遇到上图安装失败的问题 ， 走官方源下载 pip install langid -i https://pypi.python.org/simple/

ModuleNotFoundError: No module named 'profanity'

半自动包 运行3.GUI运行.bat时，出现

Traceback (most recent call last):
  File "F:\github_pro\AI-Vtuber\main.py", line 20, in <module>
    from utils.common import Common
  File "F:\github_pro\AI-Vtuber\utils\common.py", line 10, in <module>
    from profanity import profanity
ModuleNotFoundError: No module named 'profanity'

解决方案：手动补装profanity，需要注意，得在ai_vtb的虚拟环境中安装， pip install profanity

ModuleNotFoundError: No module named 'ahocorasick'

半自动包 运行3.GUI运行.bat时，出现

Traceback (most recent call last):
  File "F:\github_pro\AI-Vtuber\main.py", line 20, in <module>
    from utils.common import Common
  File "F:\github_pro\AI-Vtuber\utils\common.py", line 11, in <module>
    import ahocorasick
ModuleNotFoundError: No module named 'ahocorasick'

解决方案：手动补装pyahocorasick，需要注意，得在ai_vtb的虚拟环境中安装， pip install pyahocorasick

1.openai 接口报错:《empty message》

可能是API KEY过期了/额度没了，请检查API KEY是否可用。
在线测试参考：
chatgpt-html
ChatGPT-Next-Web

2.ERROR: Cannot install -r requirements_bilibili.txt (line 23), aiohttp and langchain==0.0.142 because these package versions have conflicting dependencies.

依赖冲突问题。可以删除requirements_bilibili.txt中的langchain==0.0.142和bilibili-api==9.1.0，然后进行重新安装。安装完成后，手动安装这2个库（按顺序安装）。

Miniconda3\python.exe -m pip install bilibili-api==9.1.0
Miniconda3\python.exe -m pip install langchain==0.0.142

3.ERROR: Conmunicate.__init__() got an unexpected keyword argument 'text'

问题根因：Edge-TTS版本过低
解决方案：升级到指定版本 pip install edge-tts==6.1.6

4.File ".\flask_api_full_song.py", line 38, in wav2wav out_audio, out_sr = svc_model.infer(spk, tran, raw_path) ValueError: too many values to unpack (expected 2)

注意！！！如果你是4.1版本的整合包，很可能就有这个bug，需要修改flask_api_full_song.py的38行左右：
改

out_audio, out_sr = svc_model.infer(spk, tran, raw_path)

为

out_audio, out_sr, n_frames = svc_model.infer(spk, tran, raw_path)

5.RuntimeWarning: Couldn't find ffmpeg or avconv - defaulting to ffmpeg, but may not work warn("Couldn't find ffmpeg or avconv - defaulting to ffmpeg, but may not work", RuntimeWarning)

问题：pydub依赖ffmpeg，但环境不存在ffmpeg
解决方案：安装ffmpeg并配置环境变量
ffmpeg安装教程：ffmpeg安装教程
ffmpeg官方下载：http://ffmpeg.org/download.html
ffmpeg本仓库内下载：releases

简述就是下载，解压，配置ffmpeg的bin到系统环境变量path中，完事。

UI设计

打开QT设计师~o( =∩ω∩= )m pyqt5-tools designer
生成UI代码 pyuic5 -o UI_main.py ui\main.ui
对UI做改动时，加入新的配置，一般需要修改init_config和save部分，新配置的读取和写入部分。

打包懒人包

1、直接在懒人包中安装miniconda
2、激活base虚拟环境（使用写好的激活脚本）
3、安装依赖
pip install -r requirements_bilibili.txt -i https://pypi.tuna.tsinghua.edu.cn/simple
pip install -r requirements_dy.txt -i https://pypi.tuna.tsinghua.edu.cn/simple
pip install -r requirements_ks.txt -i https://pypi.tuna.tsinghua.edu.cn/simple
4、安装chatterbot（可选）
pip install spacy SQLAlchemy==1.3.24 -i https://pypi.tuna.tsinghua.edu.cn/simple
前提是你在当前目录下有clone chatterbot的项目（自行调整路径关系）
python setup.py install

MD目录自动生成

doctoc,在本地git存储库中生成降价文件的目录。链接通过命令行标志兼容github或其他网站生成的锚。

安装

node.js环境
进入包含本地git项目的目录，键入: npm install -g doctoc

使用

在README.md中，找个生成目录位置，写入如下代码，确认生成位置：

<!-- START doctoc -->
<!-- END doctoc -->

cmd输入命令即可：doctoc /path/to/file
例如：doctoc README.md

2023-06-13

兼容本地版ChatGLM API接口

2023-06-16

增加Edge-TTS的语速、音量调节参数。

2023-06-17

• 增加GUI版。
• 增加GUI运行的bat文件，需要配合本地虚拟环境运行。请到releases下载。
• 对config.json的结构做了调整，增加了弹幕前后缀过滤配置。
• 增加langchain_pdf_local的配置内容，待和主线整合后合并。

2023-06-18

• 修复部分GUI的bug
• 整合到主线
• 新增本地live2d模型加载

2023-06-20

• 补充了整合包的打包方式
• 音频合成更改多线程为队列结构，解决高并发的崩溃问题
• langchain_pdf_local 增加 GanymedeNil/text2vec-large-chinese 模型，该模型在中文解析上很好
• 增加弹幕触发,回复部分日志记录时，每20字符自动换行的机制
• 修改edge-tts合成音频的文件名范围
• 更换抖音方案为dy-barrage-grab
• GUI新增 弹幕日志类型、修改langchain_pdf_local的模型下拉选择

2023-06-21

• 修复语音合成内容错误的bug

2023-06-23

• 针对整合包问题进行了优化和处理，新增了Scripts文件夹用于存储制作整合包时需要用的相关脚本。
• 新增本地回答库，启用后优先匹配库内问答，无匹配结果则按正常流程运行
• 新增stable diffusion的接入。（UI还未适配，初步实现功能，搭配虚拟摄像头食用）

2023-06-24

• 新增stable diffusion的接入。（UI还未适配，初步实现功能，搭配虚拟摄像头食用）
• bug修复：vits配置项依赖问题
• 补充遗漏的ui文件
• GUI补充缺失的vits的speed
• GUI增加SD的配置
• GUI修改Edge-TTS的说话人配置为下拉菜单，数据文件在data下，可以自行编辑修改

2023-06-25

• 修复保存配置时，edge-tts配置报错错误导致程序无法正常工作的bug

2023-06-28

• 将langchain_pdf和langchain_pdf_local两个模式统一为chat_with_file模式

2023-06-29

• 合并dev和main，并同步兼容GUI。
• 修复GPT_MODEL初始化claude时的空配置bug
• bilibili-api-python需要升级至15.5.1，更加稳定
• GUI改langchain为chat_with_file
• 正式合入主线

2023-07-01

• 修改chat_mode的gpt为chatgpt，适配调整。
• MD增加目录
• 追加对text-generation-webui的兼容。
• 修复chat_with_file，openai相关模式下的无法使用的bug。
• 补充缺失的faiss-cpu依赖。
• 后置create_faiss_index_from_zip的加载。
• 语音合成逻辑升级，会先对中文长文本进行切分，然后多线程队列合成，从而可以通过多次合成的方式处理长回复。
• 修改默认音频合成长度为80 & 200。
• GUI部分固定配置项改为下拉框形式，简化配置难度。
• GUI chat_with_file部分对chatgpt/claude的配置依赖，改选中直接呼出3个配置box。
• 修复音频分割部分对短音频丢失问题的恶性bug。

2023-07-02

• chat_with_file模式支持加载本地模型，无需链接huggingface仓库
• 延长audio合成部分，合成队列的循环延时，一定程度上降低对Edge-TTS的压力。
• 给audio合成中 vits没有启动时的数据解析追加try异常捕获。
• 修复 回复文本切分时，对空字符串的过滤遗漏，并对.的过滤进行删除，默认中文环境的过滤
• 音频合成部分基本上都进行了异常捕获。
• 新增功能 点歌模式 触发优先级高于LLM和弹幕过滤机制，可以通过 自定义点歌和取消点歌命令 播放本机已有音频。

2023-07-03

• 新增so-vits-svc的接入，可以对edge-tts/vits-fast合成后的音频进行变声后在输出。
• 优化链接过滤的实现，提升准确性。

2023-07-04

• 优化说明文档，以更利于用户通过文档解决相关问题、获得帮助。
• 微调了语音合成前的文本切分算法，会控制在10-30字，结合合成时间大概可能也许可以达到不错的连续性。

2023-07-05

• 点歌模式 支持子文件夹的音频文件搜索，不用拘泥于一级目录了。
• 修复source_data因为路径已存在而没有定义的bug。
• 音频合成输出日志，方便用户了解音频合成情况。
• 修复点歌完成后，还进行LLM对话的bug。
• 修复chat_with_file openai_gpt模式，数据切分丢失数据的恶性bug。

2023-07-08

• 新增 文案模式，基本完成功能。可以自定义文案、合成音频、配置相关信息、循环暂停播放文案。
• 修复 文案模式 合成音频失败的bug
• 修复 文案模式 没有运行就可以进行合成、播放、暂停操作的bug
• 优化 文案模式 音频播放部分的实现逻辑。新增加载文案不存在就创建的机制。追加了文案页的各个配置和相关说明。
• 修复 audio子线程sleep阻塞主线程弹幕监听的问题。
• 修复 文案音频暂停后 会被弹幕重新激活的bug。
• 优化 文案模式 GUI相关交互

2023-07-09

• 新增 聊天模式-谷歌。可以本地直接与LLM进行语音聊天。（依赖魔法）
• 新增 SD模型下 LLM对提示词优化的功能。GUI同步适配。

2023-07-10

• GUI可以检索Live2D路径下的模型进行动态修改配置。（需要注意，修改后浏览器缓存问题，请用无痕浏览器打开）
• 追加 Live2D官网所有的免费模型
• 新增 答谢功能（入场欢迎、礼物答谢），暂时只支持B站，GUI同步进行配置。

2023-07-11

• 优化文本切分算法

2023-07-12

• 增加项目的思维导图
• 增加项目的简易流程图

2023-07-13

• 聊天页新增聊天框，在运行后可以直接使用聊天框进行聊天
• 修改audio、sd、claude中所有的time.sleep为异步睡眠

2023-07-14

• 新增TTS模式 genshinvoice_top,调用第三方接口完成语音合成

2023-07-15

• 修改 聊天模式-谷歌 为 聊天模式，新增语音识别 百度接口。
• 追加线程进程退出处理（部分有效）
• 聊天模式 按键触发兼容英文大小写字母。
• 聊天模式 支持循环录音功能，新增停止触发按键。

2023-07-16

• 优化cluade协程处理方式
• chat_with_file的openai_gpt同样使用提示词模板来自定义回答方式
• 新增字幕日志，只会输出即将播放的音频文本，用于直播时的字幕显示。
• 音频合成的消息队列改成阻塞队列

2023-07-17

• 抖音版增加入场欢迎和礼物答谢（礼物答谢的金额需要手动维护价格表）
• 新增 同拼音的违禁拼音过滤机制
• GUI适配字幕日志的配置

2023-07-18

• 新增抖音礼物价格数据，礼物价值下限将生效（数据不全，可以自行补充）
• 优化抖音日志信息，只输出info信息，不在输出debug日志，更加清爽。
• 接入DDSP-SVC，简单测试了下，效果好像不太对。优化了变声部分的代码

2023-07-19

• GUI适配DDSP-SVC；补充说明文档
• 优化audio中vits接口的设计&优化代码减少冗余
• 新增本地问答音频库，机制类似点歌，通过编辑音频文件名做为触发匹配关键词，优先级第二高，匹配命中后直接会进行匹配音频的播放。
• 新增自定义上下限音频随机变速，对普通音频播放和文案音频播放可以进行随机变速配置。(GUI未适配)

2023-07-20

• 增加ffmpeg缺失的解决方案
• 文案模式增加了一组文案配置，也就是说有2块文案，会进行左右切换的播放，都播放完毕后会进行新的一轮播放。
• 新增LLM后的第二重过滤（违禁词、链接、拼音）
• 违禁拼音配置内容需要是中文，需要注意，已更正
• 新增 念用户名的功能，例：回复xxx。你好
• 新增用户名过滤（违禁词、链接、拼音）
• 修复本地问答音频匹配，传入音频后缀导致的匹配错误bug
• 新增本地问答库匹配 最低相似度配置，用于微调需要的关键词匹配度，已自定义触发灵敏度。
• 音频随机变速 GUI适配

2023-07-21

• 修复edge-tts + so-vits-svc协同下，相对路径无法变声的bug
• 针对部分用户绝对路径音频加载仍有系统找不到指定文件的情况，恢复相对路径，只在变声条件下转绝对路径
• 音频变速部分改默认变速变调为默认变速不变调且函数兼容变速变调

2023-07-22

• 修复音频播放部分，音频变速调用缺失缩进导致变速必定执行的bug

2023-07-23

• 修复音频播放部分，音频变速语速低于1时变速合成的音频不正常的bug
• 改变弹幕处理逻辑，先由process_data预处理函数进行指定时间内的数据丢弃后，再进行数据处理，可以有效降低高并发造成的一系列问题
• dy_old改为接入第三方大佬提供的免费不可商用ws监听
• 本地问答库支持自定义变量的形式来开发动态语句
• 本地问答库-文本 修改完全匹配为相似度匹配，暂时和音频匹配共用一个相似度值
• 文本切分算法，可以通过max_limit_len来对强制切分做自定义，对显卡性能高的用户而言，可以通过增大限制来提高语句流畅度。