【AI】在RK3576上，使用RKNN实现MeloTTS（文本转语音）

1、简述

在瑞芯微的RK3576上实现TTS（文本转语音）功能，使用CPU实现时，几乎把CPU资源全部耗尽，没有实用价值。通过将MeloTTS转为onnx，再转为RKNN，来使用RK3576的NPU硬件加速，成功实现TTS

2、安装依赖

2.1 tokenizers

tokenizers 专门用于将“原始自然语言文本”转换为“AI 模型可理解的数字格式”的工具集；
它是 NLP（自然语言处理）领域模型训练和推理的“前置必备工具”。
因为 AI 模型（如 BERT、GPT）无法直接理解文字，只能处理数字张量，tokenizers就是完成 “文本→数字” 转换的核心桥梁。

1）Token（词元）：文本的最小处理单元
在 NLP 中，Token是对原始文本进行拆分后得到的最小有效单元，不同场景下拆分方式不同，常见类型有：

• 单词级 Token：英文按空格 / 标点拆分（如"Hello World!"→[“Hello”, “World”, “!”]），中文按词语拆分（如"人工智能很强大"→[“人工智能”, “很”, “强大”]）。
• 子词级 Token（最常用，适配 AI 模型）：解决生僻词、未登录词问题（如"Unicorns"→[“Uni”, “corns”]，"智能手机"→[“智能”, “手机”]），主流算法有 BPE、WordPiece（BERT 用）、Unigram。
• 字符级 Token：按单个字符拆分（如"Hi"→[“H”, “i”]，"你好"→[“你”, “好”]），