Synthesizer V
基本资料 | |
软件名 | Synthesizer V |
---|---|
操作系统 | Windows / Linux / macOS |
语言 | 日语、英语、华语、粤语、西班牙语 |
软件类型 | 歌声合成 |
首次发布 | 技术预览版 (2018年8月19日) |
测试版本 | Synthesizer V Studio 1.11.0b3 (2024年2月8日) |
图片大小 | 420px |
别称 | SynthV、SV |
开发商 | Dreamtonics Co,. Ltd. |
最新版本 | Synthesizer V Studio 1.11.0 (2024年4月4日) |
代表色 | SynthV绿(15E879) |
Synthesizer V(简称SynthV)是由以华侃如(Kanru Hua)为首的Dreamtonics Co,. Ltd.开发的歌声合成引擎及编辑器软件(V表示第5次架构迭代)。该引擎采用了自主研发的基于人工神经网络及拼接合成算法的LLSM(底层语音模型)技术,仅使用少量采样数据即能生成自然的声音。
Synthesizer V使用的歌声数据库具有Standard和AI两种不同版本,分别对应WaveNet vocoder[1]强化的传统拼接歌声合成(Standard)和基于机器学习的歌声合成(AI)。[2]
发展历程
编辑器和引擎
第一代 |
---|
|
第二代 |
---|
|
发布歌声数据库
第一代
日期 | 公司 | 语言 | 性别 | 声库名 | 发布资讯 |
---|---|---|---|---|---|
2018年8月19日 | Synthesizer V | 英语 | 女 | 爱莲娜·芙缇 | 公开 |
2018年11月11日 | Synthesizer V | 日语 | 女 | 暗音连理 | 开放下载 |
2018年12月24日 | Synthesizer V | 日语 | 男 | 玄武 | 开放下载 |
2018年12月28日 | Animen | 华语 | 女 | 艾可 | 发售,平行四界则代理销售 |
2019年4月19日 | 平行四界 | 华语 | 女 | 赤羽 | 发布试听曲并开启预售 |
2019年5月31日 | 平行四界 | 华语 | 女 | 诗岸 | 发布试听曲并开启预售 |
2019年6月28日 | 平行四界 | 华语 | 女 | 苍穹 | 发布试听曲并开启预售 |
2019年8月22日 | 平行四界 | 华语 | 女 | 海伊 | 发布试听曲并开启预售 |
第二代
日期 | 公司 | 语言(采样语言,主次排序) | 声源性别 | 声库名 | 采用技术 | 事件 |
---|---|---|---|---|---|---|
2020年6月26日 | 平行四界 | 华语 | 女 | 赤羽 | Std | 预售,同年7月29日Animen代理销售 |
2020年6月26日 | 平行四界 | 华语 | 女 | 诗岸 | Std | 预售,同年7月29日Animen代理销售 |
2020年6月26日 | 平行四界 | 华语 | 女 | 苍穹 | Std | 预售,同年7月29日Animen代理销售 |
2020年6月26日 | 平行四界 | 华语 | 女 | 海伊 | Std | 预售,同年7月29日Animen代理销售 |
2020年6月26日 | Dreamtonics | 日语 | 女 | Saki | Std | AH-Software代理发售 |
2020年6月26日 | AH-Software | 日语 | 女 | 琴叶 茜·葵 | Std | 发售 |
2020年7月13日 | Animen | 华语 | 女 | 艾可 | Std | 发售 |
2020年7月13日 | Animen | 日语 | 男 | 玄武 | Std | 发售 |
2020年7月13日 | Animen | 日语 | 女 | Saki | Std | 发售,2021年1月21日授权AH-Software代理发售 |
2020年8月7日 | 平行四界 | 华语 | 男 | 牧心 | Std | 发布试听曲并开启预售 |
2020年8月12日 | 平行四界 | 华语 | 女 | Minus | Std | 发布试听曲并开启预售 |
2020年12月25日 | Dreamtonics | 日语 | 女 | Saki | AI | 发布,AH-Software和Animen则代理销售 |
2021年3月18日 | AH-Software | 日语 | 女 | 小春六花 | Std/AI | 发售 |
2021年6月18日 | AH-Software | 日语/英语[21] | 女 | 弦卷真纪 | Std/AI | 发售 |
2021年10月13日 | Animen | 日语 | 女 | 暗音レンリ | Std | 发布,开放免费注册通道 |
2021年11月26日 | AH-Software | 日语 | 女 | 追傩酱 | Std/AI | 发售 |
2021年12月1日 | Dreamtonics | 华语 | 女 | 青溯 | AI | 发售,并在淘宝开设店铺销售 |
2021年12月6日 | Animen | 英语 | 女 | 爱莲娜·芙缇 | AI | 发售 |
2021年12月11日 | AUDIOLOGIE | 英语 | 女 | 铃爱莉 | AI | 发售,并在淘宝开设店铺销售 |
2022年1月19日 | Eclipsed Sounds | 英语 | 女 | SOLARIA | AI | 发售 |
2022年1月19日 | 平行四界 | 华语 | 女 | 星尘Infinity | AI | 发布试听曲,1月27日开启预售,2月20日正式发布 |
2022年1月27日 | AH-Software | 日语 | 女 | 京町精华 | Std/AI | 发售 |
2022年2月4日 | Dreamtonics | 英语 | 男 | Kevin | AI | 发售,AH-Software也有代理销售 |
2022年2月4日 | Dreamtonics | 日语 | 男 | Ryo | AI | 发售,AH-Software也有代理销售 |
2022年4月9日 | Dreamtonics | 华语 | 男 | 默辰 | AI | 发售,AH-Software也有代理销售 |
2022年4月13日 | AH-Software | 日语 | 女 | 夏色花梨 | AI | 发售 |
2022年5月4日 | Dreamtonics | 华语 | 男 | 岸晓 | AI | 发售,AH-Software也有代理销售 |
2022年5月27日 | Dreamtonics | 华语 | 女 | 沨漪 | AI | 发售,AH-Software也有代理销售 |
2022年7月21日 | Dreamtonics | 华语/英语 | 女 | Weina | AI | 发售,并在微信小程序开设网店销售 |
2022年9月22日 | Dreamtonics | 日语 | 男 | Yuma | AI | 发布,10月7日发售,AH-Software也有代理销售 |
2022年9月22日 | Dreamtonics | 英语 | 女 | Natalie | AI | 发布,10月7日发售,AH-Software也有代理销售 |
2022年10月20日 | AH-Software | 日语 | 女 | 花隈千冬 | AI | 发售 |
2022年10月27日 | Dreamtonics | 日语 | 女 | Mai | AI | 发布,11月10日免费提供于Pro用户 |
2022年11月15日 | Eclipsed Sounds | 英语 | 男 | ASTERIAN | AI | 发布,12月2日发售 |
2022年11月24日 | Dreamtonics | 华语 | 女 | 从铮 | AI | 发布,12月12日发售 |
2022年11月24日 | Dreamtonics | 华语 | 男 | 煊宇 | AI | 发布,12月12日发售 |
2022年12月24日 | Dreamtonics | 华语 | 女 | 澄宵 | AI | 发布,2023年1月9日发售 |
2023年1月5日 | E-CAPSULE | 华语 | 女 | 夏语遥 | AI | 发布试听,1月19日预售,1月30日发售 |
2023年2月3日 | Dreamtonics | 英语 | 男 | Ninezero | AI | 发布,2月16日发售 |
2023年2月12日 | AUDIOLOGIE | 英语 | 男 | JUN | AI | 4月20日发售,并在淘宝开设店铺销售 |
2023年4月3日 | AH-Software | 日语 | 女 | 重音テト | AI | 发布,4月27日发售 |
2023年4月11日 | Eclipsed Sounds | 英语/西班牙语 | 男 | SAROS | AI | 发布,11月24日发售 |
2023年4月18日 | Dreamtonics | 华语 | 男 | D-Lin | AI | 发布,7月4日发售 |
2023年4月18日 | Dreamtonics | 英语 | 男 | Ritchy | AI | 发布,7月4日发售 |
2023年6月1日 | Dreamtonics | 华语 | 男 | 林籁 | AI | 发布试听,6月17日发售 |
2023年6月1日 | Dreamtonics | 华语 | 女 | 韵泉 | AI | 发布试听,6月17日发售 |
2023年7月25日 | AH-Software | 日语 | 女 | 樱乃空 | AI | 发布试听,8月24日发售 |
2023年9月28日 | KAMITSUBAKI STUDIO | 日语 | 女 | 可不 | AI | 开启预售 |
2023年10月1日 | AUDIOLOGIE | 英语 | 女 | 铃爱莉 Arcane | AI | 发布试听,12月11日发售 |
2023年10月3日 | Dreamtonics | 粤语 | 男 | 未抒 | AI | 发布试听,10月26日发售 |
2023年10月3日 | Dreamtonics | 日语/英语 | 女 | Sheena | AI | 发布试听,10月26日发售 |
2023年10月3日 | Dreamtonics | 日语 | 女 | Eri | AI | 发布试听,10月26日发售及发布功能限制版声库 |
2023年10月3日 | Dreamtonics | 英语 | 男 | Hayden | AI | 发布试听,10月26日发售 |
2023年10月26日 | Bushiroad Music | 日语 | 女 | POPY | AI | 开启预售,12月21日发售 |
2023年10月26日 | Bushiroad Music | 日语 | 女 | ROSE | AI | 开启预售,12月21日发售 |
2023年11月21日 | Internet | 日语 | 女 | Megpoid | AI | 发布试听,12月20日发售 |
2023年11月28日 | Dreamtonics | 日语 | 女 | Ayame | AI | 发布试听,12月7日发售 |
2023年11月28日 | Dreamtonics | 日语 | 男 | Jin | AI | 发布试听,12月7日发售 |
2023年12月5日 | E-CAPSULE | 华语 | 男 | 奥斯卡 | AI | 发布试听,12月26日发售 |
2023年12月8日 | 平行四界 | 华语 | 女 | 永夜Minus | AI | 发售 |
2024年1月30日 | Dreamtonics | 华语 | 女 | 奕夕 | AI | 发布试听,3月15日发售 |
2024年4月1日 | AH-Software | 日语 | 男 | 弗里摩侠 | AI | 发布试听,4月25日发售 |
2024年4月25日 | Bushiroad Music | 日语 | 女 | PASTEL | AI | 开发、售卖决定 |
2024年4月25日 | Bushiroad Music | 日语 | 女 | HALO | AI | 开发、售卖决定 |
2024年5月31日 | En-gene | 日语 | 女 | 白神芽音 | AI | 公布旗下的私有声库使用Synthesizer V AI技术 |
技术
- Synthesizer V AI
Synthesizer V AI 是搭载了 Dreamtonics 研发训练的深度学习网络(DNN)为核心的歌声合成技术。通过 Synthesizer V AI 生成的歌声,有如人类歌手般自然流畅,细节饱满,无论何种音乐风格都能应对自如。同时,经过优化的神经网络无需复杂昂贵的硬件即可在大多数设备上流畅运行。
根据不同的使用需要,Synthesizer V AI 提供了两种渲染模式可供选择:偏好品质模式使用完整大小的神经网络模型,将 Synthesizer V AI 技术的潜力完整发挥;偏好速度模式则使用较小的神经网络模型,可加快渲染速度。
- Synthesizer V Standard(标准 Std)
Synthesizer V Standard 将 AI 技术融入传统基于样本的歌声合成技术,创造出驱动全新歌声合成引擎的歌声数据库,通过自然歌声扩展(Natural Singing Extension)的机器学习技术,实现了更加真实的合成音色。
官方介绍
- 逼真无暇的歌声 弹指可得 顷刻呈现
音乐制作的下一个时代正为你到来。 凭借多年以来对人工智能、信号处理的深入研究, 加上对音乐坚定不移的热情,促成了 Synthesizer V 的诞生。 为实现音乐制作人共同的梦想,我们划时代的歌声合成引擎忠实地重现了 人类歌声演唱的每一分变化,而不再使语言及词汇成为演唱的障碍。 随意变化、逼真自然的人声已触手可及,帮助你实现每一个音乐梦想。 就在今天,开启音乐制作的下一个时代。[22]
功能特性
- 音乐制作的新纪元
- 宛若真实的灵动歌声,触手可及
纷繁的音色与切实的温度,是歌声必不可少的元素。 在帷幕之后,Synthesizer V 采用基于深度神经网络打造的合成引擎, 能够合成令人震撼的自然生动的歌声。 此外,与现有的众多神经网络解决方案不同, Synthesizer V 是首款能够 100% 离线运行且依旧高效的合成引擎。 网络不稳定?无需担心。你的创作将始终伴你左右。
- 加速音乐创作的原型设计
- 无限的歌声表达
结合日益庞大的歌声数据库阵容, 随时调用新的歌声尝试不同风格。 同时还可以通过形式丰富的声线参数, 例如胸腔 (Chest)、实唱 (Belt)、气息 (Breathy), 深入研究并定制独属于作品的歌声。
- 实时渲染
通过实时渲染功能将歌声可视化为波形, 实时呈现创作者对词曲的每一处修改。 帮助创作者最大限度缓解听力疲劳,减少从想法到声音的漫长循环。
- 跨语言合成功能
Synthesizer V 歌声数据库来自华语、英语、日语、粤语、西班牙语(即将到来)五种语言。 跨语言合成技术打破了合成歌声的语言藩篱, 让每一款歌声都能使用四种语言进行演唱。
- 为专业人士打造的纯净人声音轨
- 生成清晰的人声音轨,捕捉 Demo 的最佳呈现
音乐创作从未如此简单。 只需将 MIDI 文件导入 Synthesizer V Studio 并输入歌词,歌曲便顷刻呈现。 倘若灵感就在指尖,直接通过 MIDI 键盘弹奏,即可录入鲜活的旋律。 Synthesizer V Studio Pro 还能够通过 VST3、ARA2 与 AudioUnit 接口,集成到您的工作流程中。
八大参数
- 音高偏差
实时改变实际歌声音高与书写音符音高的距离。以音分为单位,100音分为一个半音,有±300音分,±600音分,±1200音分三种模式可供选择。因此,最多可以完成上下一个八度的音高调节。默认数值为0音分。
- 颤音包络
实时改变颤音的深度。数值范围为音符属性中颤音深度的0倍至2倍。默认数值为1倍。
- 响度
实时改变歌声音量的大小。以分贝为单位,数值范围为±12dB。默认数值为0dB。
- 张力
实时改变虚拟歌手声带的紧张程度。以抽象的紧张、放松作为数值的上下界。在数值偏向紧张时,歌手声音明亮,坚实,有力。在数值偏向放松时,歌手气声较大,温柔。默认数值为适中。
- 气声
实时改变歌声气声的大小。以抽象的气声、清晰作为上下界。默认数值为适中。
- 发声
实时改变真实歌声(相对气声)的响度,而不影响气声的大小。以抽象的有声、无声作为上下界。在数值偏向无声时,真实歌声的音量减小,声音以气声为主。默认数值为有声。
- 性别
实时改变虚拟歌手音色的性别因子。以抽象的男性、女性作为上下界。在数值偏向男性时,口型偏圆,发声位置靠后,声音浑厚。在数值偏向女性时,口型偏扁,发声位置靠前,声音尖细。默认数值为适中。
- 音区偏移
AI歌声数据库的参数,能够在固定音高的前提下改变音色,效果类似于Standard歌声数据库的“表现力分组”功能。以音分为单位,100音分为一个半音,可以完成上下400音分的音色调节。默认数值为0音分。
|
|
外部链接和注释
- ↑ Aaron van den Oord; 等. [1609.03499] WaveNet: A Generative Model for Raw Audio [WaveNet: 一种原始音频的生成模型]. arXiv.org. 2016-09-19 (English).
- ↑ 两种歌声数据库大小有明显不同。AI歌声数据库由于只存储机器学习训练好的模型,仅需不到100MB存储空间。
- ↑ sleepwalking. 新的歌声合成软件. 哔哩哔哩. 2017-12-01.
- ↑ sleepwalking. 自制歌声合成软件Synth V展示阿童木主题曲. 哔哩哔哩. 2018-05-07.
- ↑ 【新歌声合成引擎SynthV】SILENCE【自调教cover / cillia】
- ↑ 【SynthV首款正式歌声数据库抢先试用】好想你【艾可(AiKO)】
- ↑ 【SynthV】全新男声歌声数据库DEMO【ゲンブ(玄武)】
- ↑ sleepwalking. 歌声合成软件 Synthesizer V 正式发布. 哔哩哔哩. 2018-12-24.
- ↑ Web Synthesizer V
- ↑ SynthV第二代歌声合成引擎先行试听「404 Not Found」
- ↑ Synthesizer V Studio 发布会全程回放
- ↑ Synthesizer V AI歌声合成测试曲
- ↑ 第三代 Synthesizer V AI 歌声合成技术
- ↑ Synthesizer V Studio 1.4.0 更新日志
- ↑ Synthesizer V AI 跨语种合成更新 - Synthesizer V Studio 1.5.0 更新日志
- ↑ Synthesizer V AI:高动态歌声建模技术
- ↑ Synthesizer V Studio 1.8.0 正式版更新日志
- ↑ Synthesizer V Studio 1.9.0 正式版更新日志
- ↑ Synthesizer V Studio 1.10.0 正式版更新日志
- ↑ Synthesizer V Studio 1.11.0 正式版更新日志
- ↑ 分开发布
- ↑ Dreamtonics官方页面