VCPedia.cn

Synthesizer V

不可逆（讨论 | 贡献）2024年12月21日 (六) 20:33的版本 （文本替换 - 替换“星尘|星尘”为“星尘”）
(差异) ←上一版本 | 最后版本 (差异) | 下一版本→ (差异)
爱莲娜芙缇info.jpeg
VCPedia欢迎您参与完善Synthesizer V相关条目

欢迎正在阅读这个条目的您协助编辑本条目。编辑前请阅读Wiki入门或条目编辑规范，并查找相关资料。VCPedia祝您在本站度过愉快的时光。

Synthesizer V R2 logo.svg
基本资料
软件名 Synthesizer V
操作系统 Windows / Linux / macOS
语言 日语、英语、华语、粤语、西班牙语
软件类型 歌声合成
首次发布 技术预览版
（2018年8月19日）
测试版本 Synthesizer V Studio 1.11.2b2
（2024年7月11日）
图片大小 420px
别称 SynthV、SV
开发商 Dreamtonics Co,. Ltd.
最新版本 Synthesizer V Studio 1.11.0
（2024年4月4日）
代表色 SynthV绿（15E879）

Synthesizer V（简称SynthV）是由以华侃如（Kanru Hua）为首的Dreamtonics Co,. Ltd.开发的歌声合成引擎及编辑器软件（V表示第5次架构迭代）。该引擎采用了自主研发的基于人工神经网络及拼接合成算法的LLSM（底层语音模型）技术，仅使用少量采样数据即能生成自然的声音。

Synthesizer V使用的歌声数据库具有Standard和AI两种不同版本，分别对应WaveNet vocoder[1]强化的传统拼接歌声合成（Standard）和基于机器学习的歌声合成（AI）。[2]

发展历程

编辑器和引擎

第一代
  • 2017年12月1日，开发者华侃如在B站首次透露，Synthesizer V是一个长达7年的研发成果[3]。Kanru Hua在2018年5月7日投稿后续视频[4]。
  • 2018年6月9日，海仔儿_Kyo在B站投稿《虽然歌声无形》，6月16日Cillia在B站投稿以ENG-F1歌声数据库翻唱的《silence》[5]。因其歌声数据库十分自然的声音及两位调校师的神调校受到广泛好评。
  • 2018年8月19日，Synthesizer V预览版发布，内置ENG-F1歌声数据库——Eleanor Forte（爱莲娜·芙缇）。
  • 2018年12月7日，海仔儿_Kyo在B站投稿Synthesizer V首款华语歌声数据库艾可翻唱的《好想你》[6]；12月23日授权搬运日语歌声数据库玄武试听DEMO[7]。
  • 2018年12月24日，开发者华侃如发布Synthesizer V首个正式版本[8]，由Animen和平行四界代理销售。
第二代
  • 2019年12月31日，开发者华侃如公开基于Synthesizer V R2的预览版Web Synthesizer V[9]，内置Web版本的日语歌声数据库masaki（Saki）。
  • 2020年4月11日，星尘Official投稿基于Synthesizer V R2赤羽"精二"歌声数据库重调的《404 Not Found》先行试听曲[10]。
  • 2020年6月26日，Dreamtonics正式发布Synthesizer V Studio[11]，带来全新设计的用户界面与Synthesizer V Engine 2.0，由AH-Software、平行四界和Animen代理销售。
  • 2020年10月30日，Dreamtonics投稿完全基于深度学习的Synthesizer V AI歌声合成测试曲[12]。
  • 2020年12月25日，Synthesizer V AI正式发布，并入既有的Synthesizer V Studio，以免费升级的形式提供。
  • 2021年2月19日，Synthesizer V AI更新第二代稳定语音模型，提高渲染速度和声音音质，改善合成稳定性并减小AI歌声数据库的体积。
  • 2021年6月18日，Synthesizer V AI迎来第三代升级，带来明显的细节增强和更丰富的歌唱表现力[13]。
  • 2021年10月14日，Dreamtonics投稿基于第四代Synthesizer V AI的华语AI女声测试曲，并开启征名活动，在11月5日被命名为青溯。
  • 2021年11月18日，Synthesizer V AI正式带来第四代音高模型，增加可定制、独立于歌声数据库的自动音高调校功能[14]。
  • 2021年12月23日，Synthesizer V AI推出第五代高速渲染与高频谱分辨率模型，音频保真度和速度得到了提高，编辑器还支持AI歌声数据库的跨语种歌声合成（需歌声数据库厂商提供歌声数据库升级，无需额外购买和下载，即可合成其他语言的歌声）[15]。
  • 2022年7月21日，Synthesizer V AI推送高动态歌声模型，合成歌声将能够反映持续演唱过程中的音量连续变化，同时还能够在合成歌声中加入实际演唱中会出现的声音强弱变化与细微的音色变化。[16]。
  • 2022年11月24日，Synthesizer V AI引入高速化扩散概率模型 ，合成歌声听起来将比以往更加自然，发音及音高表现更加准确。同时，歌声能够更加细致地运用各自演唱技巧，在例如颤音等方面取得了长足的改进。[17]。
  • 2023年6月21日，Synthesizer V AI改进音高模型，改善跨语种合成效果，增加汉语普通话和英语的说唱合成功能，支持粤语的歌声合成。[18]。
  • 2023年10月19日，Synthesizer V AI引入RLHF技术，用于生成更加符合用户偏好的音高曲线。[19]。
  • 2024年4月4日，Synthesizer V为多个 DAW 软件提供了深度 ARA 集成功能与全新设计的 ARA 插件，新增歌声转 MIDI 功能和支持西班牙语的歌声合成。[20]。

发布歌声数据库

第一代

日期 公司 语言 性别 声库名 发布资讯
2018年8月19日 Synthesizer V 英语 女声 爱莲娜·芙缇 公开
2018年11月11日 Synthesizer V 日语 女声 闇音连理 开放下载
2018年12月24日 Synthesizer V 日语 男声 玄武 开放下载
2018年12月28日 Animen 华语 女声 艾可 发售，平行四界则代理销售
2019年4月19日 平行四界 华语 女声 赤羽 发布试听曲并开启预售
2019年5月31日 平行四界 华语 女声 诗岸 发布试听曲并开启预售
2019年6月28日 平行四界 华语 女声 苍穹 发布试听曲并开启预售
2019年8月22日 平行四界 华语 女声 海伊 发布试听曲并开启预售

第二代

日期 公司 语言（采样语言，主次排序） 性别 声库名 采用技术 事件
2020年6月26日 平行四界 华语 女声 赤羽 Std 预售，同年7月29日Animen代理销售
2020年6月26日 平行四界 华语 女声 诗岸 Std 预售，同年7月29日Animen代理销售
2020年6月26日 平行四界 华语 女声 苍穹 Std 预售，同年7月29日Animen代理销售
2020年6月26日 平行四界 华语 女声 海伊 Std 预售，同年7月29日Animen代理销售
2020年6月26日 Dreamtonics 日语 女声 Saki Std AH-Software代理发售
2020年6月26日 AH-Software 日语 女声 琴葉 茜・葵 Std 发售
2020年7月13日 Animen 华语 女声 艾可 Std 发售
2020年7月13日 Animen 日语 男声 玄武 Std 发售
2020年7月13日 Animen 日语 女声 Saki Std 发售，2021年1月21日授权AH-Software代理发售
2020年8月7日 平行四界 华语 男声 牧心 Std 发布试听曲并开启预售
2020年8月12日 平行四界 华语 女声 Minus Std 发布试听曲并开启预售
2020年12月25日 Dreamtonics 日语 女声 Saki AI 发布，AH-Software和Animen则代理销售
2021年3月18日 AH-Software 日语 女声 小春六花 Std/AI 发售
2021年6月18日 AH-Software 日语/英语[21] 女声 弦卷真纪 Std/AI 发售
2021年10月13日 Animen 日语 女声 闇音レンリ Std 发布，开放免费注册通道
2021年11月26日 AH-Software 日语 女声 追傩酱 Std/AI 发售
2021年12月1日 Dreamtonics 华语 女声 青溯 AI 发售，并在淘宝开设店铺销售
2021年12月6日 Animen 英语 女声 爱莲娜·芙缇 AI 发售
2021年12月11日 AUDIOLOGIE 英语 女声 铃爱莉 AI 发售，并在淘宝开设店铺销售
2022年1月19日 Eclipsed Sounds 英语 女声 SOLARIA AI 发售
2022年1月19日 平行四界 华语 女声 星尘Infinity AI 发布试听曲，1月27日开启预售，2月20日正式发布
2022年1月27日 AH-Software 日语 女声 京町精华 Std/AI 发售
2022年2月4日 Dreamtonics 英语 男声 Kevin AI 发售，AH-Software也有代理销售
2022年2月4日 Dreamtonics 日语 男声 Ryo AI 发售，AH-Software也有代理销售
2022年4月9日 Dreamtonics 华语 男声 默辰 AI 发售，AH-Software也有代理销售
2022年4月13日 AH-Software 日语 女声 夏色花梨 AI 发售
2022年5月4日 Dreamtonics 华语 男声 岸晓 AI 发售，AH-Software也有代理销售
2022年5月27日 Dreamtonics 华语 女声 沨漪 AI 发售，AH-Software也有代理销售
2022年7月21日 Dreamtonics 华语/英语 女声 Weina AI 发售，并在微信小程序开设网店销售
2022年9月22日 Dreamtonics 日语 男声 Yuma AI 发布，10月7日发售，AH-Software也有代理销售
2022年9月22日 Dreamtonics 英语 女声 Natalie AI 发布，10月7日发售，AH-Software也有代理销售
2022年10月20日 AH-Software 日语 女声 花隈千冬 AI 发售
2022年10月27日 Dreamtonics 日语 女声 Mai AI 发布，11月10日免费提供於Pro用户
2022年11月15日 Eclipsed Sounds 英语 男声 ASTERIAN AI 发布，12月2日发售
2022年11月24日 Dreamtonics 华语 女声 从铮 AI 发布，12月12日发售
2022年11月24日 Dreamtonics 华语 男声 煊宇 AI 发布，12月12日发售
2022年12月24日 Dreamtonics 华语 女声 澄宵 AI 发布，2023年1月9日发售
2023年1月5日 E-CAPSULE 华语 女声 夏语遥 AI 发布试听，1月19日预售，1月30日发售
2023年2月3日 Dreamtonics 英语 男声 Ninezero AI 发布，2月16日发售，AH-Software也有代理销售
2023年2月12日 AUDIOLOGIE 英语 男声 JUN AI 4月20日发售，并在淘宝开设店铺销售
2023年4月3日 AH-Software 日语 女声 重音テト AI 发布，4月27日发售
2023年4月11日 Eclipsed Sounds 英语/西班牙语 男声 SAROS AI 发布试听，11月24日发售
2023年4月18日 Dreamtonics 华语 男声 D-Lin AI 发布，7月4日发售，AH-Software也有代理销售
2023年4月18日 Dreamtonics 英语 男声 Ritchy AI 发布，7月4日发售，AH-Software也有代理销售
2023年6月1日 Dreamtonics 华语 男声 林籁 AI 发布试听，6月17日发售
2023年6月1日 Dreamtonics 华语 女声 韵泉 AI 发布试听，6月17日发售
2023年7月25日 AH-Software 日语 女声 樱乃空 AI 发布试听，8月24日发售
2023年9月28日 KAMITSUBAKI STUDIO 日语 女声 可不 AI 开启预售
2023年10月1日 AUDIOLOGIE 英语 女声 铃爱莉 Arcane AI 发布试听，12月11日发售
2023年10月3日 Dreamtonics 粤语 男声 未抒 AI 发布试听，10月26日发售
2023年10月3日 Dreamtonics 日语/英语 女声 Sheena AI 发布试听，10月26日发售，AH-Software也有代理销售
2023年10月3日 Dreamtonics 日语 女声 Eri AI 发布试听，10月26日发售及发布功能限制版声库，AH-Software也有代理销售
2023年10月3日 Dreamtonics 英语 男声 Hayden AI 发布试听，10月26日发售，AH-Software也有代理销售
2023年10月26日 Bushiroad Music 日语 女声 POPY AI 开启预售，12月21日发售
2023年10月26日 Bushiroad Music 日语 女声 ROSE AI 开启预售，12月21日发售
2023年11月21日 Internet 日语 女声 Megpoid AI 发布试听，12月20日发售
2023年11月28日 Dreamtonics 日语 女声 Ayame AI 发布试听，12月7日发售，AH-Software也有代理销售
2023年11月28日 Dreamtonics 日语 男声 Jin AI 发布试听，12月7日发售，AH-Software也有代理销售
2023年12月5日 E-CAPSULE 华语 男声 奥斯卡 AI 发布试听，12月26日发售
2023年12月8日 平行四界 华语 女声 永夜Minus AI 发售
2024年1月30日 Dreamtonics 华语 女声 奕夕 AI 发布试听，3月15日发售
2024年4月1日 AH-Software 日语 男声 弗里摩侠 AI 发布试听，4月25日发售
2024年4月25日 Bushiroad Music 日语 女声 PASTEL AI 开发、售卖决定
2024年4月25日 Bushiroad Music 日语 女声 HALO AI 开发、售卖决定
2024年5月31日 En-gene 日语 女声 白神芽音 AI 公布旗下的私有声库使用Synthesizer V AI技术
2024年6月3日 Internet 日语 女声 ROSA AI 发售
2024年7月19日 Dreamtonics 粤语 女声 翎婉 AI 发售

技术

Synthesizer V AI

Synthesizer V AI 是搭载了 Dreamtonics 研发训练的深度学习网络（DNN）为核心的歌声合成技术。通过 Synthesizer V AI 生成的歌声，有如人类歌手般自然流畅，细节饱满，无论何种音乐风格都能应对自如。同时，经过优化的神经网络无需复杂昂贵的硬件即可在大多数设备上流畅运行。

根据不同的使用需要，Synthesizer V AI 提供了两种渲染模式可供选择：偏好品质模式使用完整大小的神经网络模型，将 Synthesizer V AI 技术的潜力完整发挥；偏好速度模式则使用较小的神经网络模型，可加快渲染速度。

Synthesizer V Standard（标准 Std）

Synthesizer V Standard 将 AI 技术融入传统基于样本的歌声合成技术，创造出驱动全新歌声合成引擎的歌声数据库，通过自然歌声扩展（Natural Singing Extension）的机器学习技术，实现了更加真实的合成音色。

官方介绍

逼真无暇的歌声 弹指可得 顷刻呈现

音乐制作的下一个时代正为你到来。 凭借多年以来对人工智能、信号处理的深入研究， 加上对音乐坚定不移的热情，促成了 Synthesizer V 的诞生。 为实现音乐制作人共同的梦想，我们划时代的歌声合成引擎忠实地重现了 人类歌声演唱的每一分变化，而不再使语言及词汇成为演唱的障碍。 随意变化、逼真自然的人声已触手可及，帮助你实现每一个音乐梦想。 就在今天，开启音乐制作的下一个时代。[22]

功能特性

音乐制作的新纪元

宛若真实的灵动歌声，触手可及

纷繁的音色与切实的温度，是歌声必不可少的元素。 在帷幕之后，Synthesizer V 采用基于深度神经网络打造的合成引擎， 能够合成令人震撼的自然生动的歌声。 此外，与现有的众多神经网络解决方案不同， Synthesizer V 是首款能够 100% 离线运行且依旧高效的合成引擎。 网络不稳定？无需担心。你的创作将始终伴你左右。


加速音乐创作的原型设计

无限的歌声表达

结合日益庞大的歌声数据库阵容， 随时调用新的歌声尝试不同风格。 同时还可以通过形式丰富的声线参数， 例如胸腔 (Chest)、实唱 (Belt)、气息 (Breathy)， 深入研究并定制独属于作品的歌声。

实时渲染

通过实时渲染功能将歌声可视化为波形， 实时呈现创作者对词曲的每一处修改。 帮助创作者最大限度缓解听力疲劳，减少从想法到声音的漫长循环。

跨语言合成功能

Synthesizer V 歌声数据库来自华语、英语、日语、粤语、西班牙语五种语言。 跨语言合成技术打破了合成歌声的语言藩篱， 让每一款歌声都能使用四种语言进行演唱。


为专业人士打造的纯净人声音轨

生成清晰的人声音轨，捕捉 Demo 的最佳呈现

音乐创作从未如此简单。 只需将 MIDI 文件导入 Synthesizer V Studio 并输入歌词，歌曲便顷刻呈现。 倘若灵感就在指尖，直接通过 MIDI 键盘弹奏，即可录入鲜活的旋律。 Synthesizer V Studio Pro 还能够通过 VST3、ARA2 与 AudioUnit 接口，集成到您的工作流程中。

八大参数

音高偏差

实时改变实际歌声音高与书写音符音高的距离。以音分为单位，100音分为一个半音，有±300音分，±600音分，±1200音分三种模式可供选择。因此，最多可以完成上下一个八度的音高调节。默认数值为0音分。

颤音包络

实时改变颤音的深度。数值范围为音符属性中颤音深度的0倍至2倍。默认数值为1倍。

响度

实时改变歌声音量的大小。以分贝为单位，数值范围为±12dB。默认数值为0dB。

张力

实时改变虚拟歌手声带的紧张程度。以抽象的紧张、放松作为数值的上下界。在数值偏向紧张时，歌手声音明亮，坚实，有力。在数值偏向放松时，歌手气声较大，温柔。默认数值为适中。

气声

实时改变歌声气声的大小。以抽象的气声、清晰作为上下界。默认数值为适中。

发声

实时改变真实歌声（相对气声）的响度，而不影响气声的大小。以抽象的有声、无声作为上下界。在数值偏向无声时，真实歌声的音量减小，声音以气声为主。默认数值为有声。

性别

实时改变虚拟歌手音色的性别因子。以抽象的男性、女性作为上下界。在数值偏向男性时，口型偏圆，发声位置靠后，声音浑厚。在数值偏向女性时，口型偏扁，发声位置靠前，声音尖细。默认数值为适中。

音区偏移

AI歌声数据库的参数，能够在固定音高的前提下改变音色，效果类似于Standard歌声数据库的“表现力分组”功能。以音分为单位，100音分为一个半音，可以完成上下400音分的音色调节。默认数值为0音分。

外部链接和注释

  1. ↑ Aaron van den Oord; 等. [1609.03499] WaveNet: A Generative Model for Raw Audio [WaveNet: 一种原始音频的生成模型]. arXiv.org. 2016-09-19 （English）. 
  2. ↑ 两种歌声数据库大小有明显不同。AI歌声数据库由于只存储机器学习训练好的模型，仅需不到100MB存储空间。
  3. ↑ sleepwalking. 新的歌声合成软件. 哔哩哔哩. 2017-12-01. 
  4. ↑ sleepwalking. 自制歌声合成软件Synth V展示阿童木主题曲. 哔哩哔哩. 2018-05-07. 
  5. ↑ 【新歌声合成引擎SynthV】SILENCE【自调教cover / cillia】
  6. ↑ 【SynthV首款正式歌声数据库抢先试用】好想你【艾可（AiKO）】
  7. ↑ 【SynthV】全新男声歌声数据库DEMO【ゲンブ（玄武）】
  8. ↑ sleepwalking. 歌声合成软件 Synthesizer V 正式发布. 哔哩哔哩. 2018-12-24. 
  9. ↑ Web Synthesizer V
  10. ↑ SynthV第二代歌声合成引擎先行试听「404 Not Found」
  11. ↑ Synthesizer V Studio 发布会全程回放
  12. ↑ Synthesizer V AI歌声合成测试曲
  13. ↑ 第三代 Synthesizer V AI 歌声合成技术
  14. ↑ Synthesizer V Studio 1.4.0 更新日志
  15. ↑ Synthesizer V AI 跨语种合成更新 - Synthesizer V Studio 1.5.0 更新日志
  16. ↑ Synthesizer V AI：高动态歌声建模技术
  17. ↑ Synthesizer V Studio 1.8.0 正式版更新日志
  18. ↑ Synthesizer V Studio 1.9.0 正式版更新日志
  19. ↑ Synthesizer V Studio 1.10.0 正式版更新日志
  20. ↑ Synthesizer V Studio 1.11.0 正式版更新日志
  21. ↑ 分开发布
  22. ↑ Dreamtonics官方页面

en:Synthesizer V

取自“https://vcpedia.cn/index.php?title=Synthesizer_V&oldid=427833”