VCPedia.cn

Synthesizer V

愛蓮娜芙緹info.jpeg
VCPedia歡迎您參與完善Synthesizer V相關條目

歡迎正在閱讀這個條目的您協助編輯本條目。編輯前請閱讀Wiki入門或條目編輯規範，並查找相關資料。VCPedia祝您在本站度過愉快的時光。

Synthesizer V R2 logo.svg
基本資料
軟體名 Synthesizer V
作業系統 Windows / Linux / macOS
語言 日語、英語、華語、粵語、西班牙語
軟體類型 歌聲合成
首次發布 技術預覽版
（2018年8月19日）
測試版本 Synthesizer V Studio 1.11.2b2
（2024年7月11日）
圖片大小 420px
別稱 SynthV、SV
開發商 Dreamtonics Co,. Ltd.
最新版本 Synthesizer V Studio 1.11.0
（2024年4月4日）
代表色 SynthV綠（15E879）

Synthesizer V（簡稱SynthV）是由以華侃如（Kanru Hua）為首的Dreamtonics Co,. Ltd.開發的歌聲合成引擎及編輯器軟體（V表示第5次架構迭代）。該引擎採用了自主研發的基於人工神經網絡及拼接合成算法的LLSM（底層語音模型）技術，僅使用少量採樣數據即能生成自然的聲音。

Synthesizer V使用的歌聲資料庫具有Standard和AI兩種不同版本，分別對應WaveNet vocoder[1]強化的傳統拼接歌聲合成（Standard）和基於機器學習的歌聲合成（AI）。[2]

發展歷程

編輯器和引擎

第一代
  • 2017年12月1日，開發者華侃如在B站首次透露，Synthesizer V是一個長達7年的研發成果[3]。Kanru Hua在2018年5月7日投稿後續視頻[4]。
  • 2018年6月9日，海仔兒_Kyo在B站投稿《雖然歌聲無形》，6月16日Cillia在B站投稿以ENG-F1歌聲資料庫翻唱的《silence》[5]。因其歌聲資料庫十分自然的聲音及兩位調校師的神調校受到廣泛好評。
  • 2018年8月19日，Synthesizer V預覽版發布，內置ENG-F1歌聲資料庫——Eleanor Forte（愛蓮娜·芙緹）。
  • 2018年12月7日，海仔兒_Kyo在B站投稿Synthesizer V首款華語歌聲資料庫艾可翻唱的《好想你》[6]；12月23日授權搬運日語歌聲資料庫玄武試聽DEMO[7]。
  • 2018年12月24日，開發者華侃如發布Synthesizer V首個正式版本[8]，由Animen和平行四界代理銷售。
第二代
  • 2019年12月31日，開發者華侃如公開基於Synthesizer V R2的預覽版Web Synthesizer V[9]，內置Web版本的日語歌聲資料庫masaki（Saki）。
  • 2020年4月11日，星塵Official投稿基於Synthesizer V R2赤羽"精二"歌聲資料庫重調的《404 Not Found》先行試聽曲[10]。
  • 2020年6月26日，Dreamtonics正式發布Synthesizer V Studio[11]，帶來全新設計的用戶界面與Synthesizer V Engine 2.0，由AH-Software、平行四界和Animen代理銷售。
  • 2020年10月30日，Dreamtonics投稿完全基於深度學習的Synthesizer V AI歌聲合成測試曲[12]。
  • 2020年12月25日，Synthesizer V AI正式發布，併入既有的Synthesizer V Studio，以免費升級的形式提供。
  • 2021年2月19日，Synthesizer V AI更新第二代穩定語音模型，提高渲染速度和聲音音質，改善合成穩定性並減小AI歌聲資料庫的體積。
  • 2021年6月18日，Synthesizer V AI迎來第三代升級，帶來明顯的細節增強和更豐富的歌唱表現力[13]。
  • 2021年10月14日，Dreamtonics投稿基於第四代Synthesizer V AI的華語AI女聲測試曲，並開啟征名活動，在11月5日被命名為青溯。
  • 2021年11月18日，Synthesizer V AI正式帶來第四代音高模型，增加可定製、獨立於歌聲資料庫的自動音高調校功能[14]。
  • 2021年12月23日，Synthesizer V AI推出第五代高速渲染與高頻譜解析度模型，音頻保真度和速度得到了提高，編輯器還支持AI歌聲資料庫的跨語種歌聲合成（需歌聲資料庫廠商提供歌聲資料庫升級，無需額外購買和下載，即可合成其他語言的歌聲）[15]。
  • 2022年7月21日，Synthesizer V AI推送高動態歌聲模型，合成歌聲將能夠反映持續演唱過程中的音量連續變化，同時還能夠在合成歌聲中加入實際演唱中會出現的聲音強弱變化與細微的音色變化。[16]。
  • 2022年11月24日，Synthesizer V AI引入高速化擴散概率模型 ，合成歌聲聽起來將比以往更加自然，發音及音高表現更加準確。同時，歌聲能夠更加細緻地運用各自演唱技巧，在例如顫音等方面取得了長足的改進。[17]。
  • 2023年6月21日，Synthesizer V AI改進音高模型，改善跨語種合成效果，增加漢語普通話和英語的說唱合成功能，支持粵語的歌聲合成。[18]。
  • 2023年10月19日，Synthesizer V AI引入RLHF技術，用於生成更加符合用戶偏好的音高曲線。[19]。
  • 2024年4月4日，Synthesizer V為多個 DAW 軟體提供了深度 ARA 集成功能與全新設計的 ARA 插件，新增歌聲轉 MIDI 功能和支持西班牙語的歌聲合成。[20]。

發布歌聲資料庫

第一代

日期 公司 語言 性別 聲庫名 發布資訊
2018年8月19日 Synthesizer V 英語 女聲 愛蓮娜·芙緹 公開
2018年11月11日 Synthesizer V 日語 女聲 闇音連理 開放下載
2018年12月24日 Synthesizer V 日語 男聲 玄武 開放下載
2018年12月28日 Animen 華語 女聲 艾可 發售，平行四界則代理銷售
2019年4月19日 平行四界 華語 女聲 赤羽 發布試聽曲並開啟預售
2019年5月31日 平行四界 華語 女聲 詩岸 發布試聽曲並開啟預售
2019年6月28日 平行四界 華語 女聲 蒼穹 發布試聽曲並開啟預售
2019年8月22日 平行四界 華語 女聲 海伊 發布試聽曲並開啟預售

第二代

日期 公司 語言（採樣語言，主次排序） 性別 聲庫名 採用技術 事件
2020年6月26日 平行四界 華語 女聲 赤羽 Std 預售，同年7月29日Animen代理銷售
2020年6月26日 平行四界 華語 女聲 詩岸 Std 預售，同年7月29日Animen代理銷售
2020年6月26日 平行四界 華語 女聲 蒼穹 Std 預售，同年7月29日Animen代理銷售
2020年6月26日 平行四界 華語 女聲 海伊 Std 預售，同年7月29日Animen代理銷售
2020年6月26日 Dreamtonics 日語 女聲 Saki Std AH-Software代理發售
2020年6月26日 AH-Software 日語 女聲 琴葉 茜・葵 Std 發售
2020年7月13日 Animen 華語 女聲 艾可 Std 發售
2020年7月13日 Animen 日語 男聲 玄武 Std 發售
2020年7月13日 Animen 日語 女聲 Saki Std 發售，2021年1月21日授權AH-Software代理發售
2020年8月7日 平行四界 華語 男聲 牧心 Std 發布試聽曲並開啟預售
2020年8月12日 平行四界 華語 女聲 Minus Std 發布試聽曲並開啟預售
2020年12月25日 Dreamtonics 日語 女聲 Saki AI 發布，AH-Software和Animen則代理銷售
2021年3月18日 AH-Software 日語 女聲 小春六花 Std/AI 發售
2021年6月18日 AH-Software 日語/英語[21] 女聲 弦卷真紀 Std/AI 發售
2021年10月13日 Animen 日語 女聲 闇音レンリ Std 發布，開放免費註冊通道
2021年11月26日 AH-Software 日語 女聲 追儺醬 Std/AI 發售
2021年12月1日 Dreamtonics 華語 女聲 青溯 AI 發售，並在淘寶開設店鋪銷售
2021年12月6日 Animen 英語 女聲 愛蓮娜·芙緹 AI 發售
2021年12月11日 AUDIOLOGIE 英語 女聲 鈴愛莉 AI 發售，並在淘寶開設店鋪銷售
2022年1月19日 Eclipsed Sounds 英語 女聲 SOLARIA AI 發售
2022年1月19日 平行四界 華語 女聲 星塵Infinity AI 發布試聽曲，1月27日開啟預售，2月20日正式發布
2022年1月27日 AH-Software 日語 女聲 京町精華 Std/AI 發售
2022年2月4日 Dreamtonics 英語 男聲 Kevin AI 發售，AH-Software也有代理銷售
2022年2月4日 Dreamtonics 日語 男聲 Ryo AI 發售，AH-Software也有代理銷售
2022年4月9日 Dreamtonics 華語 男聲 默辰 AI 發售，AH-Software也有代理銷售
2022年4月13日 AH-Software 日語 女聲 夏色花梨 AI 發售
2022年5月4日 Dreamtonics 華語 男聲 岸曉 AI 發售，AH-Software也有代理銷售
2022年5月27日 Dreamtonics 華語 女聲 渢漪 AI 發售，AH-Software也有代理銷售
2022年7月21日 Dreamtonics 華語/英語 女聲 Weina AI 發售，並在微信小程序開設網店銷售
2022年9月22日 Dreamtonics 日語 男聲 Yuma AI 發布，10月7日發售，AH-Software也有代理銷售
2022年9月22日 Dreamtonics 英語 女聲 Natalie AI 發布，10月7日發售，AH-Software也有代理銷售
2022年10月20日 AH-Software 日語 女聲 花隈千冬 AI 發售
2022年10月27日 Dreamtonics 日語 女聲 Mai AI 發布，11月10日免費提供於Pro用戶
2022年11月15日 Eclipsed Sounds 英語 男聲 ASTERIAN AI 發布，12月2日發售
2022年11月24日 Dreamtonics 華語 女聲 從錚 AI 發布，12月12日發售
2022年11月24日 Dreamtonics 華語 男聲 煊宇 AI 發布，12月12日發售
2022年12月24日 Dreamtonics 華語 女聲 澄宵 AI 發布，2023年1月9日發售
2023年1月5日 E-CAPSULE 華語 女聲 夏語遙 AI 發布試聽，1月19日預售，1月30日發售
2023年2月3日 Dreamtonics 英語 男聲 Ninezero AI 發布，2月16日發售，AH-Software也有代理銷售
2023年2月12日 AUDIOLOGIE 英語 男聲 JUN AI 4月20日發售，並在淘寶開設店鋪銷售
2023年4月3日 AH-Software 日語 女聲 重音テト AI 發布，4月27日發售
2023年4月11日 Eclipsed Sounds 英語/西班牙語 男聲 SAROS AI 發布試聽，11月24日發售
2023年4月18日 Dreamtonics 華語 男聲 D-Lin AI 發布，7月4日發售，AH-Software也有代理銷售
2023年4月18日 Dreamtonics 英語 男聲 Ritchy AI 發布，7月4日發售，AH-Software也有代理銷售
2023年6月1日 Dreamtonics 華語 男聲 林籟 AI 發布試聽，6月17日發售
2023年6月1日 Dreamtonics 華語 女聲 韻泉 AI 發布試聽，6月17日發售
2023年7月25日 AH-Software 日語 女聲 櫻乃空 AI 發布試聽，8月24日發售
2023年9月28日 KAMITSUBAKI STUDIO 日語 女聲 可不 AI 開啟預售
2023年10月1日 AUDIOLOGIE 英語 女聲 鈴愛莉 Arcane AI 發布試聽，12月11日發售
2023年10月3日 Dreamtonics 粵語 男聲 未抒 AI 發布試聽，10月26日發售
2023年10月3日 Dreamtonics 日語/英語 女聲 Sheena AI 發布試聽，10月26日發售，AH-Software也有代理銷售
2023年10月3日 Dreamtonics 日語 女聲 Eri AI 發布試聽，10月26日發售及發布功能限制版聲庫，AH-Software也有代理銷售
2023年10月3日 Dreamtonics 英語 男聲 Hayden AI 發布試聽，10月26日發售，AH-Software也有代理銷售
2023年10月26日 Bushiroad Music 日語 女聲 POPY AI 開啟預售，12月21日發售
2023年10月26日 Bushiroad Music 日語 女聲 ROSE AI 開啟預售，12月21日發售
2023年11月21日 Internet 日語 女聲 Megpoid AI 發布試聽，12月20日發售
2023年11月28日 Dreamtonics 日語 女聲 Ayame AI 發布試聽，12月7日發售，AH-Software也有代理銷售
2023年11月28日 Dreamtonics 日語 男聲 Jin AI 發布試聽，12月7日發售，AH-Software也有代理銷售
2023年12月5日 E-CAPSULE 華語 男聲 奧斯卡 AI 發布試聽，12月26日發售
2023年12月8日 平行四界 華語 女聲 永夜Minus AI 發售
2024年1月30日 Dreamtonics 華語 女聲 奕夕 AI 發布試聽，3月15日發售
2024年4月1日 AH-Software 日語 男聲 弗里摩俠 AI 發布試聽，4月25日發售
2024年4月25日 Bushiroad Music 日語 女聲 PASTEL AI 開發、售賣決定
2024年4月25日 Bushiroad Music 日語 女聲 HALO AI 開發、售賣決定
2024年5月31日 En-gene 日語 女聲 白神芽音 AI 公布旗下的私有聲庫使用Synthesizer V AI技術
2024年6月3日 Internet 日語 女聲 ROSA AI 發售
2024年7月19日 Dreamtonics 粵語 女聲 翎婉 AI 發售

技術

Synthesizer V AI

Synthesizer V AI 是搭載了 Dreamtonics 研發訓練的深度學習網絡（DNN）為核心的歌聲合成技術。通過 Synthesizer V AI 生成的歌聲，有如人類歌手般自然流暢，細節飽滿，無論何種音樂風格都能應對自如。同時，經過優化的神經網絡無需複雜昂貴的硬體即可在大多數設備上流暢運行。

根據不同的使用需要，Synthesizer V AI 提供了兩種渲染模式可供選擇：偏好品質模式使用完整大小的神經網絡模型，將 Synthesizer V AI 技術的潛力完整發揮；偏好速度模式則使用較小的神經網絡模型，可加快渲染速度。

Synthesizer V Standard（標準 Std）

Synthesizer V Standard 將 AI 技術融入傳統基於樣本的歌聲合成技術，創造出驅動全新歌聲合成引擎的歌聲資料庫，通過自然歌聲擴展（Natural Singing Extension）的機器學習技術，實現了更加真實的合成音色。

官方介紹

逼真無暇的歌聲 彈指可得 頃刻呈現

音樂製作的下一個時代正為你到來。 憑藉多年以來對人工智慧、信號處理的深入研究， 加上對音樂堅定不移的熱情，促成了 Synthesizer V 的誕生。 為實現音樂製作人共同的夢想，我們劃時代的歌聲合成引擎忠實地重現了 人類歌聲演唱的每一分變化，而不再使語言及詞彙成為演唱的障礙。 隨意變化、逼真自然的人聲已觸手可及，幫助你實現每一個音樂夢想。 就在今天，開啟音樂製作的下一個時代。[22]

功能特性

音樂製作的新紀元

宛若真實的靈動歌聲，觸手可及

紛繁的音色與切實的溫度，是歌聲必不可少的元素。 在帷幕之後，Synthesizer V 採用基於深度神經網絡打造的合成引擎， 能夠合成令人震撼的自然生動的歌聲。 此外，與現有的眾多神經網絡解決方案不同， Synthesizer V 是首款能夠 100% 離線運行且依舊高效的合成引擎。 網絡不穩定？無需擔心。你的創作將始終伴你左右。


加速音樂創作的原型設計

無限的歌聲表達

結合日益龐大的歌聲資料庫陣容， 隨時調用新的歌聲嘗試不同風格。 同時還可以通過形式豐富的聲線參數， 例如胸腔 (Chest)、實唱 (Belt)、氣息 (Breathy)， 深入研究並定製獨屬於作品的歌聲。

實時渲染

通過實時渲染功能將歌聲可視化為波形， 實時呈現創作者對詞曲的每一處修改。 幫助創作者最大限度緩解聽力疲勞，減少從想法到聲音的漫長循環。

跨語言合成功能

Synthesizer V 歌聲資料庫來自華語、英語、日語、粵語、西班牙語五種語言。 跨語言合成技術打破了合成歌聲的語言藩籬， 讓每一款歌聲都能使用四種語言進行演唱。


為專業人士打造的純淨人聲音軌

生成清晰的人聲音軌，捕捉 Demo 的最佳呈現

音樂創作從未如此簡單。 只需將 MIDI 文件導入 Synthesizer V Studio 並輸入歌詞，歌曲便頃刻呈現。 倘若靈感就在指尖，直接通過 MIDI 鍵盤彈奏，即可錄入鮮活的旋律。 Synthesizer V Studio Pro 還能夠通過 VST3、ARA2 與 AudioUnit 接口，集成到您的工作流程中。

八大參數

音高偏差

實時改變實際歌聲音高與書寫音符音高的距離。以音分為單位，100音分為一個半音，有±300音分，±600音分，±1200音分三種模式可供選擇。因此，最多可以完成上下一個八度的音高調節。默認數值為0音分。

顫音包絡

實時改變顫音的深度。數值範圍為音符屬性中顫音深度的0倍至2倍。默認數值為1倍。

響度

實時改變歌聲音量的大小。以分貝為單位，數值範圍為±12dB。默認數值為0dB。

張力

實時改變虛擬歌手聲帶的緊張程度。以抽象的緊張、放鬆作為數值的上下界。在數值偏向緊張時，歌手聲音明亮，堅實，有力。在數值偏向放鬆時，歌手氣聲較大，溫柔。默認數值為適中。

氣聲

實時改變歌聲氣聲的大小。以抽象的氣聲、清晰作為上下界。默認數值為適中。

發聲

實時改變真實歌聲（相對氣聲）的響度，而不影響氣聲的大小。以抽象的有聲、無聲作為上下界。在數值偏向無聲時，真實歌聲的音量減小，聲音以氣聲為主。默認數值為有聲。

性別

實時改變虛擬歌手音色的性別因子。以抽象的男性、女性作為上下界。在數值偏向男性時，口型偏圓，發聲位置靠後，聲音渾厚。在數值偏向女性時，口型偏扁，發聲位置靠前，聲音尖細。默認數值為適中。

音區偏移

AI歌聲資料庫的參數，能夠在固定音高的前提下改變音色，效果類似於Standard歌聲資料庫的「表現力分組」功能。以音分為單位，100音分為一個半音，可以完成上下400音分的音色調節。默認數值為0音分。

外部連結和注釋

  1. ↑ Aaron van den Oord; 等. [1609.03499] WaveNet: A Generative Model for Raw Audio [WaveNet: 一種原始音頻的生成模型]. arXiv.org. 2016-09-19 （English）. 
  2. ↑ 兩種歌聲資料庫大小有明顯不同。AI歌聲資料庫由於只存儲機器學習訓練好的模型，僅需不到100MB存儲空間。
  3. ↑ sleepwalking. 新的歌聲合成軟件. 嗶哩嗶哩. 2017-12-01. 
  4. ↑ sleepwalking. 自製歌聲合成軟件Synth V展示阿童木主題曲. 嗶哩嗶哩. 2018-05-07. 
  5. ↑ 【新歌聲合成引擎SynthV】SILENCE【自調教cover / cillia】
  6. ↑ 【SynthV首款正式歌聲資料庫搶先試用】好想你【艾可（AiKO）】
  7. ↑ 【SynthV】全新男聲歌聲資料庫DEMO【ゲンブ（玄武）】
  8. ↑ sleepwalking. 歌聲合成軟件 Synthesizer V 正式發布. 嗶哩嗶哩. 2018-12-24. 
  9. ↑ Web Synthesizer V
  10. ↑ SynthV第二代歌聲合成引擎先行試聽「404 Not Found」
  11. ↑ Synthesizer V Studio 發布會全程回放
  12. ↑ Synthesizer V AI歌聲合成測試曲
  13. ↑ 第三代 Synthesizer V AI 歌聲合成技術
  14. ↑ Synthesizer V Studio 1.4.0 更新日誌
  15. ↑ Synthesizer V AI 跨語種合成更新 - Synthesizer V Studio 1.5.0 更新日誌
  16. ↑ Synthesizer V AI：高動態歌聲建模技術
  17. ↑ Synthesizer V Studio 1.8.0 正式版更新日誌
  18. ↑ Synthesizer V Studio 1.9.0 正式版更新日誌
  19. ↑ Synthesizer V Studio 1.10.0 正式版更新日誌
  20. ↑ Synthesizer V Studio 1.11.0 正式版更新日誌
  21. ↑ 分開發布
  22. ↑ Dreamtonics官方頁面

en:Synthesizer V

取自「https://vcpedia.cn/index.php?title=Synthesizer_V&oldid=427833」