莱维特(LEWITT)发布新品 RAY——首支自动对焦你声音的麦克风

2024年4月《Midifan月刊》电子杂志发行,8 篇技术文章在线阅读

低频灵魂,不同凡响:Earthworks DM6 打击乐专用话筒评测

叮咚音频正式代理 Lunacy Audio,令人惊叹的交互式效果器 BEAM 横空出世

精准混音/监听全担当——森海塞尔全能型监听耳机 HD 490 PRO 上手评测


Dreamtonics 推出革命性的实时歌声变形插件 Vocoflex,仅需 10 秒声音片段即可创造实时歌唱的新歌声

官方新闻稿 发布于 2024-04-17 ·

分享到微信

Vocoflex 是一个极具前沿创新力的实验性项目,可以将任何歌声转化为全新的、用户自定义的声音。用户仅需导入长度 10 秒的音频片段,或是通过随机功能自定义性别与音调参数,即可创造出新的歌声,并使用其实时歌唱。


Vocoflex 采用极简主义用户界面,通过新颖、直观的方法,引导用户通过操作光点来混合语音的不同“轮廓”,通过混合光与影来设计出新的歌声。该界面以光点与曲线的形式展示了用户导入的样本及软件生成的语音轮廓,并依照声音特征的相似性自动放置在相近的位置,从而允许用户直观而轻松地组合不同样本之间的声音特征。希望保留的声音特质被光点照亮,而需要舍弃的特质则留在阴影中。

Vocoflex 能够广泛适用于音乐制作与现场表演,能够通过动态改变音色实时改变输出的声音,并提供低至 45 毫秒的动态延迟调整。



Vocoflex 与 Synthesizer V Studio 共同使用


在转换与变形真实人声之外,Vocoflex 还能够与 Dreamtonics 旗下旗舰级歌声合成软件 Synthesizer V Studio 插件版本进行协作。Synthesizer V Studio 能够根据用户输入的旋律与歌词,使用专门制作的 AI 歌声数据库合成高品质歌声。通过将 Vocoflex 放置于 Synthesizer V Studio 插件之后的效果链中,用户可以基于有限的歌声数据库阵容尽情扩展出不同的歌声音色,从而设计出更加丰富的人声编排。


如何使用 Vocoflex

  1. 导入一段音频:Vocoflex 能够自动分析用户导入的歌声音频并转化为可视化曲线,曲线上的每一个点都代表导入音频的其中一部分。
  2. 或者创造一种歌声:声音的“调色盘”就在你眼前。通过随机化声音的“色彩”来制作独属于你的歌声,并通过简单的代码与你的朋友分享!
  3. 输入你的歌声:只需插入麦克风,或是将 Vocoflex 作为插件加载,Vocoflex 就能够根据你导入或创造的音色实时变换你的歌声。
  4. 开始混合:移动软件界面中的光点,实时创建超越想象的人声效果。光点照亮的声音特质将被混合到一起。阴影里的声音特质将被“减去”。全新的歌声,将在光与影的变化间诞生。


保护 Vocoflex 免受误用


尽管 Vocoflex 是为音乐创作活动而设计的,但 Dreamtonics 深知将产品使用在设计目的之外的用途可能带来的道德影响与潜在风险。为了防止对Vocoflex的滥用,Vocoflex 专门针对演唱歌声进行了优化,以避免将Vocoflex用于对普通语音(如说话)的模仿可能造成的潜在风险。

为防止用户使用未经歌手同意的歌声作为“参考”样本从而形成对该歌手的侵权——这是 Vocoflex 软件授权许可协议严格禁止的行为,Vocoflex 引入了声纹水印功能。水印不会影响 Vocoflex 创制的歌声质量,但会将用户专属的软件许可证 ID 嵌入到声音中。Dreamtonics 能够使用专用工具识别通过 Vocoflex 创建的音频样本的创作者,从而协助被侵权歌手向侵权者追责。

Vocoflex 先进的水印技术直接集成到其歌声生成模型中,旨在防止其遭到删除或篡改,从而确保程序的完整性,防止非法使用者绕过水印生成的意图。此外,该水印技术能够抵御各类音频加工操作:即使将歌声通过电话等渠道传播,或是将其与背景音乐混合,或是进行有损压缩,也能够确保水印可识别。

参与 Beta 版测试计划

Dreamtonics 目前正在为 Vocoflex 组织非公开测试,期待与有兴趣探索 Vocoflex 创造潜力的创作者共同探讨 Vocoflex 的未来形态,并就软件的性能、功能、使用场景等方面进行广泛测试与交流。

为确保软件得以在安全、建设性的环境下披露并接受测试,Dreamtonics 现推出一项提供有限名额的测试计划。有兴趣参与的创作者可通过公开表格申请报名,Dreamtonics 将在核实报名者真实身份并完成验证后,免费提供 Vocoflex 评估副本。

您可以通过以下链接进行报名,如果入选,Dreamtonics 将在一周内与您取得联系:

https://9g8iss2t1ch.typeform.com/to/HxfCTaGm

* Vocoflex 目前尚无面向公众公开发布或发售的计划。


软件规格

  • 操作系统:
    • Windows 11
    • macOS 11.0+
  • CPU: 最低 i5-7300U / Ryzen 3 3300U
  • 内存: 4 GB 以上
  • 可用硬盘空间: 200 MB 以上
  • 最高质量模式:160 毫秒往返延迟
  • 最低延迟模式:45 毫秒往返延迟
  • 插件格式
    • VST3 效果器
    • AU 效果器


常见问题解答

Vocoflex 和既有的“声音克隆”或“语音转换”应用有什么不同?

为创建新的声音,Vocoflex 不需要收集大量声音样本并进行模型训练才可使用。用户仅需导入长度不低于 10 秒的音频片段,或透过拾色器功能即可指定变换对象。同时,Vocoflex 是一款离线应用程序,可接受来自麦克风或音频插件接口的实时输入。

尽管 Vocoflex 可以自由改变输入声音的音色,但是软件除了简单的变调外,不会对输入的音高作任何修改。输入声音的发音习惯、节奏及语调将会忠实保留。

Vocoflex 有什么限制或局限?

Vocoflex 无法处理失真或包含背景音乐的输入音频。

我可以使用 Vocoflex 转换说话语音而不是歌声吗?

考虑到语音变形与转换技术潜在的安全性问题和道德风险,Vocoflex 有意面向歌声而非语音进行专门调整优化。从技术角度上 Vocoflex 确实可以处理说话语音,但是其转换效果、音质将不如歌声。

既然 Vocoflex 已经能提供多种音色,我还需要多个 Synthesizer V 歌声数据库吗?

Vocoflex 可以透过插件接口和 Synthesizer V Studio Plugin 联动,扩展 Synthesizer V 的音色范围。然而,Vocoflex 在改变歌声音色的同时,会忠实地保留歌声原有的发音习惯及演唱技巧。

通过将 Vocoflex 与多种 Synthesizer V 歌声数据库结合使用,您能够发掘出更加丰富的歌声编排与表达。

我不能使用 Vocoflex 来做什么?

您不得在未经原始表演者明确知情与同意的前提下,将其音频样本用于 Vocoflex。

您可以使用由 Dreamtonics 发行的 Synthesizer V 歌声数据库,经过 Synthesizer V Studio 软件合成歌声作为 Vocoflex 的实时输入。然而,除非我们的合作伙伴另有声明或明确许可,否则您只能对 Dreamtonics 发行的歌声数据库使用 Vocoflex 进行处理,而不得与非 Dreamtonics 发行的歌声数据库一同使用 Vocoflex。

无论是 Dreamtonics 发行的 Synthesizer V 歌声数据库,还是 Dreamtonics 合作伙伴发行的歌声数据库,您都不得使用 Vocoflex 模仿或试图还原 Synthesizer V 歌声数据库的音色。

在使用 Vocoflex 时,我是否需要专门的 GPU 硬件或互联网连接?

Vocoflex 完全采用 CPU 离线运行,歌声处理过程不需要 GPU 硬件或互联网连接。但是,软件的许可验证仍需要互联网连接。

“减去”一种声音是什么意思?

当阴影覆盖了代表声音特征的端点时,Vocoflex 将弱化该特征的表达,并将输出的音色推向与之相反的方向。例如,当光线投射到呼吸声特征较强的声音样本上,而另一个质感清晰的声音样本位于阴影中时,Vocoflex 输出的歌声中的气息感将会被进一步放大。

哪里可以购买 Vocoflex?

目前,Vocoflex 作为 Dreamtonics 的实验性项目推出,仅接受有限数量的测试申请,尚无面向公众公开发布或发售的计划。


关于 Vocoflex

Vocoflex 是一个极具前沿创新力的实验性项目,可以将任何歌声转化为全新的、用户自定义的声音。用户仅需导入长度 10 秒的音频片段,或是通过随机功能自定义性别与音调参数,即可创造出新的歌声,并使用其实时歌唱。Vocoflex 能够广泛适用于音乐制作与现场表演,能够通过动态改变音色实时改变输出的声音,并提供低至 45 毫秒的动态延迟调整。

中文官网:https://dreamtonics.com/zh-CN/vocoflex/

文章出处 https://dreamtonics.com/zh-CN/vocoflex/

转载新闻请注明出自 Midifan.com

暂无评论