试一试用ai 把 王祖贤 还原成香港配音(LTX2.3 & SOULX-SINGER)

[imbiplaza ASUS]

前文：
在网上看到王祖贤的视频，才发觉人家原音跟我们平时看港片的时候不一样的，
我现在试一试，看看使用ai, 可否还原当年的音调吗

---

做法流程：

1 首先我的做法是这样，先想办法找到当年王祖贤的港片，然后截取10秒的视频，
2 将该视频转成mp3， 将王祖贤现在的视频转成mp3。。
3 将mp3 克隆，然后按照王祖贤现在的mp3播放出来。。
4 把已经克隆出来的mp3, 使用premier pro, 替换掉原本mp4里面的音频
5 输出就可以

---

这是我王祖贤原本的素材

王祖贤原音 去硅谷
https://youtube.com/shorts/2hweDAF_gek?feature=share

王祖贤 香港配音
https://youtube.com/shorts/6xG0vTzc0xs?feature=share

这个是已经处理过的，王祖贤配音 去硅谷
https://youtube.com/shorts/QRTueSnK5QE?feature=share

---

需要的工具

1 一部手机当作截取视频工具

2 audacity 将视频转成 mp3

https://www.audacityteam.org/download/

3 将mp3 克隆，然后按照王祖贤现在的mp3播放出来。。

https://github.com/Soul-AILab/SoulX-Singer

4 把已经克隆出来的mp3, 使用premier pro, 替换掉原本mp4里面的音频

5 这个是已经处理过的，王祖贤配音 去硅谷

https://youtube.com/shorts/QRTueSnK5QE?feature=share

bonus

其中有一个技巧是，在音频素材尽量只是保留人声，完美去除背景声，这样就必须利用另外一个ai 输出纯人声vocal

（记得save as 下载，把json 改成zip) yt2mkv_tools2-12.json

[terry]

很牛逼，很专业，连audacity这种上古神器都给整出来了，我的意思是，为啥不用剪映分离人声，然后交给voxcpm克隆呢？

[imbiplaza ASUS]

@terry
audacity 足够简单，足够快

voxcpm 也是可以克隆，但是我暂时还没研究到，他到底能不能照版煮碗把已经克隆出来的音频放入原本时间段

[terry]

@imbiplaza-ASUS 不能，它不是替换，而是克隆音色，然后让AI用这种腔调说话，和你这个替换是不同的。

[imbiplaza ASUS]

@terry

因为他们都是py, 我已经做成自动工作流了，

就差在两步，audacity 输出mp3 & premier pro自动结合

我的构思是，跟ai 说，把这段视频（1）转成视频（2）的声音。。