跳转至内容
  • 版块
  • 最新
  • 标签
  • 热门
  • 用户
  • 群组
皮肤
  • 浅色
  • Brite
  • Cerulean
  • Cosmo
  • Flatly
  • Journal
  • Litera
  • Lumen
  • Lux
  • Materia
  • Minty
  • Morph
  • Pulse
  • Sandstone
  • Simplex
  • Sketchy
  • Spacelab
  • United
  • Yeti
  • Zephyr
  • 深色
  • Cyborg
  • Darkly
  • Quartz
  • Slate
  • Solar
  • Superhero
  • Vapor

  • 默认(LCZ-Blue)
  • 不使用皮肤
  • LCZ-Green
  • LCZ-Blue
  • LCZ-Black
折叠
品牌标识

抡锤者

首页 版块 标签
硬件
装备秀
AI 广场 App
  1. 主页
  2. 版块
  3. AI音视频画图
  4. 【Minimax H3】第三首歌曲MV总结

【Minimax H3】第三首歌曲MV总结

已定时 已固定 已锁定 已移动 优秀 AI音视频画图
7900xtxminimax视频生成
15 帖子 8 发布者 491 浏览 1 关注中
  • 从旧到新
  • 从新到旧
  • 最多赞同
回复
  • 在新帖中回复
登录后回复
此主题已被删除。只有拥有主题管理权限的用户可以查看。
  • Junjie HengJ
    Junjie HengJ
    Junjie Heng
    体面乡绅
    编写于 最后由 编辑
    #1

    Youtube Video

    7900XTX Minimax H3:Cappy《Colors Song》制作过程

    原本是要挑战试试分镜做故事影片的,奈何到了周末就不想努力,就和好基友玩了两天三角洲😂 ,就水了多一期视频接着做歌曲类型,这次就更舒服了,经过前两次的折腾,几乎可以说这次真的只做了去suno生歌曲选一首,然后其他全权都交给agent去搞了。(中途就2-3个画面我说不行,让agent多抽了几次卡)

    这篇记录从策划到上传的完整流程。


    分享我使用的工作流供测试 ⬇️ (有md和json)
    工作流分享


    成品

    • 横版 MV:1080p,约 3 分钟(含频道片头和 15 秒片尾),附 CC 英文字幕
    • 3 支竖版 Shorts:Red·Orange·Yellow / Green·Blue·Purple(含副歌)/ Pink·Brown·Black·White
    • 封面:颜色场景拼贴 + 黄色大字 SONG

    工具链

    环节 工具
    作曲、演唱 Suno
    歌词对时间、测拍子 Whisper(逐词时间)+ librosa
    视频生成 本地 ComfyUI + MiniMax-H3(参考图生视频 / 首尾帧生视频)
    剪辑、字幕、转场 ffmpeg + Python(PIL)脚本
    放大到 1080p Real-ESRGAN(realesr-animevideov3)
    硬件 AMD RX 7900 XTX 24GB(ROCm)

    画面全部在本机生成,没有用在线视频服务。


    1. 策划:10 个颜色,每个 4 小节

    上一支 Phonics 每个字母只有 2 小节,节奏偏赶。这次每个颜色给 4 小节(约 9.6 秒),更适合低龄观众:

    • 第 1–2 小节:Cappy 喊出颜色,童声合唱回应,舞台就是这个颜色。
    • 第 3–4 小节:唱出这个颜色的东西,Cappy 和它互动。
    颜色 东西 互动
    Red 气球 被一大堆红气球围住
    Orange 胡萝卜 啃胡萝卜
    Yellow 香蕉 剥香蕉
    Green 青蛙 青蛙跳过来
    Blue 小鸟 小蓝鸟停在身上
    Purple 葡萄 举起一串葡萄
    Pink 火烈鸟 学火烈鸟单脚站
    Brown 我自己! "Brown like me, it's Cappy!"
    Black 小黑猫 小猫蹭过来
    White 雪人 舞台飘雪,雪人挥手

    挑东西有两个原则:

    1. 模型容易画对:简单、常见、轮廓清楚的东西。
    2. 道具贴着 Cappy、放在画面中间:之后要裁竖版 Shorts,道具离得太远会被裁掉。

    结构是:开场 → Red 到 Blue → 副歌 → Purple 到 White → 副歌 → 结尾。教室场景负责开场、副歌和结尾,颜色舞台负责每个颜色。

    2. Suno 做歌

    风格提示词沿用前两支,让 Cappy 的声音保持一致。重点是这几句:

    • 写实测的 BPM。上一支实测 99,我写 110,Suno 也不会照做。
    • 写明 "every color gets four full bars",否则后半首容易唱急。
    • 女声领唱加童声合唱一问一答:"Red, red! (Red, red!)"。

    歌词句式是固定的,小朋友容易跟唱:

    Red, red! (Red, red!)
    What is red? (What is red?)
    A big red balloon! (Balloon!)
    Red, red, red! (Red!)
    

    3. 分析歌曲、定切点

    用 Whisper 拿到每个词的时间,用 librosa 测拍子。这首实测约 99.4 BPM,一拍 0.604 秒,一小节约 2.41 秒。

    切点规则:

    • 切在小节线上;
    • 这个颜色的最后一个词要在切点之前唱完。

    Whisper 的词开始时间常常偏早 0.1–0.9 秒,所以最后以拍子网格为准,Whisper 只用来核对。

    最后整首切成 16 段:开场、10 个颜色、4 段副歌、结尾。

    4. 生成:两种场景,两种做法

    模型是 MiniMax-H3,在本地 ComfyUI 里跑,8 步加速 LoRA,分辨率 1024×576,最后再放大。每段把这一段的原曲音频锚在第 0 帧,引导口型和动作节奏。

    教室段:首尾帧锁定母版

    开场、副歌、结尾都在同一间教室。AI 视频最大的问题是每段的背景和角色位置都不一样,接起来会跳。

    我的做法是准备一张教室母版图(这次调亮了,比 Phonics 那张更明亮),把它同时锁在每段的第一帧和最后一帧。这样每段都从同一个画面开始、回到同一个画面结束,段和段之间几乎看不出接缝。

    教室段不能再接角色参考图,否则模型会在片中插一张白底的角色设定图。

    颜色舞台段:三张参考图

    每个颜色是一个独立舞台,接 Cappy 的正面、45°、侧面三张参考图,保证长相一致。

    5. 检查每小段视频生成效果

    每批生成完,让agent主动把每段截 7 帧拼成一行的表,快速看一遍:(准确点的话还是推荐点开视频自己看)

    • 长相有没有走样;
    • 有没有插进白底参考图;
    • 道具有没有出现、有没有变成两个;
    • 教室段最后有没有回到站姿。

    模型有个习惯:道具和动作通常在片段后 40% 才出现。所以提示词要写"从第一帧起道具就在 Cappy 旁边"。Red 段后来就改成从第一帧开始,Cappy 就只露出头,埋在一大堆红气球里。

    每段耗时

    分辨率 像素 124 帧(5.2 秒) 243 帧(10.1 秒) 294 帧(12.3 秒)
    960×544 0.52 MP — 约 580 秒 640–700 秒
    1024×576(横)/ 576×1024(竖) 0.59 MP 225–255 秒(中位数 243 秒,61 段) 505–590 秒(中位数约 540 秒,25 段) 670–750 秒
    1120×640 0.72 MP 约 590 秒 ※ — —
    1344×768 1.03 MP 约 500–670 秒 ※ — —
    • 只测了一次,数字里可能包含切换模型、排队的时间,只能当作大概参考。
    • 1.0mp也有试着生成,但是真的太久了,中途就直接截停任务换跑0.6mp了😂。

    换算成成片时长:0.59 MP 下,每 1 秒视频大约要 45–60 秒生成。片段越长,每秒越慢。

    整首歌的时间

    做法 生成 放大到 1080p 合计
    0.59 MP + animevideov3 放大(我的做法) Phonics 33 段约 2.7 小时 约 5 分钟 约 2.8 小时
    1.03 MP + 放大 估计 6–7 小时(124 帧是 0.59 MP 的 2–2.7 倍) 约 5 分钟 约 6–7 小时

    6. 拼接

    剪辑全部用 Python 脚本控制 ffmpeg:

    • 声音换回原曲:模型生成的声音全部丢掉,每段换回 Suno 原曲的对应片段。
    • 转场:
      • 教室 → 舞台:镜头推进黑板,黑板变成下一个颜色,再打开到舞台;
      • 舞台 → 教室:舞台淡成黑板绿,再从黑板里拉出来;
      • 舞台 → 舞台:0.2 秒白闪。
    • 颜色卡:左上角弹出这个颜色的色块和单词。
    • 单词弹字:唱到 "A big red balloon" 时,底部弹出 "Red balloon",颜色那个词用对应颜色。
    • 副歌歌词:用粉笔字体写在黑板上,唱到哪句出现哪句。
    • 片头片尾:开头接频道片头;片尾停在最后一帧慢慢推近 15 秒,黑板写 "Watch next!",留给 YouTube 的片尾推荐卡片。

    拼接要用 ffmpeg 的 concat filter。用 concat demuxer 直接复制流会丢帧,音画会错位。

    7. 放大到 1080p

    三种方法都实测过:

    方法 整首耗时 效果
    realesr-animevideov3 约 5 分钟 边缘干净,毛发变成光滑的卡通感 ✅
    RealESRGAN_x2plus 约 2.5 小时 保留毛发纹理
    SeedVR2 3B 30–40 小时 细节最多,但补出写实毛发,而且在 AMD 卡上太慢

    卡通风格的片子,最终我选择 animevideov3 又快又好看。(主要是图快😂 )

    范例⬇️
    image-1793606357655.png

    8. 竖版 Shorts

    横版直接裁成 9:16 太窄,火烈鸟和雪人会被切掉。最后的版式是:

    • 中间是从横版里裁出的正方形窗口,放大到 1080×1080;
    • 上下用同一画面的虚化放大版填满;或者是做点小设计的竖版背景图
    • 上方放频道 logo,下方放跟唱歌词。

    9. 封面

    封面是颜色场景拼贴,中间放大大的 Cappy,加上彩虹色的 COLORS 和黄色的 SONG,也是用 PIL 脚本排版的。


    踩坑清单

    1. 其实没什么坑,就是你发现什么不对味就直接和agent说,让它自己去折腾。

    欢迎各位大佬和群友们拍砖!🤩 🤝

    1 条回复 最后回复
    3
    • imbiplaza ASUSI
      imbiplaza ASUSI
      imbiplaza ASUS
      谪仙人
      编写于 最后由 编辑
      #2

      教学教学。。。我想学

      1 条回复 最后回复
      0
      • Junjie HengJ
        Junjie HengJ
        Junjie Heng
        体面乡绅
        编写于 最后由 编辑
        #3

        @imbiplaza-asus 不要玩 老哥 reverse过来才对哈哈哈 我才要跟你学习😂

        IMG_5577.JPG

        imbiplaza ASUSI 1 条回复 最后回复
        0
        • Junjie HengJ Junjie Heng

          @imbiplaza-asus 不要玩 老哥 reverse过来才对哈哈哈 我才要跟你学习😂

          IMG_5577.JPG

          imbiplaza ASUSI
          imbiplaza ASUSI
          imbiplaza ASUS
          谪仙人
          编写于 最后由 编辑
          #4

          @Junjie-Heng

          我最近去搞unreal engine ,看看你想不想学我这样直播搞自己的project

          Youtube Video

          1 条回复 最后回复
          1
          • Junjie HengJ
            Junjie HengJ
            Junjie Heng
            体面乡绅
            编写于 最后由 编辑
            #5

            @imbiplaza-asus yesss 我也是有打算玩unreal engine, 想把我的city做进去做个小游戏.
            还有想过做一个类似pokemongo的game 😂 名字叫malaysiago 哈哈哈
            走来走去抓malayboi cinaboi indianboi 加一些malaysia meme(mak kau hijau/myvi/aplj这些进去) 一定很搞笑哈哈哈哈哈哈哈哈哈
            等我的SATASSD到我录一下unreal engine来玩玩看👍

            1 条回复 最后回复
            0
            • ゆうみんゆ
              ゆうみんゆ
              ゆうみん
              体面乡绅
              编写于 最后由 编辑
              #6

              太可爱了吧!给你一个赞!

              youtube.com/channel/UCN2nQbk-8CJXHNMr4yWNt9Q/

              1 条回复 最后回复
              1
              • Junjie HengJ
                Junjie HengJ
                Junjie Heng
                体面乡绅
                编写于 最后由 编辑
                #7

                @ゆうみん 感谢大佬!

                1 条回复 最后回复
                0
                • ralfzhuR
                  ralfzhuR
                  ralfzhu
                  体面乡绅 硕果累累
                  编写于 最后由 编辑
                  #8

                  给孩子看的视频油管给的流量很少,广告分的也不多~~。曾经我也想搞儿童节目和朗读有声书,结果还是放弃了。之前是啥都不会,只会入门的TTS。

                  perterP 1 条回复 最后回复
                  2
                  • XiaoteX
                    XiaoteX
                    Xiaote
                    易有太极
                    编写于 最后由 编辑
                    #9

                    ✅ 版主审定:本帖设为优秀,作者 +3 积分奖励,继续加油!

                    奖励凭证:优秀 +3 分 · 编号 e2787-1056-1

                    老特的AI助手,DeepSeek Flash驱动,没回你是因为被限速了~除了管理员不能私信我,别浪费时间~尝试多了被封号就不好了~

                    1 条回复 最后回复
                    0
                    • 懒人烘培懒
                      懒人烘培懒
                      懒人烘培
                      王侯将相
                      编写于 最后由 编辑
                      #10

                      好看,想学习这个制作呢

                      双 7900 XTX:模型本地跑,Token 随便烧!

                      1 条回复 最后回复
                      1
                      • ralfzhuR ralfzhu

                        给孩子看的视频油管给的流量很少,广告分的也不多~~。曾经我也想搞儿童节目和朗读有声书,结果还是放弃了。之前是啥都不会,只会入门的TTS。

                        perterP
                        perterP
                        perter
                        王侯将相
                        编写于 最后由 编辑
                        #11

                        @junjie-heng

                        @ralfzhu 说:

                        给孩子看的视频油管给的流量很少,广告分的也不多~~

                        其实真的流量做起来,给玩具带带货赚的也不少,现在小孩和老人的钱最好赚。

                        1 条回复 最后回复
                        1
                        • Junjie HengJ
                          Junjie HengJ
                          Junjie Heng
                          体面乡绅
                          编写于 最后由 编辑
                          #12

                          @ralfzhu 确实有考虑过CPM特别低的部分🤣 转念一想等歌曲多了扔在一个合集里面 父母在忙的时候打开合集让小孩子自己看蹭点观看数好像也不错 刚好自家有做印刷的技术 就试一试哈哈哈 看后续有没有机缘
                          目前已经实现agent自产!已经在思考下一个频道了! 🤩

                          @懒人烘培 感谢大佬鼓励 🤩 烘焙哥双卡那不得随便跑,双11我得再搞个7900XTX来试试双卡了🤤 我是用claudecode - opus 5.5搞出来的,我让agent整理技术包出来了在这哥 ➡️ https://drive.google.com/file/d/1PfsfElKtdpso_fKPTLm_9uchSm2L-X7_/view?usp=sharing

                          @perter 第一次做频道 试试水!如果有流量的话 打算和本地的一些儿童品牌小小配合,然后自家能印刷衣服/周边,但还是接着生产视频接着发,看这个缘分能不能到我这🤣

                          ralfzhuR 懒人烘培懒 2 条回复 最后回复
                          3
                          • Junjie HengJ Junjie Heng

                            @ralfzhu 确实有考虑过CPM特别低的部分🤣 转念一想等歌曲多了扔在一个合集里面 父母在忙的时候打开合集让小孩子自己看蹭点观看数好像也不错 刚好自家有做印刷的技术 就试一试哈哈哈 看后续有没有机缘
                            目前已经实现agent自产!已经在思考下一个频道了! 🤩

                            @懒人烘培 感谢大佬鼓励 🤩 烘焙哥双卡那不得随便跑,双11我得再搞个7900XTX来试试双卡了🤤 我是用claudecode - opus 5.5搞出来的,我让agent整理技术包出来了在这哥 ➡️ https://drive.google.com/file/d/1PfsfElKtdpso_fKPTLm_9uchSm2L-X7_/view?usp=sharing

                            @perter 第一次做频道 试试水!如果有流量的话 打算和本地的一些儿童品牌小小配合,然后自家能印刷衣服/周边,但还是接着生产视频接着发,看这个缘分能不能到我这🤣

                            ralfzhuR
                            ralfzhuR
                            ralfzhu
                            体面乡绅 硕果累累
                            编写于 最后由 编辑
                            #13

                            @Junjie-Heng 这个执行力可以的!

                            1 条回复 最后回复
                            0
                            • Junjie HengJ Junjie Heng

                              @ralfzhu 确实有考虑过CPM特别低的部分🤣 转念一想等歌曲多了扔在一个合集里面 父母在忙的时候打开合集让小孩子自己看蹭点观看数好像也不错 刚好自家有做印刷的技术 就试一试哈哈哈 看后续有没有机缘
                              目前已经实现agent自产!已经在思考下一个频道了! 🤩

                              @懒人烘培 感谢大佬鼓励 🤩 烘焙哥双卡那不得随便跑,双11我得再搞个7900XTX来试试双卡了🤤 我是用claudecode - opus 5.5搞出来的,我让agent整理技术包出来了在这哥 ➡️ https://drive.google.com/file/d/1PfsfElKtdpso_fKPTLm_9uchSm2L-X7_/view?usp=sharing

                              @perter 第一次做频道 试试水!如果有流量的话 打算和本地的一些儿童品牌小小配合,然后自家能印刷衣服/周边,但还是接着生产视频接着发,看这个缘分能不能到我这🤣

                              懒人烘培懒
                              懒人烘培懒
                              懒人烘培
                              王侯将相
                              编写于 最后由 编辑
                              #14

                              @Junjie-Heng 收到啦,我也研究看看~

                              双 7900 XTX:模型本地跑,Token 随便烧!

                              1 条回复 最后回复
                              0
                              • tester12340T
                                tester12340T
                                tester12340
                                体面乡绅 硕果累累
                                编写于 最后由 编辑
                                #15

                                @junjie-heng 做的太棒了 赞

                                1 条回复 最后回复
                                0

                                你好!看起来您对这段对话很感兴趣,但您还没有一个账号。

                                厌倦了每次访问都刷到同样的帖子?您注册账号后,您下次访问时都将自动回到上次浏览的位置,并可选择接收新回复的通知(通过电子邮件或推送通知)。您还可以收藏帖子、为帖子点赞,以此向其他社区成员表达您的感谢。

                                有了你的建议,这篇帖子会更精彩哦 💗

                                注册 登录
                                回复
                                • 在新帖中回复
                                登录后回复
                                • 从旧到新
                                • 从新到旧
                                • 最多赞同


                                • 登录

                                • 登录或注册以进行搜索。
                                • 第一个帖子
                                  最后一个帖子
                                0
                                • 版块
                                • 最新
                                • 标签
                                • 热门
                                • 用户
                                • 群组