@mixailab: https://x.com/mixailab/status/2101626520955748622
摘要
本文详细介绍了使用WorkBuddy和HyperFrames将文案、音频和SRT字幕转化为HTML视频的步骤,强调了模板的复用性和适合知识讲解类内容。
查看缓存全文
缓存时间: 2026/09/20 15:28
手把手教你用WorkBuddy做HTML视频
大家有没有刷到一些讲解类视频,整体画面就像是一套能动的 HTML 版PPT?
刚好这段时间我们在研究 HyperFrames 玩法,它的原理也是用 HTML生成画面然后组合成视频。于是我们想能不能让 HTML 负责前端画面,HyperFrames 负责时间轴和渲染?
沿着这个思路,我们用 WorkBuddy 成功复刻了同款视频。
先看两段最终成片,大家可以看出哪一条是 WorkBuddy 制作的吗?
视频一:
视频二:
整套流程分为4步:文案、音频、SRT字幕文件、HTML视频。
文案、配音和 SRT 可以生成逐句同步的 HTML 画面,再直接渲染成 MP4。
正式开始前,先把需要的工具和素材准备完整。
01. 开始前,工具准备
**一个AI Agent:**WorkBuddy、Codex或Claude Code;
**HyperFrames:**负责把HTML逐帧渲染成MP4;
**剪映:**识别字幕、导出 mp3 口播录音、出SRT口播稿;
Node.js 22+:运行HyperFrames(配置交给AI);
**FFmpeg:**最后编码视频(配置交给AI)。
最后在生成视频前,要有三份素材:
工具就这些,接下来讲这套方法里真正巧妙的地方。
02. SRT会给画面“排期”
普通的AI视频做法,是把整篇文案丢进去,让AI自己猜每一页该停多久。
猜得准还好。猜不准时,配音已经讲到下一段,画面还卡在上一页;或者一句话还没念完,标题先飞走了。
这套方法没有让AI猜,直接把SRT字幕交给AI。
AI拿到它,就像拿到了一张画面排期表。卡片什么时候弹出来,哪一秒切场景,都能直接固定在时间戳上。
03. 第一步:先写一份“能变成画面”的口播稿
先把文案写完,这一步暂时不用考虑动画。
这里有个小窍门:你写的每一小段,最好都能找到一个明确的视觉重点。
比如这一句:「整套流程只有四步:文案、音频、字幕和HTML渲染。」
很自然就能拆成「展示四步流程」画面。所以文案写完后,一定要自己读一遍,拗口的地方改掉。
如果等音频录完再动文案,后面的时间戳又要跟着重做。
04. 第二步:录好音频,固定节奏
接下来做声音。
音频可以自己录制,也可以使用AI配音。手机录音、剪映或其他AI语音工具都能完成。
录完后,把明显口误、过长停顿和多余空白剪掉。但别剪得太狠,画面也需要给观众留一点看字的时间。
05. 第三步:导出SRT
然后使用剪映的“识别字幕”功能。
字幕出来后,先逐句校对。HyperFrames、Workbuddy这类词很容易识别错,需要重点检查。
然后检查字幕切分。字幕太长,容易做出一页塞满字的画面。
我们要的是清楚的时间节点,不是把每个逗号都做成一次转场。
检查完,导出xxx.srt文件。
用文本编辑器打开看一眼。只要有编号、起止时间和文字,这份“画面排期表”就做好了。
到这里,前期准备结束。接下来,终于能看到前面三份素材开始变成画面了。
06. 第四步:把素材交给WorkBuddy
在WorkBuddy 中接入 HyperFrames,一条命令即可。
准备工作空间,先新建专属文件夹,层级结构可以是这样:
把配音、SRT、参考图放进 input。
建议通过“设置工作空间”选择整个 AI口播 文件夹,然后工作模式选 Plan 模式,模型可以选择 auto。
然后,复制这段提示词交给WorkBuddy。
后续WorkBuddy可能会请求询问你风格样式。可根据个人情况选择:
等它渲染生成后,打开预览。
到这里,已经生成一条完整视频了,不需要录屏,也不用手动翻页,HyperFrames会按照时间逐帧读取HTML,再编码成MP4。
07. HTML 模板可复用
做到这里,你已经能出一条视频demo了。当然第一条视频可能需要反复调整,未必比手剪快多少。但调到满意后就可以把HTML当成后续模板完整留下来,持续复用。
下一条同类视频,只给AI三样东西:
再告诉它:
以后换文案、换配音、换SRT,同样的视觉风格就能继续往下出。
08. 最 后
现在的AI写HTML的能力已经够用了,代码层面是可以实现各种动效效果。参考图很重要,AI 会根据参考图样式生成相对应的前端效果。
当然,发布前也要检查一下版权,避免出现版权问题。
这套工作流特别适合知识讲解、产品介绍和不露脸口播。
如果想要增加真人感也可以录制一段真人口播视频讲解,然后从视频中提取文案,再根据文中流程重新操作一遍,即可获得有真人出镜的知识讲解类视频了。
欢迎大家关注万象AI实验室,帮你把AI工具真正用起来。
相似文章
@iluciddreaming: Codex 上搭「视频内容工厂」,装好这几个插件就能把文本变成视频: HyperFrames — 负责「想」,创意策划 ElevenLabs Skill — 负责「说」,AI 配音 Remotion Skill — 负责「动」,程序化动画…
在Codex平台上通过HyperFrames、ElevenLabs配音、Remotion动画和Captions字幕等插件,实现从文本到视频的自动化制作流水线。
@VincentLogic: 这才是真正的 Harness Engineering 实战吧! 把“文章转视频”的全流程拆解得明明白白:文章 -> 口播稿 -> 网页开发 -> 录音 -> 录屏。 不用卷 Sora 了,用代码写网页做视频可控性高多了,而且完全开源。 感…
本文介绍了一套完整的开源文本转视频工作流,涵盖文稿生成、前端开发、配音与录屏环节,强调通过代码实现更高的可控性与内容创作效率。
@Zesee: https://x.com/Zesee/status/2072417062165635433
本文介绍了如何结合Codex AI编程智能体和Remotion视频渲染库,将视频制作流程代码化、模块化,实现自媒体日更。作者分享了从脚本结构、模板设计到每日工作流的完整方法论,帮助创作者摆脱重复劳动,建立视频生产线。
@369Serena: 用 Codex + HyperFrames 做图书介绍视频第二版来了! 参考的抖音博主我放在评论区了,大家帮我看看这个版本如何?Codex 把声音处理的很完美,很有故事感。 参考流程:把抖音博主视频喂给 Codex 分析,分析好后准备素材…
详细介绍如何使用 Codex 和 HyperFrames 制作图书介绍视频的工作流程,包括拆解抖音爆款、生成旁白、处理声音和匹配字幕等步骤,旨在帮助自媒体创作者利用 AI 高效制作视频。
@mogician301: https://x.com/mogician301/status/2072250774332285073
介绍了一个名为 audio-to-text 的开源工具,它利用 AI 和本地工具(如 faster-whisper 和 ffmpeg)帮助用户自动生成、校对和烧录字幕,解决剪映等软件成本高、错误多、流程繁琐的问题。