FreeCut 本地AI功能指南:浏览器内转写、场景检测与AI音乐生成,数据绝不上传
【免费下载链接】freecutFreeCut is a professional-grade video editor that runs entirely in your browser. Professional video editing, zero installation. Create stunning videos with multi-track editing, keyframe animations, real-time preview, and high-quality exports.项目地址: https://gitcode.com/gh_mirrors/free/freecut
FreeCut 是一款完全运行在浏览器中的专业级视频剪辑工具,无需安装即可进行多轨剪辑、关键帧动画与高质量导出。它最亮眼的特色是本地AI功能:语音转写、AI 场景检测与语义搜索、AI 音乐生成全部在你的电脑浏览器内完成,音视频素材和模型推理绝不上传到任何服务器,数据隐私一步到位。
为什么本地AI:零上传的隐私剪辑体验
FreeCut 的 AI 工具基于 WebGPU、WebCodecs 和 OPFS 等浏览器原生能力,直接跑在你自己的硬件上。工作流程很直白:
- 首次使用某项 AI 功能时,模型会自动下载一次,随后缓存在本地反复复用
- 状态小药丸(status pill)会实时显示模型的加载、运行、就绪与错误状态
- 长任务可以随时取消,也可以在设置中卸载模型释放内存
⚠️ 部分工具需要 Chrome 或 Edge 113+(或 Safari 26+)并支持 WebGPU;首次模型下载体积可能较大。
功能文档详见 src/features/docs/pages/17-local-ai.ts。
本地语音转写:音频秒变可搜索字幕
转写功能位于媒体库工作流中,把口播、采访或解说音频直接转成带时间戳的文本:
- 在媒体库中对音频/视频发起转写,选择合适的引擎
- Parakeet是默认的快速引擎,覆盖 25 种欧洲语言并自带标点;日文、韩文、中文或无 WebGPU 时会自动回退到 Whisper
- 也可选择 Whisper Tiny / Base / Small / Large v3 Turbo,按需平衡速度与精度
转写文本是后续编辑的地基——它能驱动字幕生成、转写文本搜索、口水词("嗯""啊")清理。建议在项目一开始就先跑一次转写。
核心实现位于 transcription-engine.ts 与 browser-whisper-models.ts。
AI 场景检测与语义搜索:按"意思"找镜头
素材库庞大时,找镜头最耗时。FreeCut 的Analyze with AI一次分析即可本地完成:
- 自动检测场景切点
- 为每个镜头生成文字描述(caption)
- 提取色彩调色板,并构建文本与图像向量(embeddings)
分析结果按内容缓存,相同素材不会重复分析。随后打开Scene Browser(Ctrl+Shift+F),三种搜索模式随你挑选:
| 模式 | 匹配方式 |
|---|---|
| 关键词 | 描述中的精确词语,适合找特定物体 |
| 语义 | 按"意思"匹配,"水面上的日落"能找到相关画面 |
| 颜色 | 从调色板取色,找视觉风格相近的镜头 |
点选结果即可在源监视器中预览,直接拖到时间线完成入轨。
场景检测引擎源码见 adaptive-scene-detector.ts,使用文档见 16-scene-browser.ts。
AI 音乐生成:一句提示词产出 BGM
不想找版权音乐?打开AI标签页的Music Generation:
- 用提示词描述风格,或直接选用 Lo-fi chill、Upbeat EDM 等预设
- 设定时长(2–30 秒,默认 8 秒),点击Generate Music,首次运行会下载 MusicGen Small 模型(约 742 MB)并缓存
- 试听满意后Save and Insert直接插入时间线,或Save to Library存入素材库
生成后的音频可以在混音器和均衡器中继续调音,融入整体声场。
相关实现可参考 musicgen-service.ts 与 musicgen-models.ts。
模型缓存管理:一次下载,永久复用
所有下载的 AI 模型都集中在设置 → 存储的Local AI Model Cache中管理:
- 查看或清除已下载模型——下载损坏时清除重下即可
- 用Unload Local Models释放运行时、回收内存
- 长任务不再需要时可随时取消
缓存逻辑实现在 local-model-cache.ts,界面控制见 local-model-cache-control.tsx。
总结:专业剪辑 + 隐私,二选一的时代过去了
FreeCut 把语音转写、场景检测与语义搜索、AI 音乐生成这三类最常用的 AI 工作流全部搬进浏览器,本地推理、本地缓存、本地剪辑、本地导出,整个创作链路不离开你的设备。想要体验,只需打开支持的现代浏览器,导入素材,从一次 AI 分析开始。
【免费下载链接】freecutFreeCut is a professional-grade video editor that runs entirely in your browser. Professional video editing, zero installation. Create stunning videos with multi-track editing, keyframe animations, real-time preview, and high-quality exports.项目地址: https://gitcode.com/gh_mirrors/free/freecut
创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考