news 2026/11/3 16:13:36

FreeCut 本地AI功能指南:浏览器内转写、场景检测与AI音乐生成,数据绝不上传

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
FreeCut 本地AI功能指南:浏览器内转写、场景检测与AI音乐生成,数据绝不上传

FreeCut 本地AI功能指南:浏览器内转写、场景检测与AI音乐生成,数据绝不上传

【免费下载链接】freecutFreeCut is a professional-grade video editor that runs entirely in your browser. Professional video editing, zero installation. Create stunning videos with multi-track editing, keyframe animations, real-time preview, and high-quality exports.项目地址: https://gitcode.com/gh_mirrors/free/freecut

FreeCut 是一款完全运行在浏览器中的专业级视频剪辑工具,无需安装即可进行多轨剪辑、关键帧动画与高质量导出。它最亮眼的特色是本地AI功能:语音转写、AI 场景检测与语义搜索、AI 音乐生成全部在你的电脑浏览器内完成,音视频素材和模型推理绝不上传到任何服务器,数据隐私一步到位。

为什么本地AI:零上传的隐私剪辑体验

FreeCut 的 AI 工具基于 WebGPU、WebCodecs 和 OPFS 等浏览器原生能力,直接跑在你自己的硬件上。工作流程很直白:

  • 首次使用某项 AI 功能时,模型会自动下载一次,随后缓存在本地反复复用
  • 状态小药丸(status pill)会实时显示模型的加载、运行、就绪与错误状态
  • 长任务可以随时取消,也可以在设置中卸载模型释放内存

⚠️ 部分工具需要 Chrome 或 Edge 113+(或 Safari 26+)并支持 WebGPU;首次模型下载体积可能较大。

功能文档详见 src/features/docs/pages/17-local-ai.ts。

本地语音转写:音频秒变可搜索字幕

转写功能位于媒体库工作流中,把口播、采访或解说音频直接转成带时间戳的文本:

  1. 在媒体库中对音频/视频发起转写,选择合适的引擎
  2. Parakeet是默认的快速引擎,覆盖 25 种欧洲语言并自带标点;日文、韩文、中文或无 WebGPU 时会自动回退到 Whisper
  3. 也可选择 Whisper Tiny / Base / Small / Large v3 Turbo,按需平衡速度与精度

转写文本是后续编辑的地基——它能驱动字幕生成、转写文本搜索、口水词("嗯""啊")清理。建议在项目一开始就先跑一次转写。

核心实现位于 transcription-engine.ts 与 browser-whisper-models.ts。

AI 场景检测与语义搜索:按"意思"找镜头

素材库庞大时,找镜头最耗时。FreeCut 的Analyze with AI一次分析即可本地完成:

  • 自动检测场景切点
  • 为每个镜头生成文字描述(caption)
  • 提取色彩调色板,并构建文本与图像向量(embeddings)

分析结果按内容缓存,相同素材不会重复分析。随后打开Scene Browser(Ctrl+Shift+F),三种搜索模式随你挑选:

模式匹配方式
关键词描述中的精确词语,适合找特定物体
语义按"意思"匹配,"水面上的日落"能找到相关画面
颜色从调色板取色,找视觉风格相近的镜头

点选结果即可在源监视器中预览,直接拖到时间线完成入轨。

场景检测引擎源码见 adaptive-scene-detector.ts,使用文档见 16-scene-browser.ts。

AI 音乐生成:一句提示词产出 BGM

不想找版权音乐?打开AI标签页的Music Generation:

  • 用提示词描述风格,或直接选用 Lo-fi chill、Upbeat EDM 等预设
  • 设定时长(2–30 秒,默认 8 秒),点击Generate Music,首次运行会下载 MusicGen Small 模型(约 742 MB)并缓存
  • 试听满意后Save and Insert直接插入时间线,或Save to Library存入素材库

生成后的音频可以在混音器和均衡器中继续调音,融入整体声场。

相关实现可参考 musicgen-service.ts 与 musicgen-models.ts。

模型缓存管理:一次下载,永久复用

所有下载的 AI 模型都集中在设置 → 存储的Local AI Model Cache中管理:

  • 查看或清除已下载模型——下载损坏时清除重下即可
  • 用Unload Local Models释放运行时、回收内存
  • 长任务不再需要时可随时取消

缓存逻辑实现在 local-model-cache.ts,界面控制见 local-model-cache-control.tsx。

总结:专业剪辑 + 隐私,二选一的时代过去了

FreeCut 把语音转写、场景检测与语义搜索、AI 音乐生成这三类最常用的 AI 工作流全部搬进浏览器,本地推理、本地缓存、本地剪辑、本地导出,整个创作链路不离开你的设备。想要体验,只需打开支持的现代浏览器,导入素材,从一次 AI 分析开始。

【免费下载链接】freecutFreeCut is a professional-grade video editor that runs entirely in your browser. Professional video editing, zero installation. Create stunning videos with multi-track editing, keyframe animations, real-time preview, and high-quality exports.项目地址: https://gitcode.com/gh_mirrors/free/freecut

创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/10/25 18:09:58

ponytail插件实战:用skill机制打造可复用的内容整理流水线

最近一个内容整理的项目把我折磨得够呛,几百份零散素材要统一格式、剔除冗余、重新归档,手工做下来眼睛都快瞎了。朋友看不下去了,甩给我一句:“你试试 ponytail 啊,带 skill 的那种。”我一开始还以为他在开玩笑。pon…

作者头像 李华
网站建设 2026/10/25 21:04:09

全球海底滑坡分布shp点位数据处理与空间分析全流程

简介:这份全球海底滑坡分布点文件,以 shp 矢量格式收录了覆盖全球海域的 500 余处海底滑坡点位,面向海洋地质、地质灾害评估、海底工程等方向的科研人员与 GIS 学习者,可用于快速获取滑坡空间分布、辅助区域规律分析或教学示例。压…

作者头像 李华
网站建设 2026/10/24 14:31:49

全球海底滑坡shp点数据处理:从解压到坐标系修复与空间分析

简介:全球海底滑坡分布点文件包含500余处滑坡点位,面向海洋地质与灾害风险研究人员、GIS制图与教学使用者,可用于大范围海底滑坡空间分布查询、编目与底图展示。压缩包共8个文件,内容精炼,涵盖主文件shp、属性表dbf、投…

作者头像 李华
网站建设 2026/10/23 9:38:32

Spring AI 0.8.1 升级到 1.0.0:资本市场估值问答服务的 Starter 迁...

Spring AI 0.8.1 升级到 1.0.0:资本市场估值问答服务的 Starter 迁移与兼容性处理上周三下午四点,风控组的同事把一张截图甩进群:内部估值问答页面又吐了半句就断流,用户看到的最后一行是「根据您提供的 3 年期 IRS 现金流」。这不…

作者头像 李华
网站建设 2026/10/31 20:45:18

Ponytail:用Skill插件把信息收集整理自动化

第一次看到“Ponytail”这个项目名,我差点把它当成一个发型教程。直到同事甩过来一个 GitHub 链接,我才意识到,这不是扎头发的马尾辫,而是一套把散落信息扎起来的效率插件。用项目里的话说,Ponytail 是一个轻量的 Skil…

作者头像 李华
网站建设 2026/10/21 19:45:58

基于时空卷积神经网络GL-GCN的交通流异常检测算法解析

简介:一份面向交通流异常检测研究者的学术PDF,系统阐述GL-GCN算法——融合图卷积网络与深度神经网络DeepGLO,同时捕捉道路空间结构与时间依赖性,构建预测交通流模型,并利用异常分数判别异常事件。资源适合深度学习、机…

作者头像 李华