阿里开源视频自动化剪辑工具FunClip 支持中文语音识别

靠谱客（kaopuke.com）5月27日消息:阿里巴巴通义实验室最近开源了一款名为FunClip的视频自动化剪辑工具，专为精准和便捷的视频切片设计。FunClip能够自动识别视频中的中文语音，并允许用户根据语音内容裁剪视频，大大提高了视频编辑的效率。

项目地址:https://github.com/alibaba-damo-academy/FunClip

在线演示:https://modelscope.cn/studios/iic/funasr_app_clipvideo/summary

FunClip的主要特点

• 语音识别:使用阿里巴巴的FunASR Paraformer-Large模型，确保了剪辑的精准性。

• 操作简便:用户可以根据识别的语音内容选择文本片段或说话人进行视频裁剪。

• 语言支持:目前支持中文，未来将扩展支持英文视频剪辑。

FunASR工具包介绍

FunASR是阿里巴巴通义实验室开发的一款综合性语音识别工具包，提供端到端的语音识别解决方案和一系列开源的、性能优越的预训练模型。它支持以下功能:

语音识别（ASR）:提供非自回归端到端语音识别模型，支持多任务处理。

语音活动检测（VAD）与标点恢复:通过预训练模型进行有效的语音活动区段检测，提供标点恢复功能。

模型动态部署与优化:支持预训练模型的微调和推理，提供文件转录和实时转录服务。

项目地址:https://github.com/alibaba-damo-academy/FunASR

论文:https://arxiv.org/abs/2305.11013

Paraformer模型

Paraformer是阿里巴巴达摩院语音团队开发的非自回归端到端语音识别模型，专为高效的GPU并行推理设计。它提供快速且准确的语音到文本的转换，特别适合处理长音频。Paraformer模型的核心特点包括:

高效的模型架构:采用多种网络结构和优化目标，提供高效率和准确度。

功能拓展:支持热词定制版模型和长音频模型，适用于多种应用场景。

应用场景:适用于语音输入法、语音导航、智能会议纪要等多种应用场景。

FunClip的开源为视频内容创作者和编辑者提供了一个强大的工具，使得视频剪辑更加智能化和自动化。同时，FunASR工具包和Paraformer模型的开源，也为语音识别领域的研究和应用提供了宝贵的资源。阿里巴巴通过这些开源项目，展示了其在AI技术领域的领导地位和对开放创新的承诺。

Paraformer模型地址:https://modelscope.cn/models/iic/speech_paraformer-large_asr_nat-zh-cn-16k-common-vocab8404-pytorch/summary

（举报）