首页 > 业界 > 关键词  > FunClip最新资讯  > 正文

阿里开源视频自动化剪辑工具FunClip 支持中文语音识别

2024-05-14 07:29 · 稿源:站长之家

站长之家(ChinaZ.com)5月13日 消息:阿里巴巴通义实验室最近开源了一款名为FunClip的视频自动化剪辑工具,专为精准和便捷的视频切片设计。FunClip能够自动识别视频中的中文语音,并允许用户根据语音内容裁剪视频,大大提高了视频编辑的效率。

image.png

项目地址:https://github.com/alibaba-damo-academy/FunClip

在线演示:https://modelscope.cn/studios/iic/funasr_app_clipvideo/summary

FunClip的主要特点

  • 语音识别:使用阿里巴巴的FunASR Paraformer-Large模型,确保了剪辑的精准性。

  • 操作简便:用户可以根据识别的语音内容选择文本片段或说话人进行视频裁剪。

  • 语言支持:目前支持中文,未来将扩展支持英文视频剪辑。

FunASR工具包介绍

FunASR是阿里巴巴通义实验室开发的一款综合性语音识别工具包,提供端到端的语音识别解决方案和一系列开源的、性能优越的预训练模型。它支持以下功能:

语音识别(ASR):提供非自回归端到端语音识别模型,支持多任务处理。

语音活动检测(VAD)与标点恢复:通过预训练模型进行有效的语音活动区段检测,提供标点恢复功能。

模型动态部署与优化:支持预训练模型的微调和推理,提供文件转录和实时转录服务。

项目地址:https://github.com/alibaba-damo-academy/FunASR

论文:https://arxiv.org/abs/2305.11013

Paraformer模型

Paraformer是阿里巴巴达摩院语音团队开发的非自回归端到端语音识别模型,专为高效的GPU并行推理设计。它提供快速且准确的语音到文本的转换,特别适合处理长音频。Paraformer模型的核心特点包括:

高效的模型架构:采用多种网络结构和优化目标,提供高效率和准确度。

功能拓展:支持热词定制版模型和长音频模型,适用于多种应用场景。

应用场景:适用于语音输入法、语音导航、智能会议纪要等多种应用场景。

FunClip的开源为视频内容创作者和编辑者提供了一个强大的工具,使得视频剪辑更加智能化和自动化。同时,FunASR工具包和Paraformer模型的开源,也为语音识别领域的研究和应用提供了宝贵的资源。阿里巴巴通过这些开源项目,展示了其在AI技术领域的领导地位和对开放创新的承诺。

Paraformer模型地址:https://modelscope.cn/models/iic/speech_paraformer-large_asr_nat-zh-cn-16k-common-vocab8404-pytorch/summary

举报

  • 相关推荐
  • 华为耳机联动豆包功能全量上线:支持FreeClip 2、FreeBuds Pro 5

    快科技7月13日消息,据博主Adak封狼居胥”透露,华为耳机联动豆包功能正式全量上线,适配FreeClip 2标准版、典藏版以及FreeBuds Pro 5悦彰两款旗舰耳机。用户升级对应固件与配套App后,即可在耳机端直接调用豆包完整AI能力,耳边交互体验大幅拓展。鸿蒙手机可以小艺/豆包双智能体在线(搭配HarmonyOS 6.1.0.125及以上版本的手机,包含鸿蒙7.X),苹果/安卓也能通过豆包进行消息播�

  • 1770元 华为FreeClip 2S全球发布:自研NPU 算力提升10倍

    华为在马来西亚面向国际市场发布FreeClip 2S耳夹耳机,售价229欧元(约1770元)。新品采用珠宝盒式充电盒,空间提升20%,耳机为C形桥设计,硅胶亲肤材质更柔软。核心配置上,配备NPU处理器,算力提升10倍,搭载超澎湃双引擎,响度与低频动力均提升100%,并支持通话降噪及自适应音效。与国内典藏版相比,国际版未搭载星闪E2.0技术,不支持2.4GHz/5.8GHz双频通信,但整机续航最长38小时,支持IP57防尘抗水。

  • 佰维存储BilibiliWorld 2026圆满收官

    BilibiliWorld 2026圆满落幕,佰维存储携手《诡秘之主》IP,打造蒸汽朋克沉浸展台,实现硬件、IP文化与线下的深度融合。展区人气爆棚,全系高性能产品亮相,并首发《诡秘之主》联名定制固态硬盘,展现存储科技的强悍与潮玩美学。现场还设置电竞挑战、coser互动及摄影课堂,以多元互动和竞速体验,呈现了一场品牌跨界年轻群体的非凡盛会。

  • 像真人聊天!OpenAI发布GPT-Live:AI可同步听与说

    OpenAI发布新一代语音模型GPT-Live,让人与AI的对话更加自然流畅,体验更接近真人交流。 据介绍,目前每周有超过1.5亿人使用ChatGPT的语音和听写功能,应用场景涵盖免提日常帮助、语言练习、睡前故事讲述,以及通勤途中的闲聊陪伴。 此前的语音功能依赖于较为传统的回合制模型,在回答准确性和对话自然度方面存在局限,有时难以维持顺畅的交互节奏。 而GPT-Live实现了边�

  • 微星BilibiliWorld 2026完美收官:龙魂铸传奇,新品耀全场

    BilibiliWorld 2026期间,MSI微星以四十周年“龙魂四秩,星竞传奇”为主题参展,展出基于AMD新平台的完整主板矩阵。亮点包括限量款MEG X870E GODLIKE超神主板、为超频打造的暗影主板、解决装机痛点的暗黑主板及升级版迫击炮。微星首次在国内线下完整展示MEG全家桶机电散方案,并推出融合天龙座主题的四十周年典藏版系列。AMD高层专程到访,与微星共话合作,双方表达持续携手创新的决心。

  • 次元破壁!致态携吹雪&《凡人》动画双IP联名燃爆2026 BilibiliWorld

    致态在2026 BilibiliWorld上联合华硕ROG与《凡人》动画两大IP,推出电竞与国漫风格联名存储产品,如TiPro9000固态硬盘和《凡人》联名礼盒,主打高性能与高颜值,满足电竞玩家、国漫粉、装机党及创作者需求。双IP联动吸引大量观众体验打卡,成为展场热点。展台还设有互动区与限定周边,展现科技与年轻潮流文化的融合,活动持续至7月12日。

  • BilibiliWorld 2026盛会来袭!掠夺者们,全员集结!

    宏碁掠夺者存储宣布参加BilibiliWorld 2026,以“玩转AI+ 神装就位”为主题跨界二次元,携全套旗舰存储产品亮相。覆盖高频电竞、AI绘图、4K/8K剪辑等场景,提供现场实测。展台设有人气UP主演出、Coser互动、挑战打卡及限定好礼。7月10-12日上海国家会展中心,邀玩家共赴这场AI创作与电竞的沉浸式狂欢。

  • UALink联盟Kurtis:开放Scale-Up互连加速构建可部署AI超节点

    2026 ODCC夏季全会在江西景德镇举行。UALink联盟主席Kurtis Bowman发表演讲,指出AI基础设施瓶颈已从算力转向加速器间高效数据交换。他阐述了开放Scale-Up互联标准UALink的核心价值,并介绍2026年4月发布的四项重大规范升级:新增网内计算功能、改进弹性与功耗管理、定义Pod级可管理性、支持基于UCIe的芯粒集成。ODCC正推动UALink规范在中国的验证落地,目前已有超115家成员企业参与开放AI超节点生态建设。

  • 骁龙7系无Elite/至尊,从一加Ace 3V看骁龙7+ Gen3的硬实力

    骁龙芯片命名规则清晰:8系以“至尊版”为旗舰锚点,7系则以“+”后缀定义性能顶峰,代表最强型号。一加Ace3V搭载的骁龙7+ Gen3,正是7系最新的性能天花板,官方称其为“史上最强7系芯片”。其采用4nm旗舰架构,在中端机身份上展现了“准旗舰”实力,实现无需“Elite/至尊版”标签的性能佐证。

  • AI日报:SpaceXAI推出“Opus级”大模型Grok4.5;阶跃星辰首款AI智能体手机即将发布;蚂蚁灵波开源 LingBot-Video

    AI日报:SpaceXAI推出Grok 4.5挑战OpenAI;字节Seedream 5.0 Pro开启交互式精准编辑;OpenAI发布GPT-Live全双工语音助手;MiniMax将推2.7万亿参数大模型;蚂蚁开源具身视频模型LingBot-Video;千问高考接入EMS追踪录取通知书;阶跃星辰将发AI手机;Mistral单摄像头自主导航模型发布。

今日大家都在搜的词: