首页 > 业界 > 关键词  > 字节跳动最新资讯  > 正文

字节提出新方法GPE AI看视频可自动找“高能时刻”

2024-01-22 09:21 · 稿源:站长之家

要点:

1、字节跳动联合中科院自动化研究所提出新方法,用AI快速检测视频中的高光片段,实现对输入视频长度和高光长度的灵活提取。

2、字节跳动联合中科院自动化研究所标注了用于域增量学习的美食视频数据集LiveFood,提出了基于原型学习的解决方案。

3、GPE使用高光原型学习的方案,在视频帧级别上做二分类任务,判断视频帧属于高光还是非高光,取得了良好的高光检测性能。

站长之家(ChinaZ.com)1月22日 消息:AI技术在视频领域的应用一直备受关注,通过AI快速检测视频中的高光片段,可以实现观众直接空降到精彩时刻,主播也可以复盘自己的表现。针对视频领域增量学习的困境,字节跳动联合中科院自动化研究所标注了用于域增量学习的美食视频数据集LiveFood,并提出了基于原型学习的解决方案。该方法使用高光原型学习的方案,在视频帧级别上做二分类任务,判断视频帧属于高光还是非高光,并取得了良好的高光检测性能。通过这些努力,AI技术在视频领域应用的前景更加广阔。

image.png

项目地址:https://top.aibase.com/tool/livefood

通过AI快速检测视频中的高光片段,观众可以直接空降到精彩时刻,主播也可以复盘自己的表现。针对视频域增量学习困境,字节跳动联合中科院自动化研究所标注了美食视频数据集LiveFood,并提出基于原型学习的解决方案。

字节跳动联合中科院自动化所提出新方法,用AI快速检测视频中的高光片段,实现对输入视频长度和高光长度的灵活提取。同时,标注了用于域增量学习的美食视频数据集LiveFood,并提出了基于原型学习的解决方案。AI技术在视频领域的应用前景更加广阔。

字节跳动联合中科院自动化所提出新方法,用AI快速检测视频中的高光片段,实现对输入视频长度和高光长度的灵活提取。该方法取得了良好的高光检测性能,并对视频领域增量学习问题有重要意义,为AI技术在视频领域的应用打开了新的局面。

举报

  • 相关推荐
  • 字节跳动旗下豆包输入法上线苹果App Store

    豆包输入法iOS版已于11月27日登陆苹果App Store,需iOS 15.0及以上系统。提供完整体验与基础打字两种模式:完整模式需联网,可能申请通讯录等权限以提供丰富功能;基础模式主打简洁,不收集数据但缺失语音输入等实用功能。输入法支持9键/26键、多方言混输、智能联想、剪贴板等工具,承诺全力保护用户隐私。启用需在系统键盘设置中添加,有望凭借丰富功能与便捷操作占据iOS输入法市场一席之地。

  • 广告小游戏崛起,字节腾讯押注下一个流量金矿

    Tech星球独家获悉,腾讯、字节跳动正在加码广告小游戏的布局,腾讯推出和计划推出的广告小游戏超10款,字节则是推出了《梦幻数独》小游戏,近期体验用户量已经破550万。 “羊了个羊”、打螺丝、抓大鹅等热门小游戏曾经风靡一时。如今,打开微信小程序或抖音小游戏入口,这类轻量化娱乐产品早已随处可见,譬如通勤时刷到的“疯狂拆螺丝”,也可能是好友分享的“合

  • 字节、腾讯、阿里,AI 编码“三国杀”

    大厂正在集火最具PMF(产品市场契合度)价值的赛道——AI编码。 从7月21日开始,字节、腾讯、阿里轮番更新AI编码产品和模型:字节已有的AI编码产品Trae放出Solo版本,加入上下文工程,让平台变得更“聪明”;腾讯则把一整套用来部署产品的工具放到其中,做了个“全栈工程师”;阿里更是发布编程大模型Qwen3-Coder剑指Claude4,直接从模型层下功夫。 在Cursor面向中国市场取消了An

  • 努比亚总裁倪飞回应与字节合作推出“豆包手机”:AI手机发展势不可逆

    豆包手机”在上周横空出世,这是字节为了展示豆包手机助手发布技术预览版,与中兴努比亚合作开发的工程样机,型号是nubia M153。 该机配备骁龙8至尊版芯片,定价3499元,开售后被火速抢光。 在各大博主和用户体验过之后,其深度AI操作引发了巨大关注,隐私等问题也导致一些主流App进行封禁。

  • 字节联手中兴打造!首款豆包助手手机售罄 3499元

    日前,字节跳动豆包团队发布豆包手机助手技术预览版。 随后,中兴通讯宣布,搭载豆包手机助手技术预览版的工程样机努比亚M153少量发售,该机仅有16GB 512GB一款配置,售价3499元。

  • 字节跳动的长视频猜想

    在经历了近半年时间的传闻后,字节跳动(习惯起见,下文还是用“头条”来指代这家公司)终于还是染指自制长视频了: 8 月初,头条旗下的西瓜视频正式宣布将在未来一年内投入 40 亿元用于网综的制作;与银河酷娱合作、由汪涵担当主持的第一档自制综艺节目《头号任务》目前已经在推进中。

  • 字节跳动否认成立“字节跳动教育联盟”

    字节跳动发布声明称,某上市公司在回复深交所年报问询函时称计划与字节跳动联合发起“字节跳动教育产业联盟”。该信息不实,字节跳动与抖音及其旗下各业务都没有与第三方公司成立所谓“字节跳动教育联盟”的计划。为家庭教育、职业教育、素质教育和岗前培训等领域的创业者,在课程制作、研发、包装、培训、视频剪辑、直播销售和私域互换等方面,为字节跳动教育生态创业者服务和赋能,同时为优秀的人才创造,提供更多工作机会和岗位。

  • AI日报:快手可灵 2.6 全量上线;字节Seedream 4.5发布;DeepSeek连发两款新模型

    本文汇总了AI领域最新动态:快手可灵2.6上线,实现“音画同出”生成视频;字节跳动发布Seedream4.5,提升多图一致性生成;豆包助手回应权限争议并下线微信操作功能;智源研究院推出多模态世界模型Emu3.5,可预测真实世界状态;研究揭示AI模型能发现并利用智能合约漏洞;小米公布AI战略,押注“AI+物理世界”融合;谷歌发布Workspace Studio,助力企业构建AI代理;DeepSeek同步上线V3.2与Speciale两款新模型,展示开源实力。

  • AI日报:北京发布人工智能产业白皮书;字节发布视频编辑模型Vidi2;快手将发布Kling Omni

    本期AI日报聚焦多项AI领域进展:北京发布人工智能产业白皮书,预计2025年核心产值超4500亿元;字节跳动推出120亿参数视频模型Vidi2,实现视频编辑自动化;西藏首个千亿参数藏语大模型“阳光清言”问世,助力高原AI发展;快手Kling Omni即将发布,支持导演级精准控制,可生成2分钟带原生音频长视频;Meta推出Matrix框架,革新多智能体合成数据生成;国产家庭机器人F1亮相,具备多项家务能力,计划明年上市;豆包App升级语音功能,支持四种方言对话,提升老年人使用体验;豆包手机助手技术预览版发布,旨在提供更高效交互。

  • 字节跳动为何执着于“种草”?

    “App工厂”字节跳动又上线了新应用。4月下旬,字节跳动推出全新种草App“有柿”,主打图文形式的美食、生活等经验分享,定位生活经验类的社区型产品。寻求突围的路,注定漫长艰难,考验着平台们的耐心和决心。

今日大家都在搜的词: