首页 > 业界 > 关键词  > ​Pegasus-1最新资讯  > 正文

比Gemini Pro1.5强!可解读视频的多模态模型​Pegasus-1公测

2024-04-25 11:20 · 稿源:站长之家

划重点:

🌟 Pegasus-1是视频语言基础模型,迎来升级!

🌟 模型性能在多个任务中取得显著成就。

🌟 通过数据优化、视频处理和训练技术提升,刷新视频理解标准。

站长之家(ChinaZ.com)4月25日 消息:Twelve Labs 最新发布了 Pegasus-1的公测版本,这款视频 - 语言基础模型在视频理解领域取得了新突破。

Pegasus-1是一款具有约17亿参数的视频 - 语言模型,能够以卓越的准确性和细节处理能力从视频输入中生成语言描述。据称,Pegasus-1视频解读能力比Gemini Pro1.5还要强,通过优质数据、优化视频处理和精细训练等升级,提供卓越的视频理解和生成文本能力。在视频总结、问题回答和对话方面表现卓越。

image.png

产品特色功能包括:

- 数据优化:高质量数据驱动模型表现,100,000个高质量视频 - 文本对训练带来强大基础视频理解能力。

- 视频处理提升:优化空间和时间分辨率,使 Pegasus-1能更好地捕捉视频信息。

- 训练技术改进:多阶段训练避免灾难性遗忘,使模型在细节、世界知识和时间理解等方面大幅提升。

在基准测试中,Pegasus-1在视频问答、对话和摘要等任务中胜过谷歌 Gemini Pro 等现有模型,展现出卓越的性能。无论是零样本表现还是广泛泛化能力,Pegasus-1都站在行业前沿,为视频理解任务设立新标杆。

然而,仍需关注模型安全性、视频长度限制和偶发幻觉等方面的改进空间。Pegasus-1的不断进化与创新,为视频理解技术开辟新的可能性。值得一提的是,Pegasus-1未开源,通过API使用

产品入口:https://top.aibase.com/tool/pegasus-1

API文档:https://docs.twelvelabs.io/docs/generate-text-from-video

举报

  • 相关推荐
  • 即构科技AI数字人伴学赋能千人大班课,实现个性化1对1互动

    在线教育结合AI技术,通过引入AI数字人教师,解决大班课互动不足问题。该方案支持千人课堂实时1对1互动,延迟低至1.5秒,提供个性化反馈与纠错,显著提升学生参与度和学习效果。同时降低教师负担,控制互动成本,助力教育机构实现规模化与普惠教学。

  • 卡萨帝AI之眼冰箱将上市,夯实高端TOP1地位

    卡萨帝9月将推出搭载“AI之眼”的鉴赏家冰箱,通过图像识别技术自动识别食材并联动氮氧智控系统精准保鲜。该产品能根据用户健康需求生成专属膳食方案,支持高血压、控糖等个性化场景。采用平嵌设计实现无缝融入橱柜,重新定义高端厨居美学。作为行业首款可定制AI健康营养冰箱,未上市已引发期待,将巩固卡萨帝在高端市场的领先地位。

  • 当折叠屏遇上AI 探秘开发Samsung One UI 8的幕后故事

    三星One UI 8与Galaxy Z Fold7/Flip7同步亮相,深度融合折叠形态与AI技术,带来全新交互体验。通过与谷歌紧密合作,新系统首批预装Android 16,用户可提前体验最新功能。系统聚焦多模态AI、折叠屏优化UX及个性化设计,并强化安全防护。开发团队透露,三星与谷歌从早期规划便协同开发,实现高效多任务处理与创新功能,未来将继续深化AI生态合作。

  • AI与数字化变革费率3年连降,海尔智家H1再优化0.1pct

    海尔智家2025上半年业绩逆势增长,营收1564.94亿元,同比增长10.2%;净利润120.33亿元,增长15.6%。核心驱动因素为数字化转型与AI技术应用,通过全流程降本增效,销售管理费用率连续三年下降。国内聚焦明星爆品与多品牌协同,海外坚持本土化运营,实现各区域加速增长。AI驱动的产品创新打造多个行业爆款,带动高端品牌卡萨帝增长超20%。未来将持续深化数字化变革,开拓新发展空间。

  • AI最新资讯在哪里看?AIbase:高效获取国内外AI新闻头条与行业动态

    文章探讨了AI时代信息过载的困境:有价值的前沿动态、重磅模型发布和行业解读分散各处,筛选成本高、效率低下。AIbase资讯导航站应运而生,通过四大核心功能解决痛点:1)聚合主流信源,过滤低质噪音;2)结构化分类呈现大模型动态、行业应用等六大板块;3)提炼核心要点,拒绝标题党;4)高频更新确保信息鲜度。该平台致力于成为AI领域的"信息雷达",帮助用户节省70%信息搜集时间,将精力聚焦于思考与创造。适用于技术负责人快速掌握行业动态、产品经理调研案例、投资人捕捉趋势等多元场景。

  • 全球Top 1的手游,被忽视了太久

    成为业界和玩家热议的中心,收获聚光灯般的待遇,对于多数游戏都是必需品。但有个例外: 《王者荣耀》。 倒不是说它成绩或者热度不高,只是它稳居榜首已经成为了游戏行业里的一种常识:哪一天榜首产品换了,那才叫新闻。 《王者荣耀》登顶这事到底有多「普通」呢?据AppMagic,《王者荣耀》是今年上半年唯一一款营收破十亿美元的手游;过去三年,它还实现了全球手游�

  • 1分钟生成精准凭证,用友BIP收入云8.0让合规与效率两不误

    传统财务凭证生成依赖人工录入,效率低、易出错且合规风险高。用友BIP收入8.0通过AI生单技术实现全自动凭证生成,将耗时从数天缩短至1分钟,提升准确性与合规性。系统自动匹配会计科目,无缝对接电子发票,支持多行业适配,助力企业实现效率与合规的双重突破,重构财务管理模式。

  • 双节能领域唯一获国际认证!海尔壁挂炉增幅居行业TOP1

    随着国家“双碳”政策推进,壁挂炉行业结构明显变化,节能型冷凝产品逐渐占据主流。2025年上半年数据显示,行业整体销量下降3.6%,但冷凝产品逆势增长20.49%,海尔凭借双冷凝节能技术实现43.29%高增长,获“国际领先”认证。该技术将热效率提升至103%,并牵头制定超一级能效标准,同时通过零冷水精控、AI算法等解决用户舒适痛点,为行业向高效、舒适发展注入信心。

  • 普渡机器人发布3D感知AI扫地机器人PUDU MT1 Max,重塑智能清洁新高度

    普渡机器人于2025年8月20日发布3D感知AI扫地机器人PUDU MT1Max。该产品在MT1基础上大幅升级,搭载3D雷达与多传感器融合系统,显著增强复杂场景感知与避障能力。通过AI技术实现自适应清洁、垃圾识别、巡检清洁等功能,支持10万平方米以上大场景作业。具备自动振尘过滤和智能避雨机制,提升安全性与运维效率,重塑智能清洁行业新标准。

  • 百度APP发布AI星河计划,构建AIGC创作者全方位扶持体系

    8月29日,百度AIGC未来创作联赛颁奖典礼在京举行,活动汇聚众多高质量AIGC作品与优秀创作者。百度发布“AI星河计划”,投入亿级流量和千万现金补贴,通过流量扶持、涨粉加速、分成翻倍、多元变现等手段,构建全方位创作者专属成长扶持体系。该计划根据作者AI技术与内容创作能力区分4档创作者,提供定制化支持套餐,最高可享亿级流量池和3倍分成补贴。百度APP依托月活7.35亿流量池与技术优势,已成为AIGC内容平台市场头部玩家,期待与更多优秀创作者共建未来内容生态。

今日大家都在搜的词: