首页 > 业界 > 关键词  > ​Pegasus-1最新资讯  > 正文

比Gemini Pro1.5强!可解读视频的多模态模型​Pegasus-1公测

2024-04-25 11:20 · 稿源:站长之家

划重点:

🌟 Pegasus-1是视频语言基础模型,迎来升级!

🌟 模型性能在多个任务中取得显著成就。

🌟 通过数据优化、视频处理和训练技术提升,刷新视频理解标准。

站长之家(ChinaZ.com)4月25日 消息:Twelve Labs 最新发布了 Pegasus-1的公测版本,这款视频 - 语言基础模型在视频理解领域取得了新突破。

Pegasus-1是一款具有约17亿参数的视频 - 语言模型,能够以卓越的准确性和细节处理能力从视频输入中生成语言描述。据称,Pegasus-1视频解读能力比Gemini Pro1.5还要强,通过优质数据、优化视频处理和精细训练等升级,提供卓越的视频理解和生成文本能力。在视频总结、问题回答和对话方面表现卓越。

image.png

产品特色功能包括:

- 数据优化:高质量数据驱动模型表现,100,000个高质量视频 - 文本对训练带来强大基础视频理解能力。

- 视频处理提升:优化空间和时间分辨率,使 Pegasus-1能更好地捕捉视频信息。

- 训练技术改进:多阶段训练避免灾难性遗忘,使模型在细节、世界知识和时间理解等方面大幅提升。

在基准测试中,Pegasus-1在视频问答、对话和摘要等任务中胜过谷歌 Gemini Pro 等现有模型,展现出卓越的性能。无论是零样本表现还是广泛泛化能力,Pegasus-1都站在行业前沿,为视频理解任务设立新标杆。

然而,仍需关注模型安全性、视频长度限制和偶发幻觉等方面的改进空间。Pegasus-1的不断进化与创新,为视频理解技术开辟新的可能性。值得一提的是,Pegasus-1未开源,通过API使用

产品入口:https://top.aibase.com/tool/pegasus-1

API文档:https://docs.twelvelabs.io/docs/generate-text-from-video

举报

  • 相关推荐
  • 东芝REGZA电视荣获日本优良设计奖——以匠心设计重塑家庭视听美学

    东芝REGZA电视Z875R系列荣获2025年日本优良设计奖,凭借功能美学与空间协调的创新设计脱颖而出。该设计融合极简线条与黄金比例,无缝整合屏幕与音响组件,金属格栅微孔兼顾视觉美感与声学功能。遥控器以直觉操作为核心,优化按键布局使操作路径缩短一半。东芝始终秉持“科技与人文平衡”理念,强调电视不仅是显示设备,更是能与居住空间融合、让用户感受影音之美的生活艺术品,通过细节设计实现自然愉悦的沉浸体验。

  • 从温室气体核查到产品LCA,SUPER DRY 干霸干燥剂系统性推进低碳转型

    11月6日,SUPER DRY干霸干躁剂在第八届中国国际进口博览会上,为其三款核心产品获得SGS颁发的生命周期评价(LCA)声明书。该认证覆盖氯化钙、硅胶和矿物干躁剂,标志企业迈出产品全生命周期环境管理关键一步。公司表示将基于LCA报告优化设计、降低碳足迹,并携手合作伙伴推动低碳转型,提升国际市场竞争力与品牌声誉,践行可持续发展承诺。

  • 理想汽车为车辆起火事件致歉!李想:这次MEGA是主动召回 生命只有一次我们不能等

    10月31日,北京理想汽车主动召回部分车辆。因冷却液防腐蚀性能不足,极端情况下可能导致动力电池和电机控制器冷却铝板腐蚀泄漏,引发故障灯亮、动力受限或无法充电,甚至电池热失控。CEO李想称此为主动召回,强调即便事故概率仅万分之一,但生命只有一次,必须及时处理安全隐患。

  • 东芝REGZA电视X东京国际电影节:以顶级音画技术,重塑影像新纪元

    2025年东京国际电影节将于10月27日至11月5日举办。东芝REGZA电视接替索尼成为官方赞助商,标志着日本影像产业格局转变。该品牌凭借深厚技术积累,连续三年蝉联日本电视销量榜首。本届电影节将打造沉浸式观影空间,通过Mini+LED技术呈现极致画质与音效,传递"高品质观看"核心价值。东芝REGZA致力于让每帧光影、每个声音都成为沉浸体验的支柱,推动高品质音画体验成为全球共识。

  • 2025年AI搜索可见性监控实战:从0到1建立GEO品牌追踪体系

    文章揭示AI搜索时代品牌面临的"隐形危机":某SaaS公司虽在Google排名第一,但在ChatGPT等AI引擎中却未被提及,反被竞品频繁推荐。随着超40%年轻用户将AI搜索作为主要信息渠道,传统SEO已无法保障品牌可见度。文章提出GEO品牌监控体系,强调需从用户视角构建查询地图,通过自动化工具追踪品牌在AI答案中的提及率、情感倾向等新指标,并制定六大实战策略,包括构建AI�

  • 体验小米SU7后 宝格丽CEO盛赞小米成就堪比苹果

    近日,LVMH集团腕表部门CEO兼BVLGARI宝格丽CEO Jean-Christophe Babin在社交媒体上分享了在进博会上体验小米汽车后的体验。 他写到,小米既不只手机制造商,也不只是汽车制造商,它是一个生态系统革命,与史蒂夫乔布斯在苹果和iPhone上创造的革命相当。 他进一步阐释:小米的独特之处在于在现实世界中管理你的真实生活,连接和同步你所有的日常节点与任务从家庭自动化系统到�

  • Sora App的AI视频社交,给了百度们新希望

    Sora2发布两周后,百度的蒸汽机AI视频模型,和谷歌Veo3.1撞了档期。 两家公司选择同期发布并非有多默契,而是Sora2带来的压迫感促使它们不得不加快脚步。 奥尔特曼将形容Sora2为“创意领域的ChatGPT3.5时刻”,不仅在物理逻辑、画面连贯性、真实感和音画同步等方面实现了质的飞跃,还把Sora从一个“文本到视频”的工具进化成一个“创意到生态”的平台。 这无疑是扔在AI视�

  • iPhone Air 2或新增1颗镜头:继续沿用6.5英寸高刷中屏

    知名博主透露,尽管初代iPhone Air市场表现不佳,苹果仍继续推进该产品线迭代。新款iPhone 18 Air将延续6.5英寸高刷屏、3D人脸识别与横向跑道设计,并重点升级影像系统——新增4800万像素主摄搭配超广角镜头组合。对比初代单摄配置提升显著。分析师郭明錤指出,现有Pro与标准版已满足高阶用户需求,导致Air系列定位尴尬。此前该机型首周销量仅5万台,供应链已下调产能。从mini、Plus到Air,苹果多次尝试细分市场均未达预期。

  • 双11京东:海尔麦浪舒适风空调双榜TOP1

    双11大促带动空调市场“冬季焕新”热潮。海尔空调表现抢眼:麦浪舒适风空调斩获京东“万单品质空调榜”与“舒适风趋势空调榜”双榜首;小红花净省电空调位列“健康趋势空调榜”第二。产品优势源于海尔开展的千人众测活动,通过17天真实用户体验,以“新品体验+真实测评”方式直观展示产品性能。当前空调消费趋势转向“实用型升级”,用户更关注舒适感、节能性与健康保障。海尔通过线下众测让用户亲身体验智能操控与舒适送风,以“眼见为实”互动提升产品可信度,为双11选购提供直观参考。

  • 海尔麦浪舒适风Pro天猫首发!当日登顶行业热销榜TOP1

    海尔麦浪舒适风Pro空调新品上市即热销,半小时销量破5000套,登顶行业榜首。其核心亮点在于智慧送风技术:首次采用UWB人感雷达,能精准感知8米内人体呼吸,自动调节风感;支持1-4米定制风距,人近风柔、人离节能;多维送风技术适配多种安装位置,避免直吹不适。产品还具备AI离线语音控制、24小时制热不停机及70℃高温制冷等实用功能,显示空调市场正从基础冷暖需求转向更智能、贴心的空气体验。

今日大家都在搜的词: