首页 > 业界 > 关键词  > MotionCtrl最新资讯  > 正文

腾讯视频运动控制器MotionCtrl正式开源

2023-12-28 10:41 · 稿源:站长之家

站长之家(ChinaZ.com)12月28日 消息:腾讯日前发布的视频运动控制器MotionCtrl已经正式开源了,并且试用效果非常出色。该项目可以高度自定义相机镜头和画面物体在3D 空间运动轨迹,实现更精细和多样化的运动控制。

image.png

Demo:https://huggingface.co/spaces/TencentARC/MotionCtrl

项目地址:https://top.aibase.com/tool/motionctrl

在Demo中包含多步选择,相对比较复杂。用户需要首先选择控制镜头还是物体,也可以同时控制两者。然后需要选择对应的姿势,虽然没有开放自定义,但选择项相当丰富。最后只需要输入提示词,等待生成即可。

image.png

MotionCtrl能够独立有效地控制摄像机运动和物体运动,实现更精细和多样化的运动控制。其架构考虑了摄像机运动和物体运动的固有属性,通过CMCM和OMCM模块分别处理这两种运动类型。这使得在生成的视频中可以实现更细致的运动调整,并灵活地组合这两种运动类型,提高了控制的多样性。

该项目的优势在于,它可以有效地独立控制摄像机和物体的运动,实现更精细的运动控制,促进两种类型运动的灵活多样组合。此外,该技术的运动条件由摄像机的姿势和轨迹确定,与视频中物体的外观或形状影响最小。

举报

  • 相关推荐
  • Windows Arm64 托管运行正式支持 GitHub Actions,加速开发流程

    Arm与GitHub深化合作,为Arm平台开发者提供更高效的开发体验。

  • Qwen3深夜正式开源,小尺寸也能大力出奇迹。

    阿里发布通义千问Qwen3大模型系列,包含8个不同规模的模型,从0.6B到235B参数全覆盖。亮点包括:1)全球顶尖模型能力;2)首个开源的混合推理模型;3)支持119种语言;4)部署成本仅为DeepSeek+R1的三分之一;5)支持MCP协议。其中235B旗舰模型性能对标顶级闭源模型,30B-MoE模型激活参数仅3B。所有模型均采用Apache2.0协议开源,支持商用。实测显示Qwen3在代码和写作方面优于DeepSeek

  • 追觅全球首创20万转高速数字马达量产落地!吸尘Z50 Station突破行业天花板

    在吸尘器行业持续突破性能极限的进程中,追觅科技以突破性创新技术再次领跑赛道。2024年,追觅科技自研的20万转/分钟高速数字马达获全球权威机构沙利文全球首创认证。追觅科技将以创新为引擎,持续引领全球清洁电器行业迈向智能化、高效化的新时代。

  • 理想自研星环OS正式开源!操作系统代码已开放下载

    理想汽车4月28日宣布自研"星环OS"操作系统正式开源,成为全球首个实现整车级操作系统全面开源的车企。该系统代码已通过Gitee平台开放下载,采用Apache License V2.0开源协议,覆盖智能车控、智能驾驶、通信中间件、信息安全四大核心模块。该系统不同于车载屏幕系统,而是整车全链路操作系统,包括车辆控制等核心功能。研发始于2021年,投入200名研发人员和10亿元人民币。系统采用资源集中与共享架构,支持英飞凌、地平线等主流车规芯片,芯片适配验证时间比传统闭源系统缩短80%。在性能方面,AI算力虚拟化损耗降低80%,传感器访问时延降低90%,存储资源占用减少30%,响应速度比AUTOSAR提升1倍。安全性能方面,120km/h高速状态下AEB刹停距离缩短7米。

  • 提升大模型自动修Bug能力 豆包正式开源首个多语言类SWE数据集

    今日,字节跳动豆包大模型团队宣布,正式开源首个多语言类SWE数据集Multi-SWE-bench,可用于评估和提升大模型自动修Bug”能力。在SWE-bench基础上,Multi-SWE-bench首次覆盖Python之外的7种主流编程语言,是真正面向全栈工程”的评测基准。相比于以往聚焦Python的单语言任务,Multi-SWE-bench更贴近现实中的多语言开发场景,也更能反映当前模型在自动化软件工程”方向上的实际能力边界。

  • 联想moto razr 60 Ultra国行今天发布:首款骁龙8至尊版小折叠

    新机后置5000万像素主摄 5000万像素超广角微距双摄,内置4700mAh电池,支持68W有线 30W无线充电,支持IP48级别防尘防水。

  • 阿里巴巴正式开源千问3 仅需4张H20即可部署满血版

    阿里巴巴开源新一代通义千问模型Qwen3,采用混合推理架构,集成"快思考"与"慢思考"模式,能根据任务复杂度自动调整计算资源。该模型参数规模235B,在GPQA等权威评测中表现优异,以更小规模实现超越上一代模型的性能。Qwen3包含2款MoE模型和6款密集模型,部署成本大幅降低,仅需4张H20显卡即可运行满血版,显存占用仅为同类模型的三分之一。新模型通过智能分配算力,在简单任务上快速响应,复杂问题上深度思考,显著提升能效比。

  • 忆联PCIe 5.0 ESSD基于H3C UniServer G7服务器的SPECstorage Solution 2020卓越性能验证

    忆联PCIe 5.0企业级固态硬盘UH812a/UH832a与H3C UniServer G7服务器强强联合,在SPECstorage Solution 2020测试中表现卓越。测试结果显示,该组合在AI图像处理、电子设计自动化、基因组分析等场景下性能领先:AI处理响应时间最快0.24毫秒,较上一代提升48.94%;EDA工作负载响应时间仅0.03毫秒;基因组分析吞吐量达21236MB/s。产品采用PCIe 5.0技术,带宽较PCIe 4.0翻倍,延迟降低43%,支持1.6TB-15.36TB多种容量,为AI训练、边缘计算、金融核心系统等场景提供高性能存储解决方案,重新定义企业级存储性能标杆。

  • 全球首款骁龙8至尊版小折叠!联想moto razr 60 Ultra发布

    摩托罗拉4月25日在海外发布moto razr 60 Ultra折叠手机,这是全球首款搭载骁龙8至尊版的小折叠旗舰。新机采用4英寸超大外屏和7英寸内屏,均支持165Hz LTPO自适应高刷,峰值亮度达4000尼特。后置5000万双摄支持OIS防抖,配备4700mAh电池和68W快充。机身重199g,展开厚度7.2mm,支持IP48防护。海外售价1300美元(约9474元),联想宣布将于5月8日在上海发布国行版本,预计价格会更优惠。

  • 首款骁龙8至尊版小折叠!联想moto razr 60 Ultra国行官宣5月8日发布

    联想将于5月8日发布国行版moto razr 60 Ultra折叠手机。该机采用4英寸超大外屏和7英寸内屏,支持165Hz刷新率,搭载骁龙8至尊版处理器,配备16GB内存+512GB存储。后置5000万像素双摄,主摄支持OIS防抖,内置4700mAh电池,支持68W快充。整机重199g,支持IP48防护。海外售价约9474元人民币,国行版预计价格会更优惠。这是全球首款骁龙8至尊版小折叠手机,刷新了折叠屏性能极限。