首页 > 业界 > 关键词  > PRISMA最新资讯  > 正文

PRISMA官网体验入口 AI图像视频后期处理怎么使用

2024-01-23 09:46 · 稿源:站长之家用户

PRISMA是一个计算摄影管道,可以从任何图像或视频中执行多种推断。就像光线通过棱镜折射成不同的波长一样,这个管道将图像扩展成可用于3D重建或实时后期处理操作的数据。它结合了不同的算法和开源的预训练模型,比如单目深度(MiDAS v3.1, ZoeDepth, Marigold, PatchFusion)、光流(RAFT)、分割掩模(mmdet)、相机姿态(colmap)等。结果被存储在与输入文件同名的文件夹中,每个band以.png或.mp4 文件的形式单独存储。

截屏2024-01-23 上午9.29.36.png

点击前往PRISMA官网体验入口

对于视频,在最后一步,它会尝试执行稀疏重建,可用于NeRF(如NVidia的Instant-ngp)或高斯扩散训练。推断出的深度信息默认导出为可以使用LYGIA的heatmap GLSL/HLSL采样实时解码的热度图,而光流编码为HUE(角度)和饱和度,也可以使用LYGIA的光流GLSL/HLSL采样器实时解码。

需求人群:

  • 3D重建
  • 图像/视频后期处理
  • 生成NeRFs训练数据

使用场景示例:

  • 从图像中提取多种band信息进行分析
  • 从视频中获取深度/光流信息制作3D效果
  • 作为NeRF网络的数据源进行训练

产品特色:

  • 单目深度推断
  • 光流估计
  • 图像分割
  • 相机姿态估计
  • 稀疏3D重建

举报

  • 相关推荐
  • 大家在看

今日大家都在搜的词:

热文

  • 3 天
  • 7天