首页/新闻资讯/正文详情

MeshSplatting 数据准备指南:如何为自己的场景准备COLMAP、Depth Anything v2深度与Metric3D法线监督

发布时间:2026/11/20 4:43:00 来源:云帆数科 栏目:资讯中心
MeshSplatting 数据准备指南:如何为自己的场景准备COLMAP、Depth Anything v2深度与Metric3D法线监督
【免费下载链接】mesh-splatting项目地址https://gitcode.com/gh_mirrors/me/mesh-splatting点击查看免费下载MeshSplatting 是一个基于不透明网格Opaque Meshes的实时可微分渲染项目CVPR 2026通过三角形 Splatting 实现高质量场景重建与实时渲染。想在自己的场景上复现效果数据准备是关键一步你需要一份 COLMAP 重建结果可选地再补充Depth Anything v2 深度图与Metric3D 法线图作为优化监督信号。本文将手把手带你完成这三类数据的准备让你快速上手训练自己的场景。一、先认识标准目录结构MeshSplatting 数据准备的核心MeshSplatting 基于 COLMAP 数据集格式加载逻辑在 scene/dataset_readers.py 中实现。一个完整的场景目录应如下所示my_scene/ ├── images/ # RGB 图像默认读取此文件夹 │ └── *.jpg ├── sparse/ │ └── 0/ │ ├── cameras.bin # 相机内参 │ ├── images.bin # 相机外参 │ ├── points3D.bin # 稀疏点云 │ └── depth_params.json # 可选深度标定参数 ├── depth/ # 可选Depth Anything v2 生成的深度图 │ └── *.png └── normals/ # 可选Metric3D 生成的法线图 └── *.png 三个关键约定深度图文件夹名必须叫depth法线图文件夹名由图像文件夹名替换而来images→normalsimages_2→normals_2所有文件以图像同名无扩展名为基准。二、COLMAP 场景准备第一步也是必选项用相机围绕场景拍摄照片360° 环绕拍摄效果最佳参考 MipNeRF-360 的采集方式。运行 COLMAP 完成特征提取、匹配与稀疏重建SfM输出sparse/0/目录。支持bin与txt两种格式程序会优先读取二进制文件cameras.bin、images.bin读取失败时自动回退到文本格式。注意仅支持PINHOLE与SIMPLE_PINHOLE相机模型无畸变带畸变模型的图会在加载时报错。训练命令详见 README.mdpython train.py -s path_to_scenes -m output_model_path --eval室内场景需追加--indoor参数。若图像存放在非默认文件夹如images_2、images_4可通过-i参数指定。三、Depth Anything v2 深度图生成4步完成深度监督深度图作为先验参与优化损失权重定义在 arguments/init.py 的depth_lambda_init/depth_lambda_final能显著提升重建质量。生成步骤如下第 1 步准备 Depth Anything v2 仓库按 Depth Anything v2 官方说明克隆仓库并将Depth-Anything-V2-Large权重下载放入Depth-Anything-V2/checkpoints/目录。第 2 步批量生成深度图python Depth-Anything-V2/run.py --encoder vitl --pred-only --grayscale \ --img-path path to input images --outdir output path第 3 步把深度图放进depth文件夹新建名为depth的文件夹与 RGB 图像文件夹并排放置例如MipNeRF360/Garden/depth/。每张深度 PNG 的文件名必须与对应图像同名仅扩展名为.png。第 4 步生成depth_params.json标定文件python utils/make_depth_scale.py --base_dir path to colmap --depths_dir path to generated depths该脚本utils/make_depth_scale.py会利用 COLMAP 稀疏点的深度与单目深度图做逐图仿射对齐scale offset结果写入sparse/0/depth_params.json。训练时加载器会据此把相对深度换算为米制深度并对离群图scale 偏离中位数过多时自动屏蔽其深度监督保证鲁棒性。四、Metric3D 法线监督一条命令提取法线图法线监督用于约束网格表面的朝向正确性提取脚本为 extract_normals.py内部调用 Metric3Dvit_smallFP16 推理python extract_normals.py -s path_to_dataset常用参数说明参数说明-s/--scene场景根目录如.../MipNeRF360/bicycle-i/--images_folder图像子文件夹名默认images高分辨率数据集可填images_2或images_4脚本会自动创建对应的输出目录images→normals遍历文件夹内所有 jpg/jpeg 图像将法线预测缩回原始分辨率并保存为 PNG。法线监督是可选的加载器 scene/dataset_readers.py 会在images同级查找normals文件夹存在即启用不存在则跳过因此你也可以替换为其他法线估计器。五、训练与验证检查数据是否准备正确数据准备完成后直接运行训练即可验证python train.py -s path_to_scenes -m output_model_path --eval训练日志中如果出现xxx not found in depths_params之类提示说明某张图像的命名与depth_params.json中的键对不上请检查深度图文件名。训练完成后渲染验证python render.py -m path_to_model生成视频python create_video.py -m path_to_model -s path_to_scenes导出 PLYpython create_ply.py output_model_path六、常见坑位清单MeshSplatting 数据准备排错指南深度文件夹名不对必须是depth不是depths或其他名称否则深度监督不生效。深度图是彩色或 8 位灰度加载器按 16 位除以 2¹⁶解析灰度 PNG请使用 Depth Anything 官方--grayscale输出。--indoor会关闭深度正则化室内预设update_indoor将depth_lambda_init/depth_lambda_final置 0这是官方针对室内场景的调参策略属正常行为。图像文件夹用了降采样版本如用images_2训练与法线提取-i images_2两处都要保持一致。COLMAP 有畸变仅支持 PINHOLE / SIMPLE_PINHOLE拍摄与标定阶段就应避免畸变模型。首次加载会转换点云程序首次打开场景时会将points3D.bin转换为points3D.ply并缓存属正常提示。总结完成 COLMAP 重建后你的场景就能直接训练再按本文补充depth/深度图 depth_params.json与normals/法线图即可获得最完整的监督信号组合。整套流程的核心脚本只有三个utils/make_depth_scale.py、extract_normals.py 以及训练入口 train.py照着目录结构准备一次就能跑通。赞分享【免费下载链接】mesh-splatting项目地址https://gitcode.com/gh_mirrors/me/mesh-splatting点击查看免费下载相关推荐Depth-Anything-V2深度估计终极指南如何快速实现室外场景精准测距Depth Anything V2深度估计终极指南如何快速实现室外场景精准测距 Depth Anything V2是当前最先进的单目深度估计基础模型能够在各人工智能计算机视觉深度学习Depth-Anything-V2终极指南如何用Transformer实现精准单目深度估计Depth Anything V2终极指南如何用Transformer实现精准单目深度估计 Depth Anything V2是一个更强大的单目深度估计基础模人工智能计算机视觉深度学习深度估计革命如何用Depth-Anything-V2实现精准度量深度训练深度估计革命如何用Depth Anything V2实现精准度量深度训练 深度估计技术正在经历一场革命性的变革从传统的相对深度估计迈向更精准的度量深度估计。人工智能计算机视觉深度学习上一篇5 分钟解锁中兴光猫工厂模式zteOnu 一条命令激活并永久开启 Telnet下一篇Nucleus Co-Op 分屏多人游戏工具完整指南一台电脑实现本地双人联机创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考

相关推荐

Open Video Editor 导出指南:H.264/H.265 编码、分辨率与媒体类型选择全解析
Open Video Editor 导出指南:H.264/H.265 编码、分辨率与媒体类型选择全解析

音视频移动开发 【免费下载链接】open-video-editor Open source Android video editor, built with Media3 and Jetpack Compose. 项目地址: https://gitcode.com/gh_mirrors/op/open-video-editor 点击查看 免费下载 Open Video Editor 是一款基于 Media3 和 Jet… · 2026/11/13 16:49:09

GitHub 热榜项目:日榜(2026-08-12)
GitHub 热榜项目:日榜(2026-08-12)

本期共收录 17 个热门开源项目,合计新增 ⭐ 8,555 stars,热门语言:Python、TypeScript、Shell。 数据来源:GitHub Trending | 统计周期:日榜 | 更新日期:2026-08-12 📝 本期综述 本期最显著的信… · 2026/11/19 12:47:37

流量特征分析的恶意流量检测系统 毕业设计-附源码23993
流量特征分析的恶意流量检测系统 毕业设计-附源码23993

各位码友大家好,本人深耕计算机专业毕设多年,主营全方向计算机毕业设计开发、文档撰写、项目调试、答辩辅导全流程服务。一、可承接技术方向1. 后端开发类 Java SpringBoot/SSM、Python Django/Flask、PHP、C# .NET、Node.js、Go2. 前端 & 小程序… · 2026/11/17 13:18:02

电工证宝典题库免费怎么报名,怕考不过白交培训费就看这篇
电工证宝典题库免费怎么报名,怕考不过白交培训费就看这篇

电工证宝典题库免费怎么报名,怕考不过白交培训费就看这篇 你是不是正在为电工证考试发愁?怕考不过白白交了培训费?别急,这期内容专为你量身打造,从怎么报名到题库资料,再到考试重点一网打尽,看完你就知道该怎么稳稳拿下电工证了。… · 2026/11/20 4:42:57

江苏电力电缆证培训全国通用怎么复审延期全攻略
江苏电力电缆证培训全国通用怎么复审延期全攻略

江苏电力电缆证培训全国通用怎么复审延期全攻略 证书过期了不知道怎么复审延期?别急,江苏电力电缆证培训全国通用,很多小伙伴遇到的这种情况其实很常见,尤其是一些中小型施工企业的负责人,因为管理流程不熟悉,很容易在证书复审上掉链子,影响项目进度甚… · 2026/11/20 4:42:57

珠海电工证复审机构怎么选 郑州报考避坑指南
珠海电工证复审机构怎么选 郑州报考避坑指南

珠海电工证复审机构怎么选 郑州报考避坑指南 你是不是也遇到过这种情况:手上拿着电工证,但到期了不知道去哪复审,怕被中介坑了钱还拿不到证?现在市场上打着“包过”“快速出证”旗号的机构太多,真的让人防不胜防。特别是像珠海这样的地方,电工证复审机… · 2026/11/20 4:42:57

应急管理局发电工证上岗必备,工地太忙根本没时间复习考试怎么办?
应急管理局发电工证上岗必备,工地太忙根本没时间复习考试怎么办?

应急管理局发电工证上岗必备,工地太忙根本没时间复习考试怎么办? 工地太忙根本没时间复习考试,这几乎是每个工地电工的切身之痛。尤其是刚拿到 应急管理局发电工证… · 2026/11/20 4:42:57

电工证宝典题库免费,内部消息告诉你怎么避开中介坑
电工证宝典题库免费,内部消息告诉你怎么避开中介坑

电工证宝典题库免费,内部消息告诉你怎么避开中介坑 不知道去哪报名怕被中介坑?特别是南阳初次报考的你,面对五花八门的培训机构和真假难辨的考试信息,真的容易踩坑。别急, 电工证宝典题库免费 的资源你得掌握,再加上一些 内部消息… · 2026/11/20 4:42:57

下雨天考电工证别怕挂科!内部消息教你稳过实操考试
下雨天考电工证别怕挂科!内部消息教你稳过实操考试

下雨天考电工证别怕挂科!内部消息教你稳过实操考试 实操考试心里没底怕挂科,尤其像你这样在信阳公路工程一线工作的朋友,天天跟高压电、电缆打交道,考个低压电工证看似简单,其实暗藏门道。特别是 下雨天考电工证… · 2026/11/20 4:41:57

长春初级电工证怎么考?通过率揭秘全在这里
长春初级电工证怎么考?通过率揭秘全在这里

长春初级电工证怎么考?通过率揭秘全在这里 之前考的证在外省能不能转过来?这几乎是每个想从事电工工作的人都会问的问题。特别是那些在外地打拼多年、手里握着一张“外地电工证”的人,到了长春想继续干这一行,第一反应就是“我的证能用吗?”。今天我们就… · 2026/11/19 16:06:02

国内电工证报考条件与考试时间
国内电工证报考条件与考试时间

低压电工证怎么考?学历不高也能报名,官方报名入口全在这 你是不是经常听说“电工证是入行门槛”,但又担心自己学历不够、经验不足,根本报不了名?别急,今天就带你从零了解【国内电工证】的报考流程、考试内容,还有怎么在 官方报名入口… · 2026/11/19 17:40:37

电工作业时如何断电?电子证书到底能不能全国通用?
电工作业时如何断电?电子证书到底能不能全国通用?

电工作业时如何断电?电子证书到底能不能全国通用? 实操考试心里没底怕挂科,特别是电工作业时如何断电这一操作,不仅关系到你能不能拿到证书,更关系到以后能不能顺利上岗。很多人觉得这不过就是“断个电”,但其实这里面的门道可不少,稍有不慎就可能出错… · 2026/11/19 17:50:07

建设厅特种工周三报名怎么弄?上岗必备别被中介坑
建设厅特种工周三报名怎么弄?上岗必备别被中介坑

建设厅特种工周三报名怎么弄?上岗必备别被中介坑 不知道去哪报名怕被中介坑?作为商丘某高校工程类应届毕业生,小李最近就遇到了这样的困扰。他刚毕业,正在找实习岗位,发现很多工地都要求持有特种作业操作证,尤其是【建设厅特种工周三报名】这个时间点,… · 2026/11/20 0:00:54

中专考的中级电工证内部消息全攻略
中专考的中级电工证内部消息全攻略

中专考的中级电工证内部消息全攻略 你中专毕业,手头有中级电工证,但不知道从哪开始报名,怕被中介坑?别急,这篇文章就是为你量身定制的“内部消息”,帮你避开报名陷阱,稳稳拿到证书。… · 2026/11/20 0:00:54

外省电工证能转过来吗?电子证书怎么查电工作业教学效果评价
外省电工证能转过来吗?电子证书怎么查电工作业教学效果评价

外省电工证能转过来吗?电子证书怎么查电工作业教学效果评价 之前考的证在外省能不能转过来?这几乎是所有在外地打拼的电工从业者最关心的问题。特别是像洛阳这样的工业城市,很多电工证是在外地考的,现在想在当地用,流程是不是很复杂?其实,只要搞清楚… · 2026/11/20 0:00:54

双极步进电机控制实战:DRV8818PWPR与PIC18F86K22驱动调试
双极步进电机控制实战:DRV8818PWPR与PIC18F86K22驱动调试

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views … · 2026/11/19 6:33:25

STM32F207ZG + DRV8818PWPR 步进电机驱动实战解析
STM32F207ZG + DRV8818PWPR 步进电机驱动实战解析

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views … · 2026/11/19 6:33:32

DRV8818PWPR+dsPIC30F4013工业级双极步进电机控制方案
DRV8818PWPR+dsPIC30F4013工业级双极步进电机控制方案

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views … · 2026/11/19 0:22:38

了解更多?预约专属演示

我们的顾问将为您一对一讲解产品与方案

企业微信二维码