project_points — 3D `render` op

• 数据种类:points → keypoints

• 调用: import fullseye as fs; fs.ledger.project_points(points, K, R=None, t=None)(要直接调用实现,import match3d; match3d.project_points(points, K, R=None, t=None);从台账取用则 ops3d.get("project_points"))

• 经台账调用的返回值: fullseye.ledger.project_points(...) 只返回**声明的 out 类型 keypoints 的值**(底层函数还会返回辅助信息)。需要被丢弃的部分时,使用 fullseye.ledger.project_points.raw(...),或直接调用 match3d.project_points。

• 底层返回: (uv (N,2), depth (N,)) → uv

用法

3D 点群 (N,3) → 图像坐标 (u,v) 与深度。针孔(depth_to_points 的正向)。

> 以下的详细说明为原文 —— 摘要与标题已翻译。

K=カメラ内部行列 [[fx,0,cx],[0,fy,cy],[0,0,1]]。R,t で外部姿勢。世界モデルの観測写像。

`P_cam = R @ P + t(R (3,3)、t (3,)。None は恒等・零)を u = fx·X/Z + cx`、

`v = fy·Y/Z + cy で投影する。返り値 (uv (N,2), depth (N,)): uv[:,0] = u`(列)、

`uv[:,1] = v(行)、depth` はカメラ座標の Z(clip 前の生値で、負もそのまま)。

`K は K[0,0]` 等で添字するので numpy 配列(nested list は不可)。

Z は `1e-6` 以上に clip してから割るので、カメラ後方の点も捨てず巨大な u,v になる

(`depth > 0 で呼び手が除く)。画像外の点も返す(render_point_depth` が範囲で切る)。

`depth_to_points の逆で、depth_to_points(render_point_depth(...))` が往復になる。

背景知识指南(该算子背后的物理与约定)

• blender_interop — Blender との併用 — 形を作って fullseye で測る(軸・単位・正解データの罠)

参考(示例数据・文献)

• 示例数据目录(下载 URL / 许可证) —— 2-D 用 skimage.data(BSD/公有领域)加合成图,3-D 给出真实数据源(Stanford/PDS 等)的下载 URL。

• 算子来历与参考文献 —— 该算子族所依据的研究/方法出处。

可运行的示例(实际调用该算子并已验证的样例)

• pnp_pose_outliers — py -3.11 examples_3d/pnp_pose_outliers.py

• pose_estimation — py -3.11 examples_3d/pose_estimation.py

类型可衔接的下一个算子(可接受 `keypoints` 作为输入)

fuse_to_voxel · dlt_pose · pnp_ransac · reprojection_error

同类别(`render`)

render_point_depth · render_volume_projection · render_shaded · ambient_occlusion · cast_shadow · phong_shade · matcap_shade · supersample_mesh

*Provenance: match3d.py — 3D 算子登记表。本条目由 tools/opdocs.py md 自动生成(请勿手工编辑)。*

project_points — 3D render op

用法