La evolución de las técnicas de eliminación de ruido de malla: desde filtros simples hasta aprendizaje profundo 3D

En este artículo de descripción general, aprenderá qué es la eliminación de ruido de malla, qué métodos se han usado y se están usando para eliminar el ruido en mallas poligonales (desde filtros clásicos hasta redes neuronales de gráficos avanzados) y obtendrá una idea general del desarrollo de la dirección.

¿Por qué necesita la eliminación de ruido de la malla?

3D- . , ? Twin3d ( ) 3D-, . , , //. , .

3D- . reverse engineering CAD- , . CAD-, — , , , . , .

3D-, , mesh denoising. smoothing, «». 3D- , , . 3D-? , .

- … , (Laplacian smoothing, Taubin smoothing).

Alisado laplaciano — Laplacian smoothing

2003 Bilateral mesh denoising – ( 2D ) . – , : , . 7 , (Bilateral normal filtering for mesh denoising), .

Bilateral Normal Filtering :

$n_i ^ k = \ Lambda (\ sum_ {f_j \ in N_i} A_jW_s (|| c_i-c_j ||) W_r (|| n_i-n_j ||) n_j),$

N_i — f_i , Nueva Jersey — f_j , A_j — f_j , c_j — f_j ( ), $W (x) = exp (-x ^ 2 / (2 \ sigma ^ 2))$ — , $\ Lambda$ — .

, . W_s (x) — f_i f_j — , . W_r (x) , , . A_j

2015 Guided Mesh Normal Filtering, .

? , , . 3D- , .

mesh denoising, . , , Mesh Denoising via L0 minimization , . , – CAD- .

mesh denoising

2016 Mesh Denoising via Cascaded Normal Regression, . , noisy ground truth (GT) 3D- ( ).

(Synthetic) (Kinect v1, Kinect v2, Kinect Fusion). Synthetic noisy ( ). , . GT Artec Spider c , Microsoft Kinect.

Ejemplos del conjunto de datos

– noisy ground truth GT . – . , . , . , .

Canalización de regresión normal en cascada — Cascaded Normal Regression Pipeline

? -, . -, . , . , mesh denoising.

NormalNet: Learning based Guided Normal Filtering for Mesh Denoising. – , Guided Mesh Normal Filtering. (voxel – ), CNN. .

Canalización NormalNet — NormalNet pipeline

NormalNet. CNN 4- , , . () — . ResNet, , . . , .

Arquitectura CNN en NormalNet — CNN NormalNet

, CNN , Guided Normal Filtering, . , Guided Normal Filtering.

, DNF-Net: a Deep Normal Filtering Network for Mesh Denoising . , end-to-end . ResNet , .

Arquitectura DNF-Net — DNF-Net

DNF-Net : . multi-scale feature embedding unit . . (. ) , ( ). F .

Unidad de incrustación de características de múltiples escalas — Multi-scale Feature Embedding Unit

residual learning unit . KNN (K-Nearest Neighbors) k . k . “” .

Unidad de aprendizaje residual — Residual learning unit

, , “” . , , .

, — , .. , “” .

Deep learning

, , . , - . 3D DL : .

, Mesh Denoising with Facet Graph Convolutions end-to-end pipeline , (, ) – , . — .

Canalización de convolución de gráfico de facetas — Facet Graph Convolution pipeline

U-Net, , .

Arquitectura de red de convolución gráfica — Graph Convolution Network

Gráfico de convolución

U-Net ( ), .

, 3D . - , -: , .

mesh denoising, , , , , ( ), .

Twin3d , mesh denoising . , ;)

All Articles