ControlNet Demo
ControlNet 이번에 포스팅할 Diffusion Model은 ControlNet이다. 최근 포스팅이 뜸했는데 그 이유가 이번 ControlNet으로 연구를 진행하고 있어서 여러가지 검증을 진행하다보니 뜸해졌다. 아무튼 ControlNet에 대한 간략한 설명과 Demo Code...
Recent posts
SMPL_mesh short path algorithm (Dijkstra, pygeodesic)
Dijkstra Algorithm 내가 하려는 작업은 SMPL Mesh에서 두 Vertex에 대한 shortest path를 구하려는 작업이다. 그냥 두 vertex 사이의 유클리디안 거리를 구하게 되면 3차원이기 때문에 직선 거리를 구하게 되고 mesh에 대한 weight를 계산...
Amass dataset 2D Projection (2)
이전 연구 여기에 들어가면 이전에 했던 연구를 볼 수 있다. 이번에 해볼 연구는 vertex를 뽑아서 Regressor를 거친 후에 pose를 뽑아 projection 시키는 것이다.
Amass dataset 2D Projection
Amass Dataset Amass에서 제공하는 point cloud로 smpl registration을 거쳐 나온 parameter들을 모아둔 dataset이다. Amass Download에서 다양한 Dataset을 받을 수 있는데 SMPL+H G, SMPL-X G, SMPL-X...
T2M-GPT 코드 분석 (4) VQ-VAE 모델 확인
VQ-VAE Model 코드를 통해 위 그림의 모델을 확인해보았다. 가장 먼저 train_vq.py를 확인해 VQ-VAE를 어떻게 훈련시키는지 확인해 봤다. net = vqvae.HumanVQVAE(args, ## use args to define different parame...