컴퓨터 비전을 활용한 피겨 스케이팅 점프 회전 추적 및 3D 포즈 추정 모델 비교

핵심 요약

피겨 스케이팅 선수의 고속 회전 동작을 분석하기 위해 4가지 3D 포즈 추정 파이프라인을 비교하고 데이터 지터링 문제 해결을 시도했다.

배경

피겨 스케이팅의 악셀 점프 회전을 추적하기 위해 다양한 3D 포즈 추정 모델 조합을 테스트했다. 고속 회전 시 발생하는 3D 랜드마크의 노이즈 문제를 해결하기 위해 커뮤니티에 필터링 방법을 문의했다.

의미 / 영향

고속 회전 동작이 포함된 스포츠 분석에서 3D 포즈 추정 모델의 단일 추론 결과만으로는 정밀한 데이터를 얻기 어렵다는 점이 확인됐다. 향후 실무에서는 모델의 아키텍처 개선뿐만 아니라 칼만 필터나 원 유로 필터와 같은 시계열 데이터 평활화 기법의 병행이 필수적이다.

커뮤니티 반응

작성자의 프로젝트 진행 상황에 대해 긍정적인 반응이며, 고속 동작에서의 노이즈 해결을 위한 다양한 필터링 기법 제안이 예상된다.

주요 논점

01중립다수

고속 회전 시 발생하는 3D 랜드마크 지터 현상을 해결하기 위해 필터링 기법 도입이 필요하다.

합의점 vs 논쟁점

합의점

현재 3D 포즈 추정 모델의 원시 데이터는 고속 동작에서 지터링이 발생한다
데이터 시각화와 분석을 위해 OpenCV와 Matplotlib이 유용한 도구로 활용된다

논쟁점

어떤 필터링 기법이 고속 회전 동작의 특징을 유지하면서 노이즈를 가장 효과적으로 제거하는지에 대한 논의가 필요함

실용적 조언

고속 동작 추적 시 발생하는 지터링 해결을 위해 One Euro Filter 또는 Kalman Filter 적용을 고려해야 함
2D 포즈 추정 단계에서 HRnet과 같은 고해상도 모델을 사용하여 입력 데이터의 품질을 높이는 것이 유리함

언급된 도구

OpenCV추천

2D 포즈 주석 및 이미지 처리

Matplotlib추천

3D 포즈 시각화

YOLO26-pose중립

포즈 추정용 객체 탐지

HRnet추천

고해상도 포즈 추정 네트워크

섹션별 상세

피겨 스케이팅의 악셀 점프와 같은 고속 회전 동작을 분석하기 위해 D3DP, DiffuPose, PoseFormer 등 4가지 3D 포즈 추정 조합을 실험했다. YOLO26-pose를 공통 탐지기로 사용하거나 YOLOv3와 HRnet을 조합하는 등 다양한 파이프라인을 구축하여 성능을 비교했다. 각 모델 조합은 피겨 스케이팅 선수의 움직임을 포착하는 방식에서 차이를 보였다.

실험 결과 필터링을 적용하지 않은 원시 3D 랜드마크 데이터에서 고속 스핀 시 심한 지터(Jitter) 현상이 관찰됐다. 이는 회전 속도가 빨라질수록 모델이 관절 위치를 정확히 고정하지 못하고 흔들리는 문제로 이어져 분석의 정밀도를 저해했다. 작성자는 이러한 현상이 빠른 움직임에 대한 모델의 추론 한계임을 인지하고 개선 방안을 모색했다.

기술 구현을 위해 OpenCV로 2D 포즈 주석을 생성하고 Matplotlib을 통해 3D 결과를 시각화하는 워크플로우를 구축했다. 현재는 초기 단계의 결과물로 데이터 정제 과정이 포함되지 않아 실시간 추적의 안정성을 확보하기 위한 추가적인 필터링 알고리즘 도입이 필요한 상황이다. 커뮤니티에 노이즈 제거를 위한 구체적인 필터링 기법에 대한 조언을 요청하며 프로젝트를 고도화하고 있다.

실무 Takeaway

피겨 스케이팅 고속 회전 분석 시 3D 포즈 추정 모델의 데이터 지터링이 주요 해결 과제이다.
D3DP, DiffuPose, PoseFormer 등 최신 모델을 YOLO 계열 탐지기와 조합하여 성능을 평가했다.
정밀한 동작 분석을 위해서는 원시 데이터에 대한 사후 처리 필터링 기법 적용이 필수적이다.