parameter-space-optimization
파라미터 공간 최적화
Parameter-Space Optimization은 행동 확률의 gradient를 직접 계산하는 대신 모델 파라미터 자체에 변화를 샘플링하고 성과가 높은 방향을 선택하는 방식입니다. 입력은 현재 파라미터와 perturbation이고 출력은 보상에 가중된 파라미터 업데이트이며, 전체 파라미터 Fine-tuning을 inference 수준 GPU 메모리로 수행할 수 있다는 점이 핵심입니다.
