lmo
노름 제약 선형 최적화 오라클
노름 제약 선형 최적화 오라클(LMO)은 주어진 그래디언트 또는 선형화된 목표에 대해 노름 제약을 만족하는 방향을 선택하는 최적화 구성요소를 의미한다. 이 논문에서는 다양한 옵티마이저의 업데이트 규칙을 LMO 관점에서 통일해 동일한 추상적 연산으로 환원하는 역할을 한다. LMO 관점은 메커니즘별 차이를 명확히 하고 서로 다른 옵티마이저가 어느 목표에 기여하는지를 비교 가능하게 만드는 장점이 있다.
노름 제약 선형 최적화 오라클
노름 제약 선형 최적화 오라클(LMO)은 주어진 그래디언트 또는 선형화된 목표에 대해 노름 제약을 만족하는 방향을 선택하는 최적화 구성요소를 의미한다. 이 논문에서는 다양한 옵티마이저의 업데이트 규칙을 LMO 관점에서 통일해 동일한 추상적 연산으로 환원하는 역할을 한다. LMO 관점은 메커니즘별 차이를 명확히 하고 서로 다른 옵티마이저가 어느 목표에 기여하는지를 비교 가능하게 만드는 장점이 있다.