오픈/클로즈드 루프
환경과 에이전트의 상호작용 방식 분류로, 오픈루프는 에이전트의 출력을 환경이 즉시 반영하지 않거나 피드백이 제한된 경우, 클로즈드루프는 연속적인 관측과 피드백으로 정책이 환경에 직접 영향을 미치는 경우를 말한다. 평가 설계에서 실험 조건과 일반화 가능성을 결정한다.