관찰 비용
행동을 취한 뒤 보상을 관찰할 때 발생하는 액션별 비용을 의미하며 이 논문은 관찰 여부를 선택 가능한 결정으로 두어 관찰 비용과 보상 손실을 합산한 후회(regret)를 최적화 대상으로 삼는다.