FAITH: 고차원 시스템을 위한 실현가능성 인식 안전 필터 강화학습
FAITH: Feasibility-Aware Safety-Filtered RL for High-Dimensional Systems
Songyuan Zhang, Baljeet Singh, Sarthak Ranjeet Kaingade, Chuchu Fan, Bryan Trinh
안전 강화학습(safe RL)에서 안전 조건과 과제 성능을 같은 정책 목표에 넣으면 업데이트가 충돌하는 문제가 발생한다. FAITH는 피드포워드 네트워크로 최소 개입 필터링을 근사하는 모델 프리(model-free) 프레임워크로, 안전 조건 평가와 과제 학습을 행동 실행 단계에서 분리한다. 안전 조건을 만족하는 행동이 존재하지 않을 경우, 예측된 최대 피해를 최소화하는 행동을 대신 선택하도록 설계되었다. 29자유도(DoF) 휴머노이드의 Walking-Avoid 과제에서 99.95%의 안전율과 필터 미적용 대비 97%의 과제 수익을 기록했으며, Push-Avoid 과제에서는 비교 방법 중 가장 높은 안전율을 달성했다. 동일한 정책이 실제 Unitree G1 휴머노이드에서도 시연되었다.













