GPT-OSS-20B 다국어 추론 파인튜닝, SageMaker HyperPod서 검증
요약
오픈 가중치 추론 모델 GPT-OSS-20B는 프랑스어·독일어 등으로 추론하라고 지시해도 내부적으로는 영어로 사고 과정을 생성하는 문제가 있었다. AWS가 50개 예시로 테스트한 결과 목표 언어로 올바르게 추론한 비율은 22%에 그쳤고, 영어는 100%였지만 프랑스어·스페인어·이탈리아어는 0%, 독일어는 10%에 불과했다. AWS는 Amazon SageMaker HyperPod에서 HuggingFaceH4의 다국어 사고 과정 데이터셋을 활용해 지도 미세조정(SFT)과 강화학습 기법인 GRPO를 결합해 이 문제를 개선하는 방법을 소개했다. 추가로 Qwen2.5-7B 모델로도 통제 실험을 진행해 SFT와 GRPO의 역할 차이를 비교했다.
큐레이터 노트
원문에 없는 맥락입니다
SFT가 모델에 없던 행동을 새로 가르치고 GRPO는 이미 할 수 있는 행동을 다듬는 역할이라는 설명은, 두 기법을 언제 각각 써야 하는지에 대한 실무적 기준을 제시한다.
이 사안의 흐름
같은 주제를 다룬 이 사이트의 기록 — 최신순
- 2026-09-25AWS, SkyRL로 SageMaker HyperPod서 멀티모달 RL 학습 시연AWS ML Blog
- 2026-10-29AWS, NVIDIA Nemotron 멀티모달 모델 EKS 배포 가이드 공개AWS ML Blog
- 2026-10-08AWS, SageMaker HyperPod로 GPU 클러스터 팀간 공유 구조 제시AWS ML Blog
- 2026-10-06AWS, SageMaker HyperPod 거버넌스 모범사례 제시AWS ML Blog
- 2026-10-06AWS, SageMaker Studio서 HyperPod 스페이스 직접 관리 지원AWS ML Blog
- 2026-09-25SageMaker HyperPod-Qumulo, 리전 간 분산 학습 검증AWS ML Blog
이 글에 나온 말
이 분야 브리핑
여러 매체가 함께 다룬 사안을 한 번에
이 페이지는 원문을 요약·재서술하고 이 사이트가 쌓은 기록을 덧붙인 큐레이션입니다. 원문 본문은 싣지 않으며, 수치와 표기는 원문 기준을 유지했습니다.
같은 분야의 다른 소식
- Revolut, 코딩 작업 자체 호스팅 GLM으로 전환GeekNews · 2026-11-03
- 타임아웃을 하드코딩하지 말아야 하는 이유GeekNews · 2026-11-03
- OpenAI, 병렬 푸시용 Git 백엔드 Pando 구축GeekNews · 2026-11-03
- Hacker Times, 뉴욕타임스풍으로 재구성한 해커뉴스GeekNews · 2026-11-03
- 엑셈, 포스트그레SQL 장애 해결 무료 웨비나 11월 5일 개최ZDNet Korea · 2026-11-03
- 유라클, 기업 AI 통합관리 '오르다 게이트웨이' 출시ZDNet Korea · 2026-11-03