모델 857건 · 국산 138 · 가격 690 추적 중
AI 안전·정렬·평가

부동산 플랫폼, AI 평가 데이터의 편향 발견해 모델 교체

AWS ML Blog·2026-10-27영문 원문

요약

부동산 플랫폼 Property Finder는 비전 AI 모델을 더 저렴한 대안으로 교체하려다, 기존 평가 데이터셋 라벨의 96.8퍼센트가 기존 모델의 예측을 그대로 정답으로 쓴 것이었다는 사실을 발견했다. 이 때문에 어떤 대안 모델을 비교해도 기존 모델보다 항상 못한 것으로 평가되는 순환 오류가 있었다. 팀은 전문가의 독립적인 수작업 라벨링으로 새 정답 데이터를 구축하고, 다중 레이블 분류와 Micro F1 지표를 도입했다. 이후 Amazon Bedrock에서 반복적인 프롬프트 최적화를 거쳐 모델을 재선정한 결과, 더 높은 정확도와 더 낮은 비용을 동시에 달성했다.

큐레이터 노트

원문에 없는 맥락입니다

모델 비교의 정답 데이터 자체가 교체 대상 모델의 출력으로 만들어져 있었다는 점이 핵심으로, 평가 체계를 점검하지 않으면 실제로 더 나은 대안이 있어도 열등하다고 잘못 판단할 수 있음을 보여준다.

다른 매체는 이렇게 썼다

같은 사안을 다룬 다른 곳의 보도입니다

NVIDIA, 전 세계 도시에 물리·에이전틱 AI 확산
NVIDIA Blog · 2026-11-03

NVIDIA가 GTC 베를린 발표를 바탕으로 전 세계 도시에 물리적 AI와 에이전틱 AI를 확대하고 있다. 스페인에서는 1MillionBot이 ALIA 모델과 Nemotron을 결합해 마드리드 등 150여 곳에 민원·예약 서비스를 제공하고, 샌프란시스코 베이 지역의 LiveX는 Cosm…

허깅페이스 오픈소스팀, 비드래프트 비전 AI 데모 제작
AI타임스 · 2026-10-30

비드래프트는 자사 비전 판단 AI 모델 'Darwin-35B-ZTC-Vision'의 체험용 데모를 허깅페이스 본사 오픈소스팀이 직접 제작해 기증했다고 30일 밝혔다. 허깅페이스 오픈소스팀 소속 아폴리나리오는 10월 27일 해당 모델 공개 페이지에 글을 올려 공개를 축하하고, 무료 GPU…

레졸루션, AI로 PCB 외관 불량검사 자동화
IT조선 · 2026-10-28

서울 AI 허브에 입주한 스타트업 레졸루션이 인쇄회로기판(PCBA)의 외관 불량검사를 자동화하는 비전 AI 기반 검사 장비를 개발하고 있다. 정상 PCBA의 부품 특징과 구조적 관계를 AI가 학습해, 기판 종류가 바뀌어도 복잡한 티칭 과정 없이 검사를 시작할 수 있도록 하는 것이 핵심이…

이 사안의 흐름

같은 주제를 다룬 이 사이트의 기록 — 최신순

이 글에 나온 말

용어집 전체 →
프롬프트
AI 모델에게 원하는 작업을 지시하기 위해 입력하는 텍스트를 말한다.
평가
AI 모델이나 시스템의 출력이 원하는 기준에 얼마나 부합하는지를 정량적·정성적으로 측정하는 절차를 말한다.

이 분야 브리핑

여러 매체가 함께 다룬 사안을 한 번에

이 페이지는 원문을 요약·재서술하고 이 사이트가 쌓은 기록을 덧붙인 큐레이션입니다. 원문 본문은 싣지 않으며, 수치와 표기는 원문 기준을 유지했습니다.

AWS ML Blog 원문 전체 보기 →

같은 분야의 다른 소식

전체 뉴스 →