MIDAS arXiv 프리프린트 허브 'MapHub'는 대규모언어모델이 연구 공동체 참가자별 포트폴리오를 기준으로 매일 올라오는 arXiv 신규 논문을 읽고 0~100점의 관련도 점수를 매겨, 어떤 논문이 누구의 연구와 맞닿는지 히트맵으로 공개하는 시스템이다. 저자들의 블라인드 평가에서 MapHub 점수 상위 10% 논문이 평가자 본인이 꼽은 상위 5% 논문의 약 70%를 포함했고, 텍스트 매칭 방식 기준선은 약 3분의 1 수준이었다. 하루치 astro-ph 논문 중 약 6%가 참가자별 30점 이상을 받고, 60점 이상은 사흘에 한 편 꼴로 나타난다. MapHub는 일반 클로드(Claude) 구독으로 구동되며 어떤 분야에도 적용할 수 있도록 설계됐고, 코드는 깃허브에 공개됐다.
arXiv astro-ph.IM (관측기기)
arXiv 프리프린트 서버는 초기 원고 유통을 디지털화하고 학술지 구독 장벽을 없애 천문학 연구를 민주화했지만, 1990년대의 낮은 출판량을 전제로 설계된 체계가 현대의 연구 생산량을 감당하지 못하고 있다는 지적이 나왔다. 저자는 'submitted', 'under review', 'comments welcome' 등으로 표시된 미검증 원고가 대량으로 쏟아지면서 연구자들이 같은 연구의 여러 버전을 추적해야 하는 중복 부담을 지게 되고, 블라인드 피어리뷰 과정을 우회해 성급한 선점권이 형성되며, 초기 경력 연구자에게 특히 부담이 크다고 주장한다. 또한 검증되지 않은 결과를 빠르게 공개해야 하는 압박이 독립 연구를 위축시키고 젊은 과학자를 대규모 주류 협력 연구로 몰아간다고 본다. 저자는 10년간의 astro-ph 메타데이터를 분석해 이 추세를 정량화했으며, 제출물을 학술지 게재 승인 또는 최종 DOI가 첨부된 피어리뷰 연구(Level-1)와 논의용 초고(Level-2)로 이원화하자고 제안했다.
arXiv astro-ph.IM (관측기기)
천문학 논문의 핵심 내용은 그림에 담기지만 기존 문헌 검색은 본문 텍스트만 색인해, 원하는 플롯을 설명으로 찾을 수 없다는 문제의식에서 출발한 연구다. 연구진은 동료심사를 거친 astro-ph 논문 53,839편의 캡션 482,750건을 대상으로 그림 단위 검색 도구 FOTO를 선보였으며, 각 그림을 제목과 캡션으로 한 번 색인하고 로컬에서 구동되는 1억 1,000만 파라미터 규모의 공개 모델로 임베딩한 뒤, 대규모 언어모델은 검색된 후보 목록 검증에만 적용해 존재하지 않는 그림을 지어내지 않도록 했다. 더 까다로운 그림 단위 기준에서 FOTO는 recall 20 기준 질의의 29~79%에서 목표를 찾아냈고, 이는 더 쉬운 논문 단위 기준으로 측정한 Pathfinder(6~20%), Semantic Scholar(8~16%)를 웃도는 수치다. 후보 목록 재순위화를 적용하자 recall 1은 상세 질의에서 0.667에서 0.875로, 모호한 질의에서 0.071에서 0.571로 올랐다.
arXiv astro-ph.IM (관측기기)