Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXivAI 번역논문
System One 임상 지능을 향하여: 결정 기반 파인튜닝 및 반사실적 설명 가능성 (Counterfactual Explainability)
본 논문은 환자 증상을 이용한 질병 분류를 위해 결정 기반 파운데이션 모델 Clef-Flash를 제안합니다. 이 모델은 Qwen3.5 백본을 기반으로 하며, 4비트 양자화와 차분 학습률을 적용하여 높은 진단 정확도(95.42%)를 달성했습니다. 특히 생성형 LLM 대비 월등히 빠른 추론 속도와 증상 제거를 통한 반사실적 설명 가능성을 입증하며 임상 분류에의 활용 가능성을 제시합니다.
10월 14일1
arXivAI 번역논문
AI 인용을 유도하는 요인은 무엇인가? 생성 엔진 최적화(GEO)에서의 콘텐츠, 검색 및 모델 지식 분석
본 연구는 생성형 검색 엔진(ChatGPT, Gemini 등)이 웹페이지를 인용하는 요인을 분석했습니다. 그 결과, 콘텐츠의 일치성 외에도 페이지 속성이나 FAQ 블록 같은 요소보다 '엔진의 쿼리'와 의미적으로 일치하는 것이 중요하며, 모델 자체의 지식과 브랜드 언급도 중요한 역할을 한다는 것을 밝혀냈습니다.
10월 14일1
arXivAI 번역논문
UltraBERT: BERT 사전 학습의 한계를 넘어서
본 연구는 기존 인코더들이 분류와 검색 작업 모두에서 최적화되지 못한 한계를 극복하고자 합니다. UltraBERT를 제시한 이 모델은 낮은/높은 마스킹 비율에 각각 별도의 LM 헤드를 할당하고 증류 목적 함수를 제한하여, 두 가지 작업 모두에서 최고 성능을 달성했습니다.
10월 14일0
arXivAI 번역논문
선택 또는 재작성: N-Best 가설로부터 생성형 ASR 후편집을 위한 오라클 안내 미세 조정
본 논문은 N-best 가설 기반의 생성형 ASR 후편집 성능 개선 방안을 제시합니다. 기존 프롬프트 방식의 취약점을 극복하기 위해, 선택(corrections), 정규화(regularizers), 어려운 음성 부정 사례(hard negatives) 세 가지 풀을 활용한 오라클 안내 미세 조정 기법을 제안했습니다.
10월 14일0
arXivAI 번역논문
설득력 탐지를 위한 신경-기호 논증 추론 접근법: Have You Been Convinced?
본 논문은 온라인 토론에서 설득력 탐지를 위해 신경-기호 논증 추론 시스템(NARS)을 제안합니다. NARS는 LLM의 검색 증강 반복 추론과 점진적 논증 의미론을 결합하여 양극성 논증 구조를 추출하고 논증적 영향력을 전파합니다. 이 접근법은 기존 모델 대비 우수한 성능을 보이며, 거시적 수준의 설득 분석 가능성을 입증했습니다.
10월 14일0
arXivAI 번역논문
RegExtract: LLM을 활용한 PFAS 규제 정보 추출 벤치마크
본 논문은 PFAS 규제 문서에서 구조화된 정보를 추출하기 위한 벤치마크인 RegExtract를 소개합니다. 이 벤치마크는 20개 미국 주와 46개 규정을 아우르는 방대한 데이터를 포함하며, 물질 정의나 허용 용도 같은 핵심 요소를 목표로 합니다. 연구 결과, Few-shot 예시가 추출 성능을 높이며, 이는 유해 물질 식별 및 규정 준수 모니터링 AI 도구의 기반이 될 것입니다.
10월 14일1
arXivAI 번역논문
전문가 선택 편향을 통한 데이터 불균형 극복
본 연구는 Mixture-of-Experts (MoE) 모델의 데이터 불균형 문제를 해결하기 위한 방법을 제시합니다. 입력 카테고리 기반의 전문가 선택 편향을 적용하여, 소수 카테고리에 적절한 전문가 용량을 할당하고 성능을 향상시킬 수 있습니다. 이는 표준 MoE 추론을 유지하면서 저자원 카테고리를 효과적으로 지원하는 경량 제어 장치 역할을 합니다.
10월 12일1
arXivAI 번역논문
임상 예후를 위한 이종 증거 통합 기반 검색 증강 멀티모달 언어 모델
본 논문은 임상 예후 예측을 위해 구조화된 측정치, 생리적 파형, 종단적 병력 등 이종 증거를 통합하는 멀티모달 언어 모델 PRISM을 제안합니다. PRISM은 검색(Retrieval) 메커니즘과 인구 메모리 뱅크를 결합하여 높은 AUROC 성능을 달성했습니다. 특히, 전 도착 창(pre-arrival window)만으로도 기존 최고 모델들과 경쟁할 만한 우수한 예측력을 보여주었습니다.
10월 12일1
arXivAI 번역논문
Oído: 신경 가속기 없는 $5 마이크로컨트롤러에서의 개방형 어휘 음성 인식
Oído는 신경 가속기 없이 저가형 마이크로컨트롤러(ESP32-S3)에서 개방형 어휘 영어 음성 인식을 구현한 추론 엔진입니다. Conformer-CTC 모델을 int8 양자화 및 온칩 SIMD 명령어를 사용하여 실행하며, LibriSpeech 테스트에서 낮은 단어 오류율(WER)을 달성했습니다. 이는 동일 칩의 상용 인식기나 Whisper tiny보다 우수한 성능을 보여줍니다.
10월 12일0
arXivAI 번역논문
MoPrO-SD: 스탠스 탐지를 위한 모듈형 프롬프트 최적화
본 논문은 스탠스(stance) 탐지라는 어려운 과제를 해결하기 위해 모듈형 프롬프트 최적화 프레임워크인 MoPrO-SD를 제안합니다. 이 프레임워크는 프롬프트를 기능적 의미론 모듈로 분해하고 LLM 기반 피드백을 통해 순차적으로 정제하는 것이 특징입니다. 실험 결과, MoPrO-SD가 기존 Base 프롬프트 대비 여러 환경에서 성능 향상을 입증했습니다.
10월 12일1
arXivAI 번역논문
구조에서 유효성으로: 메커니즘 기반의 LLM 루브릭 생성 및 개선
본 논문은 LLM 평가의 핵심 도구인 루브릭(Rubric) 생성 및 개선에 대한 메커니즘적 분석을 제시합니다. 기존 연구가 단순히 좋은 루브릭 생성에만 초점을 맞춘 것과 달리, 기준 구성 조직화, 운영화, 점수 집계 전반을 체계적으로 분석했습니다. 이를 바탕으로 적응형 루브릭 트리 탐색과 하이브리드 개선(ARTS-Hybrid)이라는 새로운 방법을 제안하며, 이 방법이 평가 성능과 루브릭 품질 모두를 향상시킴을 입증했습니다.
10월 12일0
arXivAI 번역논문
희소 혼합 전문가 모델의 Top-k 노출 경계 평활화
본 논문은 희소 혼합 전문가(Sparse Mixture-of-Experts) 모델의 한계로 지적된, top-$k$ 전문가 선택의 경직성을 개선하는 '탄성 전문가 라우팅(Elastic Expert Routing)'을 제안합니다. 이 방법은 활성 전문가 예산을 확률적으로 샘플링하여 날카로운 임계값을 점진적인 분포로 부드럽게 만듭니다. 실험 결과, 지도 미세 조정 및 사전 훈련 모두에서 기존 모델 대비 높은 성능 향상을 입증했습니다.
10월 9일1
arXivAI 번역논문
영어 품질 분류기를 다국어 대규모 언어 모델(LLM) 사전 학습 데이터 선택에 적용하는 방법
본 연구는 기존 영어 품질 분류기를 다국어 변형으로 확장하여 100개 이상의 언어로 LLM 사전 학습 데이터의 품질 필터링을 수행하는 방법을 제안합니다. 트랜스포머 인코더 임베딩과 MLP를 사용하여 다국어 텍스트에 적용하고, 그 성능이 기존 기준선 대비 우수함을 입증했습니다.
10월 9일1
arXivAI 번역논문
UXBench Pro: 다중 턴 대화 상호작용에서 개인화된 사용자 경험 평가
본 논문은 다중 턴 대화 상호작용에서 사용자 경험(UX) 평가의 한계를 극복하기 위해 UXBench Pro를 제안합니다. 이는 실제 사용자 데이터를 기반으로 하며, 개인화된 사용자 보상 모델(URM)과 사용자 시뮬레이터 Sim4Eval을 결합한 이중 관점 패러다임을 도입했습니다. 이를 통해 사용자의 개별적인 기대치와 복잡한 상호작용 맥락에서의 평가가 가능해졌습니다.
10월 9일1
arXivAI 번역논문
대규모 언어 모델에서 프롬프트된 거짓 응답 시 추론 토큰 스파이크 모니터링
본 연구는 LLM의 사고 과정 모니터링이 어려워지자, 추론 토큰 개수라는 낮은 대역폭 신호를 활용하여 모델의 거짓 응답을 탐지하는 방법을 제안합니다. 세 가지 능력을 가진 모델에 대해 진실/거짓 응답 시 추론 토큰 사용량을 비교한 결과, 명시적으로 프롬프트된 비진실 응답이 더 많은 토큰을 유발함을 확인했습니다.
10월 8일1
arXivAI 번역논문
직접 기대 디코딩 라운드를 최소화하여 병렬 추측 초안 모델 훈련하기
본 연구는 LLM 추론 속도 가속화 기술인 추측 디코딩(Speculative decoding)의 초안기 훈련 문제를 다룹니다. 기존 방법들이 전역 효율성을 최적화하지 못하는 한계를 지니자, 본 논문은 이를 마르코프 보상 과정으로 공식화하여 기대 디코딩 라운드(EDR) 목표를 도출했습니다. 이 EDR 프레임워크는 편향되지 않은 확률적 최적화와 정확한 오프라인 평가기를 제공하며, 실제 벤치마크에서 기존 방법보다 우수한 성능을 입증했습니다.
10월 8일1
arXivAI 번역논문
CoTrace: Harness-Model 공동 진화를 통한 터미널 에이전트 학습 데이터 레시피
본 논문은 터미널 에이전트 학습 데이터의 효율성을 높이기 위해 'CoTrace'라는 새로운 프레임워크를 제안합니다. CoTrace는 하네스 검색과 정책 학습을 분리하는 교대 공동 진화 방식을 도입하여, 궤적의 출처와 가치를 명시적으로 관리합니다. 이를 통해 적은 컴퓨팅 자원으로도 모델 성능 향상을 달성하고, 다양한 환경에서의 전이 성능을 개선할 수 있음을 입증했습니다.
10월 8일1
arXivAI 번역논문
어떤 롤아웃이 그것을 가르쳤는가? BehaviorTrace와 온라인 RL에서 학습 데이터 귀속의 한계
본 논문은 강화학습(RL)이 언어 모델에게 가르친 행동의 훈련 출처를 추적하는 문제에 대해 연구합니다. 'BehaviorTrace'라는 오픈 평가 하네스를 공개하고, 그래디언트 스케칭과 유창성 같은 다양한 방법론을 사용하여 온라인 RL 파인튜닝 과정에서 데이터 귀속의 한계를 탐구했습니다.
10월 8일1
arXivAI 번역논문
PHRBench: 대규모 언어 모델(LLM)의 환각 후 추론에 대한 행동적 평가
본 연구는 LLM의 환각된 정보가 이후 추론 과정에 미치는 영향을 분석하기 위해 PHRBench라는 통제된 벤치마크를 제안합니다. 이 벤치마크는 환각 준수도, 회피, 휴리스틱 수정 등 행동적 관점에서 추론 과정을 특징지어 LLM의 오류 해결 능력을 평가합니다.
10월 8일1
arXivAI 번역논문
행동하기 전에 재구성하기: 비전-언어-행동 모델의 언어 민감도 특성화 및 완화
본 연구는 비전-언어-행동 모델(VLAs)이 지침 구문에 극도로 민감하다는 문제를 다룹니다. 단어 수정만으로 성공률이 크게 변하는 현상을 특성화하고, 이를 완화하기 위해 재구성 규칙을 추출하여 모든 입력 지침을 다시 작성하는 방법을 제안합니다. 이 방법은 추가 훈련 없이도 성능 향상과 일반화 능력을 높입니다.
10월 8일1