Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXivAI 번역논문
BreastGPT: 유방암 임상 루틴의 전 과정을 위한 멀티모달 거대 언어 모델 (Multimodal Large Language Model)
유방암 임상 워크플로우 전 과정을 지원하는 멀티모달 거대 언어 모델인 BreastGPT를 제안합니다. 5가지 영상 양식과 136개 작업 템플릿을 포함하는 BreastStage 코퍼스와 벤치마크를 통해 임상 추론 능력을 입증했습니다.
6월 4일0
arXivAI 번역논문
양방향 경사 최적화를 통한 대규모 언어 모델(LLM)의 데이터 기여도 산정
양방향 경사 최적화를 활용하여 LLM의 출력에 대한 학습 데이터의 기여도를 산정하는 새로운 방법론을 제안합니다. 경사 상승법과 하강법을 통해 모델을 섭동시켜 데이터의 사실적 및 스타일적 기여도를 측정하며, 기존 방식보다 뛰어난 해석 가능성을 제공합니다.
6월 4일0
arXivAI 번역논문
크라우드소싱은 LLM 시대에 살아남을 수 있을까? 인간 데이터 수집에 관한 커뮤니티 조사
LLM의 확산으로 인해 크라우드소싱 데이터의 유효성이 위협받는 상황을 연구자 155명을 대상으로 조사했습니다. 응답자의 44%가 데이터 수집 과정에서 LLM 사용을 목격했으며, 현재의 탐지 전략과 대응책이 여전히 불충분함을 시사합니다.
6월 4일0
arXivAI 번역논문
SemBlock: Diffusion LLM을 위한 의미적 경계 기반 동적 블록
Diffusion LLM의 효율성을 높이기 위해 의미적 경계를 기반으로 동적 블록을 생성하는 SemBlock 프레임워크를 제안합니다. 고정된 블록 대신 의미적 경계를 예측하여 디코딩 성능을 최적화하며, 다양한 벤치마크에서 기존 방식보다 우수한 성능을 입증했습니다.
6월 4일0
arXivAI 번역논문
LLM의 위험 결정에서 결과 수준의 유사성과 메커니즘 수준의 정렬 탐구: St. Petersburg Game을 통한 증거
LLM이 위험 결정 과업에서 인간과 유사한 결과를 내더라도, 실제 의사결정 메커니즘은 인간과 다를 수 있음을 St. Petersburg game 실험을 통해 증명했습니다. 연구 결과, 표면적인 행동 정렬이 내부적인 메커니즘 정렬을 보장하지 않으므로 고위험 평가 시 메커니즘 수준의 검토가 필요함을 강조합니다.
6월 4일0
arXivAI 번역논문
SAID: 스캐폴드 인식 반복 디코딩 (Scaffold-Aware Iterative Decoding)을 통한 확산 기반 언어 모델
확산 기반 언어 모델(DLLM)의 높은 추론 비용 문제를 해결하기 위해 스캐폴드 인식 반복 디코딩(SAID) 프레임워크를 제안합니다. 스캐폴드 토큰에 계산량을 우선 할당하여 구조를 잡은 뒤 세부 토큰을 완성함으로써, 성능 저하 없이 추론 속도를 최대 9.1배 가속화합니다.
6월 4일0
arXivAI 번역논문
GARL: 다중 에이전트 전략적 우선순위 결정을 위한 게임 이론 기반 강화학습
GARL은 다중 에이전트 시스템의 전략적 의사결정을 위해 게임 이론을 결합한 강화학습 프레임워크입니다. 에이전트 간의 자원 할당과 중재 과정을 2단계 게임으로 공식화하여 정책 최적화를 유도합니다. 법률 도메인 실험을 통해 소규모 오픈 소스 LLM이 폐쇄형 모델과 경쟁할 수 있음을 입증했습니다.
6월 4일0
arXivAI 번역논문
Depth-Attention: 언어 모델을 위한 계층 간 가치 혼합 (Cross-Layer Value Mixing)
Transformer의 계층 간 정보 재사용 문제를 해결하기 위해 Attention 모듈 내부에서 이전 계층의 값을 혼합하는 Depth-Attention 기법을 제안합니다. 추가적인 파라미터나 추론 캐시 비용 없이도 모델의 정확도를 높이고 Perplexity를 낮추는 효과를 입증했습니다.
6월 4일0
arXivAI 번역논문
TaDA: 태스크-도메인 LoRA 병합을 위한 보정된 프로브 게이팅 (Calibrated Probe Gating)
TaDA는 태스크와 도메인 LoRA 어댑터를 효율적으로 결합하는 새로운 훈련 불필요 알고리즘입니다. 레이어 깊이에 따른 비대칭성을 활용한 게이팅과 서브스페이스 인식 병합을 통해 추론 오버헤드 없이 높은 성능을 구현합니다.
6월 4일0
arXivAI 번역논문
파운데이션 모델 (Foundation Model) 연구의 타당성 위협
파운데이션 모델 연구 시 비용 절감을 위해 사용하는 프록시 실험, 스케일링 법칙, 관찰 연구 등의 전략이 초래하는 타당성 위협을 분석합니다. 인과 추론 프레임워크를 통해 각 연구 전략이 가진 통계적, 내부, 외부, 구성 타당성의 한계를 규명합니다.
6월 4일0
arXivAI 번역논문
강건한 추론 체인 수리를 위한 대규모 언어 모델의 양방향 논리 주입
LLM의 단방향 CoT 추론에서 발생하는 오류 누적 문제를 해결하기 위해 양방향 논리 주입 프레임워크인 TRI를 제안합니다. 중간 채우기(FIM) 방식을 활용하여 오류 구간을 논리적으로 재구성함으로써 추론의 강건성을 높입니다.
6월 4일0
arXivAI 번역논문
인컨텍스트 그래피컬 추론 (In-Context Graphical Inference)
이산 그래피컬 모델의 추론 성능과 확장성 문제를 해결하기 위해 자기회귀 Graph Transformer인 ICG-I를 제안합니다. Tensor-Train 압축과 가중 콘포멀 예측(WCP)을 결합하여 정확도와 수렴성을 동시에 확보했습니다.
6월 4일0
arXivAI 번역논문
랭킹을 통한 자기 일관성 (Self-Consistency) 향상
LLM의 자기 일관성(Self-Consistency) 성능을 높이기 위해 답변 선택을 랭킹 문제로 재정의한 RISC 방법론을 제안합니다. LambdaRank 모델을 활용해 답변 빈도와 의미적 중심성 등 5가지 특징을 결합하여 최적의 답변을 도출합니다.
6월 4일0
arXivAI 번역논문
빠르고 충실한 함수 벡터 (Fast & Faithful Function Vectors)
본 연구는 인컨텍스트 학습 과정에서 유도되는 함수 벡터(Function Vectors)의 설계 요소를 분석합니다. 어텐션 헤드 선택과 스티어링 방식이 LLM 제어 성능에 미치는 영향을 연구하며, 효율적인 그래디언트 기반 기여도 산출법을 제안합니다.
6월 4일0
arXivAI 번역논문
표준화 환자 사례를 통한 역동적 임상 의사결정에서의 대규모 언어 모델(LLM) 평가
임상 에이전트의 역동적인 의사결정 능력을 평가하기 위해 표준화 환자(SP) 개념을 도입한 MedSP1000 벤치마크를 제안합니다. 연구 결과, 기존 정적 벤치마크 성능이 실제 임상 시나리오로 전이되지 않으며 현재 LLM의 의료 현장 적용에는 한계가 있음을 확인했습니다.
6월 4일0
arXivAI 번역논문
경가동사(Light Verb)인가 완전동사(Full Verb)인가? 언어 모델의 관용적 역량을 조사하기 위한 최소 쌍(Minimal-Pair)
언어 모델이 경가동사와 완전동사의 용법 차이를 구분할 수 있는지 조사하기 위한 최소 쌍(Minimal-Pair) 데이터셋을 제안합니다. 실험을 통해 모델이 목적어 유형에 따라 두 용법을 구별하는 패턴을 보임을 입증했습니다.
6월 4일0
arXivAI 번역논문
자기 평가(Self-Evaluation)는 이미 존재한다: 최소한의 데이터로 Base LLM에서 잠재적 판사 보정(Latent Judge
Base LLM이 별도의 학습 없이도 외부 판사의 평가 점수를 예측할 수 있는 잠재적 능력이 있음을 발견했습니다. 연구팀은 이를 끌어내기 위한 '자기 평가 유도(SEE)' 기법을 제안하여, 최소한의 데이터로도 모델의 평가 예측 성능을 크게 향상시켰습니다.
6월 4일0
arXivAI 번역논문
인컨텍스트 러닝 (In-Context Learning)을 위한 활성화 기반 능동 학습 (Active Learning): 과제와 통찰
본 논문은 트랜스포머의 MLP 활성화 값을 활용하여 인컨텍스트 러닝을 위한 샘플을 선택하는 능동 학습 방법론을 분석합니다. Llama-3.2-3B 및 Qwen2.5-3B 모델 실험 결과, 활성화 기반 샘플링이 예시 품질이나 성능과 상관관계가 낮음을 발견했습니다.
6월 4일0
arXivAI 번역논문
텍스트 따르기를 넘어서: 오디오-언어 모델(ALM)에서의 복구 가능한 중재 역전 현상
오디오-언어 모델(ALM)이 명확한 오디오 증거가 있음에도 충돌하는 텍스트를 따르는 '중재 역전 현상'을 분석했습니다. 연구 결과, 오디오 정보가 인코딩은 되지만 중재 과정에서 손실됨을 확인하였으며, 이를 해결하기 위한 새로운 디코딩 규칙인 GACL을 제안합니다.
6월 4일0
arXivAI 번역논문
STRIDE: 서브셋 섭동(Subset Perturbations)으로부터의 희소 복구(Sparse Recovery)를 통한 학습 데이터
LLM의 학습 데이터 귀속(TDA) 문제를 해결하기 위해 활성화 공간에서 데이터의 효과를 모델링하는 STRIDE 프레임워크를 제안합니다. 기존의 그래디언트 기반 방식보다 10배 빠르며, 압축 센싱을 활용해 개별 데이터의 영향력을 효율적으로 복구합니다.
6월 4일0