Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
본 페이지의 콘텐츠는 AI가 공개된 소스를 기반으로 자동 수집·요약·번역한 것입니다. 원 저작권은 각 원저작자에게 있으며, 각 게시물의 “원문 바로가기” 링크를 통해 원문을 확인할 수 있습니다. 저작권자의 삭제 요청이 있을 경우 신속히 조치합니다.
Lokutor 팀은 ESP32-S3 같은 저전력 칩에서 작동하는 자연스러운 영어 음성 스트리밍 TTS 엔진인 ItoTTS를 공개했습니다. 이 모델은 가중치 크기가 4.89MB에 불과하며, 기존 대비 우수한 성능을 보여 로컬 LLM에 저비용으로 목소리를 부여하는 것을 목표로 합니다.
상업적 모델들이 에이전트 루프를 독점하려는 경향 속에서, 로컬 LLM을 활용한 직접적인 에이전트 구현의 중요성이 강조됩니다. 이는 사용자와 모델 사이에 배치되는 '에이전트 레이어'를 자체적으로 소유할 수 있게 해주기 때문입니다.
본문은 OpenAI DevDay 이후의 AI 트렌드를 분석하며, 클라우드 기반 서비스(Codex Cloud/Dots)와 하드웨어 통합을 통해 사용자가 기기 소유권에서 벗어나 구독 모델에 의존하게 될 것이라고 예측합니다. 이는 거대 기술 기업들이 사용자 데이터를 24시간 수집하고 통제하는 구조를 만들 것입니다.
Hugging Face의 포스트 트레이닝 팀이 다양한 코딩 하네스에서 오픈 모델을 훈련하는 방법을 다룬 가이드입니다. TRL 및 Harbor 같은 라이브러리를 활용하여, 사용자가 어떤 커스텀 환경을 갖추더라도 최고의 성능을 끌어낼 수 있는 레시피를 제공합니다.
본 글은 200개의 커스텀 태스크 데이터셋을 사용하여 다양한 크기의 인기 LLM 10종의 성능을 비교한 결과를 공유합니다. Gemma-4-26B가 최고 성능(S 티어)을 보였으며, Qwen3.8-27B와 qwen3.5-9b도 높은 평가를 받았습니다. 또한, 모델 크기 대비 효율성까지 고려하여 테스트에 임했음을 언급했습니다.
Gevva0은 Gemma 26B 모델을 활용하여 JevBench 평가 배터리에서 최고 성능을 기록한 의사결정 엔진입니다. 이 엔진은 직접 로짓 스코어링, 순환 디바이어싱, 플랫 온도 보정 등 여러 기술적 기법을 적용해 높은 정확도와 속도를 동시에 달성했습니다.
본 글은 비즈니스 의사결정 워크플로우 개선에 초점을 맞춘 ImaJev-4b 모델 개발 과정을 다룹니다. 텍스트와 이미지를 모두 처리할 수 있도록 Jev를 파인튜닝했으며, 복잡한 결정 노드를 코드가 아닌 AI가 대체하는 데 성공했습니다. 최종적으로 JevBench에서 높은 점수를 기록하며 기존 모델을 능가했고, 정확성 외에도 보정 및 속도 측면에서 강점을 입증했습니다.
H Company가 개발한 Holo4는 Qwen 아키텍처 기반의 컴퓨터 사용용 비전-언어 모델(VLM)입니다. 이 모델은 hai-agents harness와 결합하여 스크린샷 및 도구 결과를 처리하고, 클릭, 타이핑, 코드 실행 등 복잡한 작업을 수행할 수 있도록 설계되었습니다.
본 글은 LLM 구동을 위한 GPU 업그레이드 경험을 공유합니다. P102-100 네 개를 CMP 50HX 네 개로 교체하면서 비용 효율성을 높였으며, 총 360달러로 로컬 모델 구동 환경을 구축했습니다. 이 카드는 낮은 전력 소비(8W)와 합리적인 가격이 큰 장점입니다.
본 글은 Kev 4B 모델과 Jev 모델을 비교 테스트한 결과를 공유합니다. 새로운 362개 항목의 출처 기반 데이터셋으로 평가했으며, Jev가 패러프레이즈 탐지(PAWS)에서 우위를 보였습니다. 다만, 짧은 요청 시 Jev는 추가 입력 토큰 사용량 때문에 비용이 더 많이 들 수 있다는 점을 지적합니다.
Cognitive Sharding은 거대한 단일 모델 대신 전문화된 여러 소형 모델들로 에이전트를 분할하고, 이를 제어 평면(control plane)으로 조정하는 시스템 아키텍처를 제안합니다. 이 방식은 각 모델을 트랜잭션적으로 로드/언로드하여 16GB 소비자 하드웨어 메모리 한계 내에서 완전한 로컬 컴퓨터 사용 스택 구동을 가능하게 합니다.
커스텀 데이터셋으로 파인튜닝된 실험적인 Qwen 기반 모델 OpenJudgement-4B를 공개했습니다. 이 모델은 답변에 직접 점수를 매기고, Python을 이용해 확률과 함께 JSON 형식의 결과를 생성하는 것이 특징입니다. 아직 미완성 단계이므로 사용자 피드백을 요청하고 있습니다.
작성자는 Qwen FN과 27B 모델을 실제 사용 환경에서 비교하며, 두 모델 모두 놀라운 성능을 보였으나 개인적인 활용 사례에서는 큰 차이를 느끼지 못했다고 언급했습니다. 이는 대형 모델이 일상적 업무 영역의 한계에 도달했음을 시사합니다.
본 글은 에이전트 평가의 비용 및 지연 시간 문제를 해결하기 위한 로컬 실행 평가 도구 'jevals'를 소개합니다. 기존 LLM-as-a-judge 방식은 비싸고 느리지만, jevals는 결정 모델(원샷 분류기)을 활용하여 효율적인 로컬 테스트 환경을 제공합니다.
본 기사는 Qwen3-VL-2B를 기반으로 Jev 스타일 추론을 구현한 Qevi-2B 모델에 대한 내용을 담고 있습니다. 이 모델은 28,000개의 이미지로 파인튜닝되었으며, 특히 하나의 이미지에 대해 여러 질문이 요청되는 이미지 분류 작업에서 뛰어난 성능을 보입니다.
기업 환경에서 사용할 수 있는 로컬 AI 솔루션 구축 방법을 소개합니다. 이 솔루션은 완전히 오픈 소스이며, OpenAI와 호환되는 모델을 llama.cpp를 이용해 플러그인할 수 있습니다. 곧 Appliance 형태로 배포되어 다양한 OS에 쉽게 설치 가능하게 될 예정입니다.
작성자는 개인적인 취미로 60억 개의 토큰을 사용하여 아랍어 데이터에 특화된 0.2B 규모의 AI 모델(Horus Taleeq 0.2B Base)을 처음부터 훈련시켰습니다. 이 과정은 NVIDIA RTX PRO 6000 GPU에서 약 30시간 동안 진행되었으며, 총 비용은 $100.63으로 공개되었습니다.
DeepSeek 4.1 Flash와 Jev라는 '시스템 원(System One)' 모델을 비교한 벤치마크입니다. 이 테스트는 일반적인 LLM 성능 측정 방식이 아닌, 주어진 옵션에 대한 확률만 제공하는 방식으로 진행됩니다. DeepSeek은 정확도 면에서 약간의 열세에도 불구하고, 해당 작업 분야에서 가장 잘 보정된 모델로 평가되었습니다.
작은 로컬 모델들이 확신에 차 있지만 틀리는 경향을 보인다는 문제점을 해결하기 위해, 개발자가 'pi'라는 무료 확장 프로그램을 개발했습니다. 이 에이전트는 모델의 답변 중 사실 확인이 필요한 부분(숫자, 플래그 등)이 있을 때, 두 번째 에이전트를 가동하여 실제 브라우저와 문서를 참조해 출처와 함께 검증된 정보를 제공합니다.
본 글은 LLM 기반 지식 그래프 추출의 높은 비용과 레이턴시 문제를 해결하기 위한 오픈 소스 파이프라인 JevGraph를 소개합니다. Jev는 GPT-5.6 Luna, DeepSeek V4.1 Flash 등 다른 모델들과 비교했을 때, 속도와 비용 측면에서 큰 이점을 보여주었습니다.