Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
GitHubAI 번역요약
LLM 컨텍스트 벤치마크 (llm_context_benchmarks)
본 문서는 다양한 추론 엔진(Ollama, MLX 등)을 사용하여 0.5k부터 128k 토큰까지의 컨텍스트 크기별 LLM 처리량 및 생성 속도를 측정하는 벤치마크 도구에 대한 설명입니다. 이 웹 UI는 실시간 실행 모니터링, 여러 세트 간 비교 분석, 그리고 분산 환경에서 결과를 집계할 수 있는 기능을 제공합니다.
1일 전0
GitHubAI 번역요약
ERR-EVAL 벤치마크
ERR-EVAL은 AI 모델의 인식론적 신뢰성을 측정하는 벤치마크입니다. 이 벤치마크는 입력 데이터가 불완전하거나 모호할 때, 모델이 환각을 피하고 불확실성을 정확히 국소화하며 보정된 신뢰도를 유지하는 능력을 평가합니다. 또한, 에이전트의 메모리 시스템으로 Membrane 프로젝트를 소개하며 AI 개발 방향에 대한 통찰을 제공합니다.
1일 전0
GitHubAI 번역요약
Unitxt: 엔터프라이즈급 AI 성능 평가를 위한 Python 라이브러리
Unitxt는 엔터프라이즈급 AI 성능 평가를 위한 통합 Python 라이브러리입니다. 이 프레임워크는 텍스트, 테이블, 비전, 음성, 코드를 아우르는 광범위한 벤치마크 카탈로그와 모델 불가지론적 설계를 제공합니다. 사용자는 이를 통해 다양한 모델로 자체 데이터셋을 재현 가능하게 평가할 수 있습니다.
9월 20일1
GitHubAI 번역요약
SemiAnalysisAI/InferenceX
InferenceX는 주요 AI 모델과 오픈 소스 추론 프레임워크의 성능을 실시간으로 분석하고 벤치마킹하는 연구 플랫폼입니다. NVIDIA Blackwell, AMD, Hopper 등 하드웨어와 최신 LLM의 추론 성능 지표를 대시보드를 통해 무료로 제공합니다.
6월 29일2
GitHubAI 번역요약
SGI-Bench: 과학적 탐구 주기 전반에 걸친 과학적 일반 지능 (SGI) 평가를 위한 과학자 정렬 벤치마크
과학적 탐구 주기 전반을 평가하기 위한 과학자 정렬 벤치마크인 SGI-Bench를 소개합니다. 심사숙고, 구상, 실행, 인지의 4단계 주기를 통해 AI의 과학적 일반 지능(SGI)을 다각도로 측정합니다.
6월 26일3
GitHubAI 번역요약
quanta-quest/quanta-quest
quanta-quest/quanta-quest는 개인화된 데이터를 위한 AI 기반 유니버설 검색 시스템입니다. 이 프로젝트는 '에지 측 LLM(edge-side LLMs)'과 '소비자 데이터 로컬라이제이션(consumer data localization)'을 핵심 개발 방향으로 삼아 설계되었습니다. 궁극적으로 사용자의 모든 개인 데이터를 활용하여 맞춤화된 검색 경험을 제공하는 것을 목표로 합니다.
5월 16일4
GitHubAI 번역요약
coreydaley/obsidian-ai-agent-sidebar-plugin
이 플러그인은 Obsidian 내에 AI 에이전트 사이드바를 추가하여, 사용자가 Claude Code, OpenAI Codex, Google Gemini 등 다양한 LLM과 채팅하고 상호작용할 수 있게 합니다. 이 에이전트는 사용자의 Vault 파일 시스템(읽기, 생성, 편집, 삭제)에 접근할 수 있으며, CLI 도구 또는 API 키를 통해 연결 및 사용됩니다. 플러그인은 여러 AI 제공업체를 지원하며, 전용 API 키 설정을 통해 각 서비스별로 Obsidian에서의 사용량을 독립적으로 추적할 수 있는 기능을 제공합니다.
5월 15일4
GitHubAI 번역요약
nobrainer-tech/langflow-mcp — Langflow 워크플로 자동화 MCP 서버
이 기술 기사는 nobrainer-tech/langflow-mcp라는 프로젝트를 소개하며, 이는 Langflow용 MCP(Master Control Program) 서버 역할을 합니다. 이 서버는 AI 어시스턴트가 Langflow 워크플로에 대한 전체 접근 권한을 가질 수 있도록 자동화 기능을 제공합니다. 이를 통해 93개 이상의 도구를 통합하여 복잡한 AI 애플리케이션의 구축 및 관리를 용이하게 합니다.
5월 6일11
GitHubAI 번역요약
havingautism/Qurio
Qurio는 여러 AI 모델 공급자(멀티 프로바이더)를 하나의 워크스페이스에 통합한 플랫폼입니다. 이 시스템은 커스텀 에이전트, 재사용 가능한 스킬, MCP 서버, 다양한 도구(HTTP, 검색), 장기 메모리 및 딥 리서치 기능을 제공하여 복잡하고 심층적인 AI 작업을 수행할 수 있도록 설계되었습니다.
5월 6일13
GitHubAI 번역요약
pab1it0/awesome-a2a
본 자료는 Agent2Agent (A2A) 아키텍처와 관련된 다양한 리소스들을 모아놓은 'awesome' 컬렉션입니다. A2A 시스템을 구축하는 데 필요한 에이전트, 도구(tools), 서버, 클라이언트 등 관련 구성 요소들을 한 곳에서 탐색하고 참고할 수 있도록 정리되어 있습니다.
5월 6일11
GitHubAI 번역요약
NotebookLM MCP: 브라우저 탭을 넘어, 로컬 터미널과 AI 어시스턴트에서 분석력을 발휘하세요
NotebookLM MCP는 Google NotebookLM의 강력한 분석 기능을 로컬 터미널, IDE, 그리고 Claude나 Cursor 같은 AI 어시스턴트 환경으로 확장하는 표준화된 인터페이스(MCP)를 제공합니다. 이 도구를 사용하면 단일 지점에서 노트 관리, 다양한 소스 인제스트, 심층 연구 수행, 그리고 발표 자료 및 오디오 콘텐츠 생성 등 NotebookLM의 모든 기능을 자동화하고 통합적으로 활용할 수 있습니다. 특히, 간편한 인증 과정과 안정적인 연결성 덕분에 개발자들은 복잡한 설정 없이도 AI 기반 분석 워크플로우를 구축하여 생산성을 극대화할 수 있습니다.
5월 5일11