Show HN: 고성능 GenAI 엔진 오픈 소스 공개
요약
Arthur Engine은 LLM 애플리케이션과 생성형 AI 워크플로우를 개발, 모니터링 및 거버넌싱하는 데 필요한 통합 서비스를 제공합니다. 이 엔진은 PII 유출 감지, 환각 방지 등 가드레일 적용부터 에이전트 기반 앱의 평가 및 RAG 파이프라인 모니터링까지 지원합니다.
핵심 포인트
- LLM/GenAI 워크플로우에 대한 실시간 가드레일(Guardrails) 제공
- OpenTelemetry를 활용한 에이전트 애플리케이션 추적 및 거버넌싱 기능
- RAG 파이프라인의 엔드투엔드 평가 및 모니터링 지원
- 모델 드리프트, 환각률 등 다양한 품질 지표 측정 가능
<i>Make AI work for Everyone.</i>
Website - Documentation - Talk to someone at Arthur
</div>The Arthur Engine
The Arthur Engine은 인기 있는 오픈 소스 기술과 프레임워크를 사용하여 AI/ML 워크로드를 개발, 모니터링 및 거버넌싱하는 데 필요한 완벽한 서비스를 제공합니다. 이 도구는 다음을 위해 설계되었습니다:
-
LLM 애플리케이션 및 생성형 AI(Generative AI) 워크플로우의 가드레일(Guardrails) 적용
- PII 또는 민감 데이터 유출, 환각(Hallucination), 프롬프트 인젝션 시도, 유해 언어 및 기타 품질 지표를 실시간으로 감지하기 위한 구성 가능한 메트릭 제공
-
에이전트 기반 애플리케이션(Agentic Applications) 구축, 평가, 관찰 및 거버넌싱
- 모든 에이전트 워크플로우 또는 LLM 애플리케이션에서 OpenInference OpenTelemetry (OTEL) 트레이스 수집 및 분석
- 라이브 트레이스를 대상으로 지속적인 평가를 실행하여 회귀(regressions) 및 품질 문제를 자동으로 포착
- 애플리케이션 전반에 걸쳐 프롬프트를 관리, 버전 관리 및 반복 개선
- 프롬프트 변형을 비교하고 품질 지표에 미치는 영향을 측정하기 위한 실험 실행
- 검색 증강 생성(Retrieval-Augmented Generation, RAG) 파이프라인의 엔드투엔드 평가 및 모니터링
-
머신러닝 모델 모니터링 및 벤치마킹 (Arthur Platform 필요)
- 광범위한 평가 메트릭 지원 (예: drift, accuracy, precision, recall, F1, AUC)
- 모델 비교, 피처 중요도 탐색, 최적화 영역 식별을 위한 도구 제공
- LLM/GenAI 애플리케이션의 경우, 응답 관련성(response relevance), 환각률, 토큰 수, 지연 시간(latency) 등을 측정하고 모니터링
-
애플리케이션 아키텍처에 맞게 확장 가능성 (Extensibility to fit into your application's architecture)
- 사용자 정의 메트릭 및 확장 가능한 API를 위한 네이티브 지원
빠른 시작 (Quickstart)
Claude Code 사용자
다음 프롬프트를 에이전트 애플리케이션에서 실행되는 Claude Code에 직접 붙여넣으세요:
For each skill name in this list — arthur-onboard-oss, arthur-onboard-oss-engine, arthur-onboard-task, arthur-onboard-analyze, arthur-onboard-instrument, arthur-onboard-prompts, arthur-onboard-verify, arthur-onboard-eval-provider, arthur-onboard-evals, arthur-skills-upgrade — fetch https://raw.githubusercontent.com/arthur-ai/arthur-engine/refs/heads/main/integrations/claude-code-skills/arthur-onboard/<skill-name>/SKILL.md and save it to ~/.claude/skills/<skill-name>/SKILL.md (create the directory if it doesn't exist). Also fetch https://raw.githubusercontent.com/arthur-ai/arthur-engine/refs/heads/main/integrations/claude-code-skills/arthur-onboard/arthur-onboard-instrument/EXAMPLES.md and save it to ~/.claude/skills/arthur-onboard-instrument/EXAMPLES.md. Once all files are saved, read ~/.claude/skills/arthur-onboard-oss/SKILL.md and follow its instructions.
Codex 사용자
다음 프롬프트를 에이전트 애플리케이션에서 실행되는 Codex 세션에 직접 붙여넣으세요:
Install the Arthur OSS onboarding Codex skills from arthur-ai/arthur-engine.
Install these skill folders into ${CODEX_HOME:-~/.codex}/skills:
...
그 외 사용자 모두
- 아래 명령어로 엔진 설치기를 실행하세요:
Mac
bash <(curl -sSL https://get-genai-engine.arthur.ai/mac)
Windows
iex (iwr -Uri
Arthur Platform의 모든 기능을 활용하려면 [여기](https://platform.arthur.ai/signup)에서 가입하고 무료로 시작하세요.
* 사용자 지정 대시보드
* 알림 및 경고
* 모든 워크플로우를 트리거할 수 있는 구성 가능한 웹훅(webhook)
* 에이전트 검색(Agent discovery)
* 거버넌스(Governance)
**Claude Code 사용자**
다음 프롬프트를 에이전트 애플리케이션에서 실행되는 Claude Code 세션에 직접 붙여넣으세요:
For each skill name in this list — arthur-onboard-platform, arthur-onboard-platform-access, arthur-onboard-platform-workspace, arthur-onboard-platform-engine, arthur-onboard-platform-model, arthur-onboard-platform-token, arthur-onboard-analyze, arthur-onboard-instrument, arthur-onboard-prompts, arthur-onboard-verify, arthur-onboard-eval-provider, arthur-onboard-evals — fetch https://raw.githubusercontent.com/arthur-ai/arthur-engine/refs/heads/main/integrations/claude-code-skills/arthur-onboard/<skill-name>/SKILL.md and save it to ~/.claude/skills/<skill-name>/SKILL.md (create the directory if it doesn't exist). Once all skills are saved, read ~/.claude/skills/arthur-onboard-platform/SKILL.md and follow its instructions.
**Codex 사용자**
arthur-ai/arthur-engine에서 Arthur Platform 온보딩 Codex 스킬을 설치하세요.
Install these skill folders into ${CODEX_HOME:-~/.codex}/skills:
- arthur-onboard-platform
- arthur-onboard-platform-access
...
**그 외 사용자**
플랫폼 UI를 통해 온보딩하세요.
## Arthur Platform 엔터프라이즈 버전
**Arthur Platform의 엔터프라이즈 버전은 사용자 지정 엔터프라이즈급 가드레일(guardrails) 및 메트릭을 포함하여 더 나은 성능, 추가 기능 및 기능을 제공하며**, 이를 통해 조직의 AI 잠재력을 극대화할 수 있습니다.
주요 기능:
- Arthur의 세계적 머신러닝 엔지니어링 팀이 훈련한 최첨단(State-of-the-art) 독점 평가 모델
- Arthur Engine의 에어갭 배포(Hugging Face Hub에 대한 의존성 없음)
- 전체 Arthur Platform의 선택적 온프레미스 배포
- Arthur의 세계적 엔지니어링 팀 지원
Arthur Platform의 엔터프라이즈 버전에 대해 더 자세히 알아보고 싶다면, [문의해 주세요!](https://www.arthur.ai/book-demo)
## 기여 (Contributing)
- 도움을 받거나 피드백을 공유하려면 [Discord](https://discord.gg/tdfUAtaVHz)에서 Arthur 커뮤니티에 참여하세요.
- 버그 수정이나 새로운 기능 요청을 하려면, [GitHub 이슈](https://github.com/arthur-ai/arthur-engine/issues)를 제출해 주세요.
- 코드 기여를 하려면, [기여 가이드라인](CONTRIBUTING.md)을 검토해 주세요.
- 감사합니다!
AI 자동 생성 콘텐츠
본 콘텐츠는 HN Claude Code Search의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기