모든 AI 문서 챗봇에 정말 벡터 데이터베이스 (Vector Database)가 필요할까요?
요약
모든 AI 챗봇에 벡터 데이터베이스가 필수적인지 의문을 제기하며, Google의 Open Knowledge Format(OKF)을 활용한 'Ask-Your-Markdown' 프로젝트를 소개합니다. 임베딩과 데이터베이스 없이 Markdown 파일만으로 LLM 기반 질의응답이 가능한 새로운 접근 방식을 제안합니다.
핵심 포인트
- 벡터 데이터베이스와 임베딩 없이도 문서 기반 질의응답 가능
- Google의 Open Knowledge Format(OKF) 표준 활용
- 특정 벤더 종속성(Vendor lock-in) 없는 개방형 구조
- OpenAI 및 Azure AI Foundry 연동 또는 완전 오프라인 작동 지원
최근 RAG (Retrieval-Augmented Generation), 임베딩 (Embeddings), 그리고 벡터 데이터베이스 (Vector Databases)에 관한 많은 논의를 보고 있습니다.
이로 인해 궁금증이 생겼습니다. 모든 AI 문서 챗봇에 정말 벡터 데이터베이스가 필요할까요?
그래서 저는 Google의 Open Knowledge Format (OKF)을 탐구하고, 이 접근 방식이 어디에 적합한지 더 잘 이해하기 위해 Ask-Your-Markdown을 구축했습니다. 또한 제가 배운 내용을 공유하는 블로그 글도 작성했습니다. 기사와 GitHub 저장소 모두 아래에 언급되어 있습니다.
OKF에 대해 궁금하셨다면, 이 글이 도움이 되기를 바랍니다.
GitHub logo imelanthirayan / Ask-Your-Markdown
AI 또는 오프라인 검색을 사용하여 Markdown 파일 폴더에 대해 질문하세요. Google의 Open Knowledge Format (OKF)을 기반으로 구축되었습니다.
📚 Ask Your Markdown
Markdown 파일 폴더에 대해 질문하고 - 당신의 문서에 근거한 답변을 얻으세요.
데이터베이스 없음. 임베딩 (Embeddings) 없음. 벤더 종속 (Vendor lock-in) 없음. 오직 OKF로 정리되어 LLM (Large Language Model) 유무와 상관없이 탐색할 준비가 된 당신의 Markdown 파일뿐입니다.
**Open Knowledge Format (OKF)**를 기반으로 구축되었습니다 - 이는 Google Cloud에서 제공하는 개방형이며 특정 업체에 종속되지 않는 표준입니다.
OpenAI · Azure AI Foundry와 함께 작동하거나, 완전히 **오프라인 (Offline)**으로 작동합니다.
🧭 목차
🧭 목차
- Why this exists
- How it works
- How this compares to classic RAG
- The two chapters: Build → Ask
- What's in the box
- Quick start
- Chapter 1 - Build a bundle
- Chapter 2 - Ask questions
- Labels: the fast path
- Big documents
- Try it with no API key
- Why people like this
- What's OKF vs. this sample
- How well does it work - honestly
AI 자동 생성 콘텐츠
본 콘텐츠는 Dev.to AI tag의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기