말도 안 되는 성능을 가진 새로운 오픈소스 도구의 등장
요약
PDF를 초당 100페이지의 속도로 Markdown으로 변환하는 오픈소스 도구 OpenDataLoader가 등장했습니다. GPU 없이 CPU만으로 구동 가능하며, 기존 도구들보다 압도적인 속도와 표 분할 성능을 보여줍니다.
핵심 포인트
- 초당 100페이지의 압도적인 Markdown 변환 속도
- GPU나 API 키 없이 CPU만으로 구동 가능한 효율성
- docling, marker 등 기존 도구 대비 월등한 성능
- PDF 협회 및 veraPDF 팀이 참여한 높은 신뢰도
- Apache 2.0 라이선스로 상업적 이용 가능
여러분, 정말 말도 안 된다고 외칠 수밖에 없는 또 하나의 오픈소스 신기한 도구가 나타났습니다😅
누군가 PDF 파서 (PDF Parser)를 초당 100페이지의 Markdown 변환 속도로 만들어냈습니다. 핵심은 100% 무료이며, 순수하게 CPU만으로 구동 가능하다는 점입니다. GPU도 필요 없고, 클라우드도 필요 없으며, API key조차 아낄 수 있습니다.
이름은 OpenDataLoader이며, 모든 벤치마크 (Benchmark) 차트를 휩쓸며 바로 정상에 올랐습니다👑
몇 가지 비교를 해보면 바로 이해하실 겁니다:
1️⃣ docling은 점수는 괜찮지만 이 도구보다 15배 느립니다.
2️⃣ marker는 GPU가 필요할 뿐만 아니라 1000배나 느립니다.
3️⃣ Pymupdf4llm은 빠르지만, 표 분할 (Table Segmentation) 점수가 0.40에 불과합니다.
더 무서운 점은 그 출신입니다. PDF 협회와 veraPDF 팀이 직접 제작에 참여했는데, 이들은 바로 표준을 정하는 거물들입니다. 8.6k stars, Apache 2.0 라이선스, 상업적 의존성 제로, 이걸 어떻게 버티겠습니까?
AI 자동 생성 콘텐츠
본 콘텐츠는 X @nftcps (자동 발견)의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기