제 LLM은 코딩에 뛰어나지만 시각 정보 처리가 안 돼서, 제가 눈을 달아줬습니다.
요약
DeepSeek의 뛰어난 코딩 능력을 유지하면서 시각 정보 처리 기능을 추가한 LocalEyes를 개발했습니다. 이 스킬은 로컬 Ollama 비전 모델(qwen2.5vl:7b)을 활용하여 DeepSeek에게 '눈'을 제공하며, 사용자가 직접 스크린샷을 찍어 분석하게 합니다. 모든 과정이 100% 로컬에서 작동하여 보안성과 비용 효율성이 높습니다.
핵심 포인트
- DeepSeek에 시각 정보를 추가한 LocalEyes 개발
- 로컬 Ollama 비전 모델(qwen2.5vl:7b) 사용
- Win+Shift+S 스크린샷을 통해 DeepSeek이 이미지 추론 가능
- API 키나 클라우드 연결 없이 100% 로컬 작동
저는 DeepSeek을 일상적으로 사용하고 있습니다. 이 모델은 추론(reasoning), 아키텍처 설계, 디버깅 등 모든 면에서 뛰어납니다... 단지 한 가지가 빠졌는데, 이미지를 볼 수 없다는 것입니다.
시각적인 문제(에러 대화 상자, UI 목업, 차트)를 만날 때마다 흐름이 끊겨서 스크린샷을 Gemini에 업로드하고, 화면에 무엇이 있는지 설명해 달라고 요청한 다음, 그 설명을 다시 붙여넣어야 했습니다. 정말 작업 흐름을 망가뜨립니다. 게다가 제 화면이 다른 사람의 서버에 올라간다는 의미이기도 합니다.
그래서 저는 LocalEyes를 만들었습니다. 이는 Claude Code 스킬로, 로컬 Ollama 비전 모델을 사용해 DeepSeek에게 작동하는 눈을 제공합니다.
작동 방식:
Win+Shift+S를 눌러 스크린샷을 찍습니다.
Claude Code에서 "이것 좀 봐줘"라고 말합니다.
스킬은 클립보드를 가져와 로컬의 qwen2.5vl:7b를 통해 라우팅하고, 텍스트 설명을 반환합니다.
이제 DeepSeek은 이미지를 '보고' 그것에 대해 추론할 수 있습니다.
이 모델은 에이전트 작업(agentic work)을 하는 동안 자체적으로 스크린샷을 찍기도 합니다. 빌드를 실행하고 실패한 것을 보고, 오류를 읽기 위해 자신의 디스플레이를 캡처합니다. 프롬프트가 필요 없습니다.
100% 로컬입니다. API 키가 필요 없고, 클라우드도 사용하지 않습니다. 비용이 전혀 들지 않습니다.
설정은 2분이면 끝납니다: ollama pull qwen2.5vl:7b, pip install Pillow, python install.py를 실행하면 됩니다.
https://i.redd.it/j9vuoi5tprbh1.gif
제출자 /u/NoPainNullGain
[링크] [댓글]
AI 자동 생성 콘텐츠
본 콘텐츠는 r/LocalLLaMA의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기