연구자들이 3가지 오픈소스 에이전트 하네스(Goose, OpenCode, OpenHands-SDK)를 사용하여 50개의

연구자들은 동일한 두 개의 코딩 모델을 세 가지 오픈소스 에이전트 하네스(Goose, OpenCode 및 OpenHands-SDK)로 각각 50개의 Terminal-Bench Pro 과제에 돌렸습니다. 이 과정에서 하네스는 해결된 과제당 사용 토큰 수를 최대 40배까지 변화시켰지만, 합격률은 단지 0점에서 8점 사이의 변화만 보였습니다.

누군가 모델의 합격률을 인용할 때는 어떤 하네스에서 실행되었는지, 그리고 해결된 과제당 비용이 얼마였는지 물어보세요.
https://arxiv.org/abs/2607.22585
#AI
#AIAgents

코딩 에이전트는 일주일 분량의 작업을 오후에 끝낼 수 있게 해줍니다. 하지만 다음 사람이 이 작업을 이어받을 때 비용 문제가 발생하는데, 그 이유는 브랜치(branch)를 결정하는 과정이 세션 중간에 이루어졌고, 티켓(ticket) 작성 이후에 발생했기 때문에 다음 사람이 쉽게 찾아볼 수 있는 곳에 기록되어 있지 않기 때문입니다.
https://ericbrown.com/the-handoff-problem/
…
#AI