PatRe: 특허 심사 전 단계의 사무소 조치 및 반박 생성 벤치마크

요약

본 논문은 특허 심사를 단순한 분류 작업이 아닌, 사무소 조치 생성 및 신청인 반박이 포함된 상호작용적이고 반복적인 과정으로 모델링하는 새로운 벤치마크 'PatRe'를 소개합니다. PatRe는 480개의 실제 사례를 기반으로 하며, 특허 심사 과정을 동적 다중 턴(multi-turn)의 정당화 및 응답 과정으로 재정의했습니다. 광범위한 LLM 실험을 통해 모델 성능에 대한 통찰력을 제공하며, 이는 특허 법률 추론과 기술적 신규성 판단이라는 복잡한 실제 세계 과제를 해결하는 데 있어 현재 AI 모델들이 가진 잠재력과 한계를 동시에 보여줍니다.

핵심 포인트

• 특허 심사 과정을 정적인 분류가 아닌, 상호작용적이고 반복적인 '동적 다중 턴' 과정으로 재정의했습니다.
• 새로운 벤치마크 'PatRe'는 480개의 실제 특허 사례를 포함하여 사무소 조치 생성 및 신청인 반박 과정을 모델링합니다.
• LLM을 활용한 실험은 특허 법률 추론과 기술적 신규성 판단의 복잡성을 보여주며, 모델 간 성능 차이와 작업 비대칭성을 분석했습니다.
• 연구 결과를 촉진하기 위해 벤치마크 코드와 데이터셋을 공개하여 학계에 기여합니다.