안녕하세요, r/LocalLLaMA!

최종적으로 새로운 모델로 돌아왔습니다: 🛡️ Shield 82M

이는 distilroberta-base 의 파인튜닝 (fine-tuning) 버전이며, 어떤 언어든 텍스트 내의 모든 유형의 PII(Personally identifiable information, 개인식별정보) 를 필터링할 수 있습니다.

다음은 몇 가지 예시입니다:

1) 이름, 이메일 및 전화번호 테스트:

Original: My name is John Doe. Email: john@example.com. Phone: +49 123 45678.
Protected: My name is [PERSON]. Email: [EMAIL]. Phone: [PHONE].

2) 기본 테스트:

Original: I live in Cambridge
Protected: I live in [ADDRESS]

3) 프랑스어 테스트 (다국어):

Original: Mon e-mail est jean.dupont@example.fr et mon téléphone est +33 6 12 34 56 78.
Protected: Mon e-mail est [EMAIL] et mon téléphone est [PHONE].

이로써 이 모델이 총 정확도 ~96% 로 매우 잘 수행됨을 알 수 있습니다.

그리고: 모든 저의 모델처럼 완전히 오픈소스입니다. :D

사용해 보고 싶다면: https://huggingface.co/LH-Tech-AI/Shield-82M

즐기세요. :-)

댓글에서 만나요. 여러분의 피드백을 정말 원합니다.