OpenAI, 개인 정보 보호 필터 오픈소스 모델 공개, 텍스트 내 개인 정보 탐지 및 익명화 가능

Odaily 소식 OpenAI는 오늘 개인 식별 정보(PII)를 탐지하고 마스킹 처리하기 위한 오픈소스 모델 'OpenAI Privacy Filter'를 공개했습니다. 이 모델은 총 15억 개의 파라미터와 5천만 개의 활성 파라미터를 보유하며, 최대 12.8만 개의 토큰 컨텍스트 윈도우를 지원합니다. OpenAI Privacy Filter는 양방향 토큰 분류 모델 아키텍처를 채택하여 개인 이름, 주소, 이메일, 전화번호, URL, 날짜, 계정 및 키 등 8가지 유형의 정보를 식별할 수 있으며, PII-Masking-300k 벤치마크에서 96%의 F1 점수를 획득했습니다. 현재 이 모델은 Apache 2.0 라이선스에 따라 Hugging Face와 GitHub에서 공개되어 개발자들의 로컬 배포 및 파인튜닝을 지원합니다.