이파피루스, 민감정보 비식별화 AI 기능 ‘블랙마커’ 업그레이드

카테고리

프로그래밍/소프트웨어 개발

서브카테고리

DevOps

대상자

IT 전문가, 데이터 보안 담당자, 대규모 문서 처리를 요구하는 기업

핵심 요약

• 블랙마커 업그레이드: 정형/비정형 민감정보(예: 인명, 주소) 자동 감지 및 마스킹 처리 기능 추가
• 모델 구조: 규칙 기반 모델 + 사전 기반 모델 병행 처리로 정확도 향상
• 비용 효율성: 일반 GPU 서버 사용 시 AI 수준 정확도 달성, 고비용 GPU 서버 의존도 감소

섹션별 세부 요약

1. 업그레이드 발표

• 이파피루스, PDF 스트리밍 뷰어 스트림닥스와 PDF 게이트웨이에 블랙마커 모듈 통합
• 업그레이드 전: 전화번호, 이메일 등 정형 데이터만 처리 가능
• 업그레이드 후: 인명, 주소 등 비정형 데이터도 자동 감지 및 비식별화 지원

2. 기술적 기능 개요

• 데이터 처리 흐름:

- 문서 업로드 → 텍스트 전처리 → 규칙/사전 모델 병행 분석 → 마스킹 처리

• 커스텀 기능: 마스킹 텍스트/특수문자 설정 가능
• 자동 처리: 서버 기반 배치 처리로 대량 문서 처리 효율성 확보

3. 성능 및 비용 효율성

• AI 기반 정확도: 기존 방식 대비 높은 정확도 유지
• GPU 요구 사항: 일반 GPU 서버 사용 가능, 고비용 GPU 서버 필요성 감소
• 실무 적용 효과: 정보 유출 위험 감소 + 처리 비용 절감

결론

• 실무 적용 팁: 대규모 문서 비식별화 시 블랙마커 도입을 통해 AI 수준 정확도와 비용 절감을 동시에 달성할 수 있음.