작성자: Abhishek Jadhav
보도일자: 2024년 5월 20일
출처: Biometricupdate.com


생체인식 시스템의 성능을 평가하는 지표는 매우 중요하지만, 반드시 이해하기 쉬운 것은 아닙니다.

평가 자체는 생체인식 시장에 참여하기 위해 점점 더 필수적인 단계가 되고 있습니다. 지속적인 성능 평가는 운영자가 생체인식 시스템을 개선하고 최적화할 수 있도록 도와줍니다. 이를 통해 보안 및 개인정보 보호와 관련된 규제 요구사항을 충족하면서 시스템의 약점과 개선 영역을 파악할 수 있습니다.

• 거짓 수락율(FAR, False Acceptance Rate): 시스템이 승인되지 않은 사용자를 허용할 가능성을 측정합니다. 거짓 양성 식별률(FPIR, False Positive Identification Rate)이라고도 합니다.

FP는 거짓 양성(승인되지 않은 접근이 허용된 경우)의 수를 나타내며, TN은 진정한 음성(접근이 올바르게 거부된 경우)의 수를 나타냅니다.

• 거짓 거부율(FRR, False Rejection Rate): 시스템이 승인된 사용자를 거부할 가능성을 측정합니다. 거짓 불일치율(FNMR, False Non-Match Rate)이라고도 합니다.

FN은 거짓 음성(승인된 접근이 거부된 경우)의 수를 나타내며, TP는 진정한 양성(접근이 올바르게 허용된 경우)의 수를 나타냅니다.

• 동오류율(ERR, Equal Error Rate): FAR과 FRR이 동일한 비율로 발생하는 지점을 나타내며, 두 오류 유형이 균형을 이루는 값을 제공합니다.
• 거짓 일치율(FMR, False Match Rate): 승인되지 않은 접근 시도가 다른 주체의 템플릿과 잘못 일치하는 비율을 나타냅니다.
• 거짓 불일치율(FNMR, False Non-Match Rate): 승인된 접근 시도가 동일한 주체의 템플릿과 잘못 불일치로 보고되는 비율을 나타냅니다.

참고: 생체인식 인증에서 FRR과 FAR은 종종 FNMR과 FMR로 언급되지만, 이 두 용어는 서로 대체될 수 없습니다. 특히, FMR은 FAR과, FNMR은 FRR과 동일하지만, 이는 시스템이 사용자의 템플릿과 단일 시도로 일치 여부를 확인할 때에만 해당됩니다.

• 거짓 양성 식별율(FPIR, False Positive Identification Rate): 데이터베이스에 등록되지 않은 개인이 잘못 일치하는 것으로 식별될 확률을 측정합니다. FPIR은 1:1 인증 시스템에서 FMR에 데이터베이스 항목 수를 곱한 값과 거의 같습니다.
• 거짓 음성 식별율(FNIR, False Negative Identification Rate): 시스템이 등록된 사용자를 올바르게 식별하지 못할 확률을 측정합니다. 미국 표준기술연구소(NIST)에 다르면, 1:N 환경에서 시스템이 일치 여부를 식별하지 못할 확률은 유사한 조건에서 1:1 설정(FNMR 1:1)에서 일치 여부를 확인하지 못할 확률과 유사합니다.

잘 알려진 NIST의 얼굴 인식 공급업체 평가에서는 FPIR을 특정 임계값으로 설정한 상태에서 FNIR을 측정합니다.

• 포착 실패율(FTC, Failure To Capture): 생체인식 시스템이 샘플을 포착하지 못하는 경우의 비율입니다.
• 등록 실패율(FTE, Failure To Enroll): 사용자가 시스템에 등록하지 못하는 경우의 비율입니다.
• 공격 제시 분류 오류율(APCER, Attack Presentation Classification Error Rate): 시스템이 제시된 공격을 탐지하고 식별하는 정확도를 측정합니다.
• 정상 분류 오류율(BPCER, Bonafide Presentation Classification Error Rate): 시스템이 오경보(false alarm)을 피하는 정도를 측정합니다.
• 침입자 공격 제시 일치율(IAPMR, Impostor Attack Presentation Match Rate): 인증되지 않은 사용자가 접근하려고 시도할 때 생체인식 시스템이 취약한 정도를 평가합니다.

생체인식 제시 공격 탐지(PAD)는 ISO/IEC 30107-3 표준에 따라 BPCER 및 FNMR에 대한 한계를 설정하고 APCER를 평가합니다. 전체 PAD 시스템의 경우 IAPMR이 테스트됩니다.

• 수신자 동작 특성(ROC, Receiver Operating Characteristic) 곡선: FAR과 FRR의 관계를 나타내는 곡선을 생성하여 생체인식 시스템의 성능을 평가하는 방법입니다.

성능 평가는 생체인식 시스템이 신뢰성, 보안성 및 의도된 용도에 적합한지를 보장하기 위한 기본적인 요소로 자리 잡았습니다.