얼굴 인식Face Recognition

얼굴을 견주어 누구인지 알아내는 일

핵심 정리
  • 얼굴 인식은 얼굴을 견주어 누구인지 알아내는 일이에요. 얼굴이 어디 있는지 찾는 얼굴 검출과는 다른 단계예요.
  • 얼굴 사진을 그대로 저장하지 않아요. 눈·코·입 사이의 거리와 비율을 숫자 묶음으로 요약해 두고 그 숫자끼리 견줘요.
  • 물음은 두 가지예요. 본인이 맞는지 하나와 견주는 확인, 그리고 명부 전체와 견주어 누구인지 찾는 식별이에요.
  • 얼마나 닮아야 같은 사람으로 볼지 기준선을 사람이 정해요. 느슨하면 남을 통과시키고 빡빡하면 본인을 막아요.
  • 명부에 등록되지 않은 사람은 찾을 수 없고, 누구를 등록해 두었는지가 곧 이 기술의 윤리 문제가 돼요.
목차

1비유로 이해하기

저금통을 털어 동전 분류기에 부으면, 기계가 동전을 하나씩 굴리면서 통마다 갈라 담아요. 이 기계 안에는 어떤 동전이 지름과 두께가 얼마인지 적힌 규격표가 미리 들어 있고, 굴러 온 동전을 그 표와 견주는 것으로 판정이 끝나요.

표에 없는 동전은 아무리 좋은 기계라도 가려내지 못해요. 외국 여행에서 가져온 동전이나 오락실 코인은 통으로 가지 못하고 반환구로 떨어져요. 기계의 솜씨가 아니라 표에 무엇이 적혀 있느냐가 결과를 정하는 셈이에요.

물음도 두 갈래예요. 자판기처럼 "이게 그 동전 맞나"를 한 줄하고만 견주는 경우가 있고, 분류기처럼 "이게 표 안의 어느 동전인가"를 전부와 견주는 경우가 있어요. 얼굴 인식이 하는 일이 이 대조예요.

2자세히 알아보기

얼굴을 숫자 묶음으로 줄여 둬요

인식의 첫 단계는 얼굴이 든 자리를 잘라 내 크기와 기울기를 맞추는 일이에요. 눈꼬리와 입꼬리 같은 기준점을 찍어 두고, 그 점들이 늘 비슷한 자리에 오도록 사진을 돌리고 늘려요. 이렇게 자세를 맞춰 둬야 견줄 수 있어요.

그다음이 핵심이에요. 정돈된 얼굴 그림을 수백 개짜리 숫자 묶음으로 줄여요. 이 숫자들은 눈 사이 거리처럼 사람이 이름 붙일 수 있는 값이 아니라, 학습 과정에서 "같은 사람끼리는 가깝고 다른 사람끼리는 멀어지도록" 만들어진 값이에요.

이 방식 덕분에 조명이 바뀌거나 안경을 써도 숫자 묶음이 크게 흔들리지 않아요. 그리고 대조할 때 사진을 다시 볼 필요가 없어요. 숫자 묶음끼리 얼마나 가까운지만 재면 되니까 명부가 수만 명이어도 순식간에 훑어요.

물음이 두 가지예요

첫째는 확인이에요. "이 사람이 등록해 둔 그 사람이 맞나"를 묻고, 명부에서 딱 한 장만 꺼내 견줘요. 휴대폰 잠금 해제나 출입 확인이 여기 속해요. 답은 맞다·아니다 둘 중 하나고, 견주는 횟수가 한 번이라 빠르고 실수도 적어요.

둘째는 식별이에요. "이 사람이 명부 안 누구인가"를 묻고, 등록된 전부와 견주어 가장 가까운 하나를 찾아요. 견주는 횟수가 등록된 사람 수만큼 늘어나요.

식별은 확인보다 훨씬 어려워요. 명부가 커질수록 우연히 닮은 사람이 끼어들 확률이 함께 커지기 때문이에요. 견주는 정확도가 같아도, 열 명 중에서 찾을 때와 십만 명 중에서 찾을 때의 결과는 전혀 다른 이야기가 돼요.

얼마나 닮아야 같은 사람일까요

숫자 묶음 사이의 거리가 나오면 그다음은 판단이에요. 어느 정도까지 가까워야 같은 사람으로 볼지 기준선을 사람이 정해요. 이 선을 어디에 긋느냐가 인식의 성격을 거의 결정해요.

기준선을 느슨하게 잡으면 본인을 막는 일은 줄지만, 닮은 남을 통과시키는 일이 늘어요. 반대로 빡빡하게 잡으면 남은 확실히 막지만 본인이 여러 번 다시 시도해야 해요. 두 실수를 동시에 줄이는 방법은 없고, 어느 쪽이 더 곤란한지에 따라 선을 옮길 뿐이에요.

여기에 치우침 문제가 겹쳐요. 학습에 쓴 얼굴 자료에 특정 피부색이나 연령대가 적었다면, 그 집단에서는 같은 기준선인데도 실수가 더 자주 나요. 같은 문을 두고 어떤 사람은 쉽게 통과하고 어떤 사람은 자꾸 막히는 일이 생기는 거예요.

명부를 누가 어떻게 모았는지가 문제예요

얼굴 인식이 다른 인식 기술과 갈리는 지점은 정확도가 아니라 대조할 명부가 반드시 먼저 있어야 한다는 데 있어요. 명부에 얼굴이 등록되지 않은 사람은 아무리 좋은 기술이라도 찾아낼 수 없어요.

그래서 물음은 자연스럽게 명부 쪽으로 옮겨 가요. 등록한 사람이 그 사실을 알고 동의했는지, 언제까지 보관하고 언제 지우는지, 처음 밝힌 목적 말고 다른 데 쓰이지는 않는지 같은 것들이에요. 출입증 대신 쓰겠다고 받은 얼굴이 나중에 매장 안 동선을 따라가는 데 쓰인다면, 기술은 그대로여도 사람이 동의한 범위를 벗어나요.

얼굴은 비밀번호와 달리 바꿀 수 없다는 점도 무겁게 작용해요. 유출된 비밀번호는 새로 만들면 되지만 얼굴은 그럴 수 없어서, 한 번 새어 나간 얼굴 정보는 평생 따라다녀요. 게다가 얼굴은 멀리서 본인 모르게 찍힐 수 있어서, 지문과 달리 당사자가 알아채지 못한 채로 명부가 만들어질 수 있어요.

많은 나라가 이런 점 때문에 얼굴 정보를 특별히 민감한 정보로 따로 묶어 다루고, 공공장소에서 동의 없이 모으는 일에 별도의 제한을 두고 있어요. 기술을 쓰기 전에 "이 명부가 왜 필요한가"를 먼저 묻는 게 순서예요.

3조금 더 정확하게

얼굴을 요약한 숫자 묶음은 임베딩이라고 불러요. 견줄 때는 두 묶음이 이루는 방향이 얼마나 비슷한지를 재는 방식이 흔하고, 판정은 그 값과 기준선을 견주어 내려요. 등록 단계에서 한 사람의 얼굴을 여러 장 받아 평균을 내 두면 각도와 조명 변화에 더 잘 버텨요.

성능은 두 가지 실수 비율로 이야기해요. 남을 본인으로 통과시키는 비율과 본인을 막는 비율이에요. 한쪽을 낮추면 다른 쪽이 올라가는 관계라, 실제 도입에서는 "남을 통과시키는 비율을 얼마 이하로 두었을 때 본인을 막는 비율이 얼마인가"처럼 두 값을 함께 밝히는 게 원칙이에요.

비유가 어긋나는 지점도 있어요. 동전은 같은 값이면 지름과 두께가 똑같이 찍혀 나오지만, 사람 얼굴은 같은 사람도 매번 달라 보여요. 각도와 조명, 나이에 따라 값이 흔들려서 "정확히 맞는지"가 아니라 "얼마나 가까운지"로 판정할 수밖에 없어요. 무엇보다 동전은 주머니에 넣어 두거나 꺼내지 않을 수 있지만, 얼굴은 그렇지 않아요. 길을 걷는 것만으로도 담기고, 본인이 모르는 사이에 명부에 올라갈 수 있어요. 이 차이가 얼굴 인식을 다른 대조 기술보다 훨씬 조심스럽게 다뤄야 하는 이유예요.

4직접 해보기

5흔한 오해

  • 얼굴 인식과 얼굴 검출이 같은 것이라고 생각하기 쉽지만, 실제로는 검출이 얼굴 자리를 찾는 단계이고 인식은 그 얼굴이 누구인지 견주는 별개 단계예요.

  • 얼굴 사진이 그대로 저장된다고 여기기 쉽지만, 실제로는 숫자 묶음으로 요약해 두는 경우가 많아요. 다만 그 숫자도 개인을 가리키는 정보라 보호 대상이에요.

  • 정확도가 높으면 안심해도 된다고 믿기 쉽지만, 실제로는 견줄 사람 수가 늘수록 우연히 닮은 사람이 걸릴 확률도 함께 커져요.

7한 줄 요약

그러니까얼굴 인식은 얼굴을 숫자 묶음으로 줄여 명부와 견주는 일이고, 기술보다 그 명부를 누가 어떻게 모았는지가 더 중요한 물음이에요.

잘못된 내용이나 더 좋은 비유가 있나요? 수정 제안 보내기 · 마지막 수정2026-09-02