딥페이크 기술을 감지하는 데 인간의 능력이 더 우수한가, 아니면 인공지능이 더 우수한가?

컴퓨터와 인공지능 모델의 능력이 비약적으로 발전한 기술 시대에 딥페이크 기술은 점점 더 보편화되어 광범위한 관심을 받고 있습니다. 딥페이크 기술은 사람이 직접 촬영한 것처럼 보이는 고해상도의 영상 또는 오디오 콘텐츠를 제작하는 기술입니다. 딥페이크 기술은 사회 전반에 걸쳐 위협적인 존재입니다.

가짜 콘텐츠를 식별하는 능력은 잘못된 정보에 대응하는 데 필수적입니다. 하지만 AI 기술이 발전함에 따라 딥페이크를 감지하는 데 누구를 신뢰할 수 있을까요? 문제는 다음과 같습니다. 딥페이크를 더 잘 감지하는 사람은 인간일까요, 아니면 AI일까요?

인간은 수천 년 동안 목소리와 얼굴을 구별하고 언어를 이해할 수 있었습니다. 하지만 인공지능(AI)으로 구동되는 기계가 이러한 능력을 능가할 수 있을까요? 이 글에서는 딥페이크 탐지의 과제와 발전 상황을 살펴보고, 이러한 맥락에서 인간과 AI의 역량을 비교합니다. 영상이 딥페이크 기술로 수정되었는지 어떻게 알 수 있나요?

딥페이크의 위험

인공지능 기술이 발전함에 따라 딥페이크 기술의 위험성은 우리 모두에게 점점 더 큰 위협이 되고 있습니다. 딥페이크 기술이 제기하는 가장 시급한 문제들을 간략하게 요약해 보겠습니다.

  1. 오해의 소지가 있음: 가짜 영상과 오디오 녹음은 가짜 뉴스 등 잘못된 정보를 퍼뜨릴 수 있습니다.
  2. 인격화: 딥페이크 기술은 개인을 사칭함으로써 사람들의 명예를 훼손하거나 그들이 아는 사람을 속일 수 있습니다.
  3. 국가 안보: 딥페이크를 이용한 명백한 전쟁 시나리오는 세계 지도자가 갈등을 조장하는 장면을 조작한 영상이나 오디오 녹음입니다.
  4. 건강 관리: 당사자들은 특정 집단 사이에 분노와 사회적 불안을 조장하기 위해 사기성 영상과 오디오 클립을 사용할 수도 있습니다.
  5. 사이버 보안: 사이버 범죄자들은 ​​이미 AI 기반 음성 복제 도구를 사용하여 아는 사람에게 설득력 있는 메시지를 보내 개인을 표적으로 삼고 있습니다.
  6. 개인정보 보호 및 동의: 딥페이크의 악의적인 사용은 개인의 동의 없이 이루어진다.
  7. 신뢰와 신뢰의 부족: 진실과 거짓을 구분할 수 없다면 정확한 정보라도 마찬가지로 신뢰할 수 없게 됩니다.

딥페이크 기술은 더욱 설득력 있게 발전할 것이므로, 이를 탐지할 강력한 도구와 방법이 필요합니다. 인공지능은 딥페이크 탐지 모델이라는 형태로 그러한 도구를 제공합니다. 그러나 AI가 생성한 글을 인식하도록 설계된 알고리즘과 마찬가지로, 딥페이크 탐지 도구는 완벽하지 않으며 완벽하게 정확하지도 않을 것입니다.

현재 우리가 의지할 수 있는 유일한 도구는 인간의 판단력뿐입니다. 그렇다면 우리가 딥페이크를 식별하는 데 알고리즘보다 더 나은가요?

알고리즘이 인간보다 딥페이크를 더 잘 감지할 수 있을까?

딥페이크 기술은 너무나 심각한 위협이어서 거대 기술 기업과 연구 그룹들이 연구 개발에 막대한 자원을 투자하고 있습니다. 2019년에는 메타, 마이크로소프트, 아마존과 같은 기업들이 딥페이크 콘테스트에서 XNUMX만 달러의 상금을 걸었습니다. 딥 페이크 감지 챌린지 가장 정확한 탐지 모델을 위해.

가장 성능이 좋은 모델은 공개적으로 이용 가능한 비디오 데이터셋에 대해 82.56%의 정확도를 보였습니다. 그러나 동일한 모델을 10000개의 미공개 비디오로 구성된 "블랙박스" 데이터셋에 대해 테스트했을 때, 가장 성능이 좋은 모델의 정확도는 65.18%에 불과했습니다.

또한 AI 기반 딥페이크 탐지 도구의 성능을 인간을 대상으로 분석한 수많은 연구가 있습니다. 물론 연구마다 결과는 다르지만, 일반적으로 인간은 딥페이크 탐지 도구의 성공률과 동등하거나 더 우수합니다.

2021년에 발표된 연구에 따르면 다음과 같은 결과가 나왔습니다. PNAS "일반적인 인간 관찰자"는 주요 딥페이크 탐지 도구보다 약간 더 높은 정확도를 달성했습니다. 그러나 이 연구는 인간 참여자와 AI 모델 모두 다양한 유형의 오류에 취약하다는 사실도 발견했습니다.

흥미롭게도, 시드니 대학교 인간의 뇌는 무의식적으로 의식적인 노력보다 딥페이크를 감지하는 데 더 효과적이라는 것을 발견했습니다. 확인해 보세요. 딥페이크 기술의 주요 위험과 이를 감지하는 방법.

딥페이크 기술에서 시각적 단서 발견

딥페이크 탐지 기술은 복잡하며, 필요한 분석은 영상의 특성에 따라 달라집니다. 예를 들어, 2020년 북한 김정은 위원장의 가짜 영상은 사실상 토론 영상입니다. 이 경우, 딥페이크를 탐지하는 가장 효과적인 방법은 음성(입 모양)과 음성(목소리)을 분석하여 불일치를 찾아내는 것일 수 있습니다.

인간 전문가, 일반 관찰자, 알고리즘은 결과가 다르더라도 이러한 유형의 분석을 수행할 수 있습니다. 매사추세츠 공과 대학 (MIT) 가짜 영상을 식별하는 데 도움이 되는 8가지 질문:

  1. 얼굴에 주의하세요정교한 딥페이크 조작은 종종 얼굴 변형입니다.
  2. 볼과 이마에 주의하세요.피부가 너무 매끈해 보이거나, 너무 주름져 보이나요? 피부 나이가 머리카락이나 눈의 나이와 일치하나요? 두 피부의 치수가 일치하지 않을 수 있습니다.
  3. 눈과 눈썹에 주의하세요.그림자가 예상한 위치에 나타나나요? 딥페이크 기술은 장면의 자연스러운 물리 법칙을 완벽하게 표현하지 못할 수 있습니다.
  4. 안경에 주의하세요눈부심이 있나요? 눈부심이 심하나요? 사람이 움직일 때 눈부심의 각도가 변하나요? 다시 한번 말하지만, 딥페이크 기술은 조명의 자연스러운 물리 법칙을 완벽하게 표현하지 못할 수 있습니다.
  5. 얼굴 털 또는 그 없음이 수염이 진짜처럼 보이나요? 딥페이크 기술은 콧수염, 구레나룻, 턱수염을 더하거나 없앨 수 있습니다. 하지만 딥페이크 기술은 완전히 자연스러운 수염 변형을 만들어내지 못할 수 있습니다.
  6. 얼굴의 점에 주의하세요두더지가 실제처럼 보이나요?
  7. 속눈썹에 주의하세요그 사람이 눈을 깜빡이는 정도가 충분한가, 아니면 너무 많은가?
  8. 입술 움직임에 주의하세요일부 딥페이크 영상은 립싱크를 활용합니다. 입술 움직임이 자연스러워 보일까요?

최신 AI 딥페이크 감지 도구는 동일한 요소를 분석할 수 있지만, 성공률은 각기 다릅니다. 데이터 과학자들은 또한 화면 속 화자의 얼굴에서 자연스러운 혈류를 감지하는 등 새로운 방법을 끊임없이 개발하고 있습니다. 새로운 기술과 기존 방법의 개선을 통해 AI 딥페이크 감지 도구는 미래에 인간을 지속적으로 능가할 수 있을 것입니다.

딥페이크에서 오디오 단서 감지

가짜 오디오를 감지하는 것은 완전히 다른 문제입니다. 비디오의 시각적 단서와 시청각적 불일치를 식별하는 능력이 없기 때문에 딥페이크 감지는 오디오 분석에 크게 의존합니다(메타데이터 검증과 같은 다른 방법도 경우에 따라 도움이 될 수 있습니다).

에서 발표한 연구 유니버시티 칼리지 런던 2023년에 인간은 가짜 오디오를 73%의 정확도로 감지할 수 있었습니다(영어와 중국어 모두). 딥페이크 영상과 마찬가지로, 인간 청취자는 AI가 생성한 음성에서 부자연스러운 발화 패턴을 직관적으로 감지하는 경우가 많습니다. 비록 무엇이 부자연스럽게 들리는지 알아차리지 못하더라도 말입니다.

일반적인 징후는 다음과 같습니다.

  1. 동화
  2. 표현력이 부족함.
  3. 배경 소음이나 간섭.
  4. – 목소리나 말투의 불일치.
  5. 소리에 '충만함'이 부족함.
  6. 지나치게 글로 쓰여진 전달 방식.
  7. 결함 없음(잘못된 시작, 수정, 목 가다듬기 등).

다시 말해, 알고리즘은 동일한 딥페이크 신호에 대한 음성 분석도 가능하지만, 새로운 방법들이 이 도구들을 더욱 효과적으로 만듭니다. 연구 결과 유세닉스 AI 성도 재구성에서 자연스러운 발화를 모방하지 못하는 패턴. 이는 AI 기반 음성 생성기가 인간 발화의 자연스러운 움직임 없이 좁은 성도(대략 빨대 크기)를 모방하는 소리를 생성함을 시사합니다.

이전에 수행된 연구 호르스트 괴르츠 연구소 영어와 일본어의 실제 오디오와 가짜 오디오를 분석한 결과, 실제 음성과 가짜 음성의 고주파수에 미묘한 차이가 있다는 사실이 밝혀졌습니다.

성도와 고주파수 불일치는 인간 청취자와 AI 감지 모델 모두 인지할 수 있습니다. 고주파수 변화의 경우, AI 모델은 이론적으로 점점 더 정확해질 수 있습니다. 물론 AI 기반 딥페이크도 마찬가지입니다.

인간과 알고리즘은 딥페이크 기술에 속고 있지만, 그 방법은 서로 다릅니다.

연구에 따르면 인간과 최신 AI 탐지 도구 모두 딥페이크를 유사하게 식별할 수 있습니다. 성공률은 테스트 기준에 따라 50%에서 90%까지 다양합니다.

따라서 인간과 기계 모두 딥페이크에 비슷한 정도로 속아 넘어갑니다. 하지만 우리는 서로 다른 방식으로 취약하다는 점을 인지하는 것이 중요하며, 이것이 딥페이크 기술의 위험을 해결하는 데 있어 가장 큰 자산이 될 수 있습니다. 인간의 강점과 딥페이크 탐지 도구의 강점을 결합하면 각각의 약점을 완화하고 성공률을 높일 수 있습니다.

예를 들어, 나는 발견했다 MIT 연구 인간은 AI 모델보다 세계 지도자와 유명인의 가짜 이미지를 더 잘 인식했습니다. 또한 AI 모델이 여러 사람의 음성을 포착하는 데 어려움을 겪는 것으로 나타났는데, 이는 개별 음성이 포함된 영상으로 알고리즘을 훈련했기 때문일 수 있다고 분석했습니다.

반대로, 같은 연구에서는 AI 모델이 저화질 영상(흐릿함, 거칠음, 어두움 등)에서 인간보다 우수한 성능을 보이는 것으로 나타났는데, 이러한 영상은 인간 시청자를 속이는 데 의도적으로 사용될 수 있습니다. 마찬가지로, 얼굴 특정 부위의 혈류를 모니터링하는 것과 같은 최신 AI 감지 방법에는 인간이 수행할 수 없는 분석이 포함됩니다.

더 많은 방법이 개발됨에 따라, AI는 우리가 감지할 수 없는 신호를 감지하는 능력뿐만 아니라 속이는 능력도 향상될 것입니다. 가장 중요한 질문은 딥페이크 감지 기술이 딥페이크 기술 자체를 능가할 수 있을지 여부입니다. 확인해 보세요. 가상 납치 위험에 대처하고 온라인에서 자신을 보호하는 방법은 무엇일까요? 위협을 파악하세요..

일반적인 질문

Q1. 딥페이크 기술이란 무엇인가요?

딥페이크는 인공지능을 사용하여 높은 정확도로 인간이 제작한 것처럼 보이는 시각적 또는 청각적 콘텐츠를 만드는 기술입니다.

Q2. 딥페이크의 용도는 무엇인가요?

딥페이크 기술은 영화, 게임, 보안, 사기 등 광범위한 분야에 사용됩니다.

Q3. 딥페이크는 어떻게 감지할 수 있나요?

인공지능의 도움으로 딥페이크 감지 기술이 계속 발전하고 있지만, 여전히 인간이 사용하는 도구와 방법이 필요합니다.

Q4. 딥페이크 탐지에 있어 어떤 어려움이 있나요?

이러한 과제에는 가짜 기술이 끊임없이 개발되고, 진짜 콘텐츠와 딥페이크를 구별하는 것이 어렵다는 점이 있습니다.

Q5. AI가 딥페이크를 감지하는 데 인간을 능가할 수 있을까요?

인공지능은 상당한 진전을 이루고 있지만, 이 맥락에서 인간의 능력은 여전히 ​​중요합니다.

딥페이크 시대의 다른 시각

AI 기반 딥페이크 감지 도구는 앞으로도 계속 발전할 것이며, 딥페이크 콘텐츠 자체의 품질 또한 향상될 것입니다. AI의 속이는 능력이 감지 능력을 능가한다면 (AI 생성 텍스트의 경우처럼), 딥페이크 콘텐츠에 맞서기 위해 남은 유일한 도구는 인간의 판단일지도 모릅니다.

딥페이크의 징후를 파악하고 이를 식별하는 것은 우리 모두의 책임입니다. 사기와 보안 위협으로부터 자신을 보호하는 것 외에도, 우리가 온라인에서 논의하고 공유하는 모든 것은 현실을 제대로 파악하지 못하면 잘못된 정보에 노출될 위험이 있습니다. 지금 바로 확인해 보세요. 인공지능을 활용한 콘텐츠 작성의 위험성과 AI가 생성한 텍스트를 감지하는 방법.

맨 위로 이동 버튼