본문 바로가기 메인메뉴 바로가기

전자정부이 누리집은 대한민국 공식 전자정부 누리집입니다.

콘텐츠 영역

AI로 '디지털 성범죄' 탐지·분석·신고까지…"건당 1분 이내 처리"

SNS, 랜덤채팅앱 등에서 24시간 자동 수집·분석 후 자동 신고 및 삭제요청

말하기 속도

본문 듣기를 종료하였습니다.

글자크기 설정
목록

SNS와 랜덤채팅앱 등에 있는 아동·청소년 성착취물 및 유인정보를 인공지능(AI) 기술을 활용해 24시간 자동 수집·분석하고, 자동 신고 및 삭제요청까지 가능해진다. 

성평등가족부는 디지털성범죄 피해자 보호를 위해 삭제요청 자동화, AI 기반 아동·청소년 온라인 성착취 선제 대응, AI 기반 딥페이크 탐지 등 3대 핵심 기술 시스템을 도입한다고 1일 밝혔다. 

이를 통해 기존의 수동적이고 사후적인 피해자 보호의 한계를 보완하고, 디지털 성범죄 대응체계를 자동화·지능화해 대응 속도와 정확도를 대폭 높이는 등 피해자 중심의 신속·선제 대응 체계를 구축했다. 

특히 피해영상물 삭제요청 자동화를 통해 약 2만 개의 사이트에 대한 삭제요청부터 처리 이력 관리까지 전 과정을 자동화하고 건당 처리 시간을 1분 이내로 단축했다. 

서울 중구 한국여성인권진흥원에 설치된 디지털 성범죄 피해자 지원센터에서 관계자가 관련 내용이 담긴 배너를 살펴보고 있다. 2024.8.28 (ⓒ뉴스1, 무단 전재-재배포 금지)
서울 중구 한국여성인권진흥원에 설치된 디지털 성범죄 피해자 지원센터에서 관계자가 관련 내용이 담긴 배너를 살펴보고 있다. 2024.8.28 (ⓒ뉴스1, 무단 전재-재배포 금지)

'아동·청소년 온라인 성착취 선제적 대응 시스템'은 국내 최초로 '랜덤채팅앱'에 대한 데이터 자동 수집 기술을 탑재했다. 

이에 기존 중앙디지털성범죄피해자지원센터의 중앙 디성센터의 삭제지원시스템과 연계해 성인사이트에 대한 유포 현황 탐지와 자동 삭제요청이 가능해진다.

시스템에 적용된 AI 모델은 키워드 탐지, 이미지 내 텍스트 추출, 신체 노출도 판단, 아동·청소년 여부 추정, 유사 이미지 대조 등 다단계 분석을 거쳐 아동·청소년 성착취물 여부를 판단한다.

특히 중앙 디성센터의 삭제지원시스템을 미국 국립실종학대아동방지센터 및 글로벌 CDN 사업자 클라우드플레어와 API로 연계해 우회 접속 URL도 대량 자동 삭제요청이 가능해졌다. 

또한 구글 콘텐츠 삭제 양식과 전기통신사업법 신고 양식도 자동 작성·발송하도록 개선한 바, 종사자의 정신적 소진 예방을 위해 미국 NCMEC의 선진 사례를 참고한 촬영물 필터 기능도 도입했다.

삭제지원 자동화 기능 고도화 전후 비교
삭제지원 자동화 기능 고도화 전후 비교

아울러 AI 기반 딥페이크 탐지 솔루션 도입을 통해 육안으로 판별이 어려웠던 합성물을 정확히 식별할 수 있게 되어, 피해자의 불안을 해소하고 추가 삭제지원도 가능해졌다.

특히 선제적 삭제지원을 위한 온라인 모니터링 중 합성·편집물로 의심되는 영상물이 발견된 경우, 딥페이크 탐지 솔루션을 적용해 피해자가 인지하지 못한 합성물도 찾아내며 추가 유포를 사전에 차단할 수 있게 됐다.

한편 시스템 구축 이후 25일 동안의 시범운영 결과 종사자 1인당 일평균 수집 건수가 아동·청소년 성착취물은 2.7배 이상, 성착취 유인정보는 80배 이상으로 대폭 증가했다. 

이에 성평등가족부는 향후 시스템 본격 운영을 통해 아동·청소년 성착취물은 신속하게 선제적 삭제지원하고, 성착취 유인정보는 신고 및 전문 상담원이 개입하는 '온라인 아웃리치'를 병행해 맞춤형 통합지원을 강화할 방침이다. 

AI 딥페이크 판별 솔루션 도입 전후 비교
AI 딥페이크 판별 솔루션 도입 전후 비교

원민경 성평등가족부 장관은 "기술 발전에 따라 진화하는 디지털 성범죄에 맞서 더 강력하고 신속한 대응이 필요한 시점"이라며 "AI 기술을 현장에 본격 도입해 대응 속도와 정확도를 높이고 촘촘한 지원체계를 구축해 피해자의 신속한 일상 회복을 위해 앞장설 것"이라고 밝혔다.

AI 기반 아동·청소년 온라인성착취 선제 대응 시스템 (인포그래픽=성평등가족부)
AI 기반 아동·청소년 온라인성착취 선제 대응 시스템 (인포그래픽=성평등가족부)

문의 : 성평등가족부 안전인권정책관 디지털성범죄방지과(02-2100-6407)

공공누리 출처표시의 조건에 따라 자유이용이 가능합니다. (텍스트)
단, 사진, 이미지, 일러스트, 동영상 등의 일부 자료는 문화체육관광부가 저작권 전부를 보유하고 있지 아니하므로, 반드시 해당 저작권자의 허락을 받으셔야 합니다.
정책브리핑 공공누리 담당자 안내 닫기
기사 이용 시에는 출처를 반드시 표기해야 하며, 위반 시
저작권법 제37조
제37조(출처의 명시)
① 이 관에 따라 저작물을 이용하는 자는 그 출처를 명시하여야 한다. 다만, 제26조, 제29조부터 제32조까지,
제34조제35조의2의 경우에는 그러하지 아니하다. <개정 2011. 12. 2.>
② 출처의 명시는 저작물의 이용 상황에 따라 합리적이라고 인정되는 방법으로 하여야 하며, 저작자의 실명
또는 이명이 표시된 저작물인 경우에는 그 실명 또는 이명을 명시하여야 한다.
제138조
제138조(벌칙)
다음 각 호의 어느 하나에 해당하는 자는 500만원 이하의 벌금에 처한다. <개정 2011. 12. 2.>
1. 제35조제4항을 위반한 자
2. 제37조(제87조 및 제94조에 따라 준용되는 경우를 포함한다)를 위반하여 출처를 명시하지 아니한 자
3. 제58조제3항(제63조의2, 제88조 및 제96조에 따라 준용되는 경우를 포함한다)을 위반하여 저작재산권자의 표지를 하지 아니한 자
4. 제58조의2제2항(제63조의2, 제88조 및 제96조에 따라 준용되는 경우를 포함한다)을 위반하여 저작자에게 알리지 아니한 자
5. 제105조제1항에 따른 신고를 하지 아니하고 저작권대리중개업을 하거나, 제109조제2항에 따른 영업의 폐쇄명령을 받고 계속 그 영업을 한 자 [제목개정 2011. 12. 2.]
에 따라 처벌될 수 있습니다.
<자료출처=정책브리핑 www.korea.kr>

이전다음기사

다음다주택자 담보대출 연장 제한…가계부채 총량 증가율 1.5%로 강화

정책브리핑 게시물 운영원칙에 따라 다음과 같은 게시물은 삭제 또는 계정이 차단 될 수 있습니다.

  • 1. 타인의 메일주소, 전화번호, 주민등록번호 등의 개인정보 또는 해당 정보를 게재하는 경우
  • 2. 확인되지 않은 내용으로 타인의 명예를 훼손시키는 경우
  • 3. 공공질서 및 미풍양속에 위반되는 내용을 유포하거나 링크시키는 경우
  • 4. 욕설 및 비속어의 사용 및 특정 인종, 성별, 지역 또는 특정한 정치적 견해를 비하하는 용어를 게시하는 경우
  • 5. 불법복제, 바이러스, 해킹 등을 조장하는 내용인 경우
  • 6. 영리를 목적으로 하는 광고 또는 특정 개인(단체)의 홍보성 글인 경우
  • 7. 타인의 저작물(기사, 사진 등 링크)을 무단으로 게시하여 저작권 침해에 해당하는 글
  • 8. 범죄와 관련있거나 범죄를 유도하는 행위 및 관련 내용을 게시한 경우
  • 9. 공인이나 특정이슈와 관련된 당사자 및 당사자의 주변인, 지인 등을 가장 또는 사칭하여 글을 게시하는 경우
  • 10. 해당 기사나 게시글의 내용과 관련없는 특정 의견, 주장, 정보 등을 게시하는 경우
  • 11. 동일한 제목, 내용의 글 또는 일부분만 변경해서 글을 반복 게재하는 경우
  • 12. 기타 관계법령에 위배된다고 판단되는 경우
  • 13. 수사기관 등의 공식적인 요청이 있는 경우

히단 배너 영역

정책 NOW, MY 맞춤뉴스

정책 NOW

정부정책 사실은 이렇습니다

실시간 인기뉴스 04.01. 18:50 기준

  1. 한-인니 '특별 포괄적 전략 동반자 관계' 수립…MOU 16건 체결 단계상승 1
  2. 원유 자원안보 위기경보, 2일부로 '경계' 격상…수급관리 강화 단계하락 1
  3. 한·인도네시아 '글로벌 AI 기본사회 연대체' 발표 NEW
  4. 이 대통령 "한-인니, 에너지 안정적 공급·자원안보 협력 확대 필요" 단계상승 1
  5. 한·인니, 자원·첨단산업 협력 고도화 관련 MOU 2건 체결 단계하락 2
  6. 한·인니 정상회담 계기 '지식재산 보호·집행 협력' MOU 체결 순위동일

인기, 최신, 오늘의 영상 , 오늘의 사진

오늘의 멀티미디어

정책포커스