주요 메뉴 바로가기 (상단) 본문 컨텐츠 바로가기 주요 메뉴 바로가기 (하단)

[르포] “가위로 종이 자르는지, 위협하는지”… AI가 유해 콘텐츠 판단하는 틱톡

조선비즈 조회수  

지난 11일(현지시각) 싱가포르 도심에 위치한 틱톡 ‘투명성과 책임 센터(TAC)’. TAC 관계자가 모니터와 연결된 카메라 앞에 나이프를 하늘을 향해 들고 서자, 모니터 속 ‘위험 도구 지수’가 72%로 치솟았다. 이 지수는 나이프를 들고 스테이크를 써는 시늉을 할 때는 한 자릿수에 불과했다. 인공지능(AI)이 사람의 동작과 배경을 포함한 ‘맥락’을 파악하고 나이프가 등장하는 동영상의 유해성 여부를 판단한 것이다.

싱가포르 틱톡 ‘투명성과 책임 센터(TAC)’ 내에 마련된 영상 기기. 모니터에 부착된 카메라에 칼을 갖다 대면 인공지능(AI)이 위험 지수를 판단한다./틱톡 제공
싱가포르 틱톡 ‘투명성과 책임 센터(TAC)’ 내에 마련된 영상 기기. 모니터에 부착된 카메라에 칼을 갖다 대면 인공지능(AI)이 위험 지수를 판단한다./틱톡 제공

◇ AI로 유해 콘텐츠 걸러내고 2차 검증

이날 TAC에서는 틱톡이 AI를 활용해 어떻게 유해 콘텐츠를 판별하고 조치하는지 확인할 수 있었다. TAC는 틱톡 콘텐츠가 어떤 심사 단계를 거쳐 사용자들에게 조회되는지 직접 체험할 수 있는 공간이다. 싱가포르 TAC는 틱톡이 미국 로스앤젤레스(LA), 아일랜드 더블린에 이어 지난해 10월 세 번째로 마련한 곳으로, 아시아 지역을 관장하고 있다. 틱톡은 최근 미국 워싱턴DC에도 TAC를 개설했다.

틱톡은 1차적으로 AI를 통해 ▲위험 도구 ▲음주 ▲극단주의 ▲흡연 등 여러 영역에서 유해성을 판별한다. 가위를 자르던 종이는 AI가 안전하다고 판단하지만, 가위를 치켜들고 위협적인 자세를 취하는 행동은 유해 콘텐츠로 판단하는 식이다. 실제 극단주의 무장 단체인 IS의 깃발을 카메라에 비추면 극단주의 지수가, 하이네켄 맥주병을 갖다 대면 음주 지수가 올라갔다.

TAC 관계자는 “틱톡의 ‘커뮤니티 가이드라인’을 학습한 AI가 1000개 이상의 영역에서 텍스트, 비디오, 이미지 등을 다각도로 검토해 유해 콘텐츠를 판별한다”면서 “커뮤니티 가이드라인을 위반한 콘텐츠가 전 세계적으로 매일 200만개 삭제되고, 한국과 같은 일부 국가에서는 유해 콘텐츠의 90% 이상이 사람들이 조회하기 전 AI를 통해 삭제된다”고 설명했다.

틱톡 싱가포르 투명성 및 책임 센터(TAC)에서 관계자가 틱톡의 유해 콘텐츠 선별 과정을 설명하고 있다./싱가포르=김송이 기자
틱톡 싱가포르 투명성 및 책임 센터(TAC)에서 관계자가 틱톡의 유해 콘텐츠 선별 과정을 설명하고 있다./싱가포르=김송이 기자

AI가 걸러내지 못한 콘텐츠는 ‘글로벌 신뢰안전팀’이라고 불리는 콘텐츠 심사 인력을 통해 재차 검증된다. 틱톡은 전 세계적으로 4만여명의 콘텐츠 전문 심사 인력을 고용, 자사 커뮤니티 가이드라인을 기준으로 유해 콘텐츠에 대해 삭제나 계정 정지, 알고리즘 배제 같은 조치를 내린다. 가이드라인은 ▲안전 및 시민 의식 ▲정신 및 행동 건강 ▲민감한 성인 테마 ▲진실성 및 진정성 ▲규제 대상 물품 및 상업 활동 ▲개인 정보 보호 및 보안 등 6가지 주제로 구성돼 있다.

◇ AI가 콘텐츠 추천, 생성형 AI 콘텐츠엔 ‘라벨링’

이날 TAC에서 커뮤니티 가이드라인을 보면서 영상 삭제 여부를 판단하는 작업을 직접 해봤다. 모니터에는 초등학생처럼 보이는 여자가 고양이와 함께 있는 영상이 나왔다. 얼핏 보기에는 아이가 고양이와 노는 것처럼 보였지만, 아이는 담배로 추정되는 물건을 빠르게 입에 물었다가 내렸다. 해당 영상 옆에는 틱톡의 커뮤니티 가이드라인 중 안전과 건강, 위험한 활동, 음주·흡연·마약 등 어떤 항목에 위배되는지 판단하도록 하는 선택지가 나타났다.

틱톡에 따르면 삭제되는 유해 콘텐츠의 약 65%는 AI가 적발한 것이고, 나머지 35%는 전문 심사 인력을 통해 삭제된다. TAC 관계자는 “국가마다 기준이 다른 ‘문화·관습을 거스르는 콘텐츠’의 경우엔 해당 국가에 전문지식이 있는 전문가가 심사하고 있다”고 했다. 틱톡은 지난해 4분기에만 1억7646만여건의 영상을 유해 콘텐츠로 판명해 삭제했다. 전년(8568만여 건) 대비 2배 가까이 늘어난 수준이다.

외부 생성형 AI를 활용한 콘텐츠에 대해 틱톡이 표시(라벨링)하는 방식./틱톡 제공
외부 생성형 AI를 활용한 콘텐츠에 대해 틱톡이 표시(라벨링)하는 방식./틱톡 제공

틱톡을 ‘숏폼(1분 내외의 동영상)’ 강자로 만든 맞춤형 피드에도 AI가 적용됐다. 틱톡 애플리케이션(앱)을 실행하면 8개 묶음의 영상으로 구성된 추천 피드가 표시되는데, AI가 좋아요 클릭, 영상 공유, 시청 시간 등 이용자의 데이터를 분석해 관심 가질 만한 영상으로 피드를 채운다. 틱톡은 이용자의 콘텐츠 편향을 방지하기 위해 이용자의 취향에 맞는 콘텐츠와 그렇지 않은 콘텐츠의 비율을 6대4로 맞춘다고 설명했다.

최근 AI를 활용한 딥페이크(가짜 동영상)가 콘텐츠 플랫폼의 골칫거리로 떠오르자 틱톡도 적극 대응에 나섰다. 틱톡 앱에 있는 생성형 AI 도구로 콘텐츠를 만들면 자동으로 AI가 만들었다는 표시(라벨링)가 되도록 하고 있다. 지난 5월부터는 외부 생성형 AI로 만든 콘텐츠에 대한 라벨링도 시작했다. 틱톡 관계자는 “콘텐츠 출처 및 진위 확인을 위한 연합(C2PA)과의 협력을 통해 외부 생성형 AI로 만든 콘텐츠에 포함된 메타데이터를 앱 내에서 감지하고 자동으로 라벨링하고 있다”고 말했다.

조선비즈
content@www.newsbell.co.kr

댓글0

300

댓글0

[차·테크] 랭킹 뉴스

  • '포켓몬 고' 지스타 2024, 세대 넘나드는 열기 속으로 고!
  • [박상진의 e스토리] 월즈 5회 우승 -아시안게임 금메달에도... "다시 한 번 국가대표를 하고 싶다"는 페이커
  • [지스타]라이온하트, "콘솔부터 서브컬쳐까지 다각화로 '오딘' 성공 이어간다"
  • 미국 뉴스위크 2025년 가장 기대되는 신차로 지프 왜고니어 S 선정
  • 지스타 2024 야외부스, AI 음성 대결부터 발판 미션까지 이색 체험으로 열기 가득
  • 국산차 무덤이라는데 “도전장 내밀었다”… 2천만 원대 전기차로 공략 나선 현대차

[차·테크] 공감 뉴스

  • [월간자동차] 24년 10월, 신차 등록 두 달 연속 증가…싼타페 판매 1위
  • 해커는 '블프' 특수를 노린다···해외직구 쇼핑 시 지켜야 할 보안 수칙은?
  • “팰리세이드 자리 위협하나”…해외서 인기몰이 중인 기아 신차, 아빠들 ‘시선 집중’
  • KAIST 사족보행 로봇 '라이보2', 마라톤 풀코스 도전한다
  • GD가 탔던 바로 그 車 “또다시 결함 발견”.. 1년 만에 벌써 6번째 리콜
  • [인터뷰] ‘초보 감독의 첫 시즌이 끝났다’ - 팀04 정의철 감독

당신을 위한 인기글

  • ‘여기’에 먹으면 더 맛있는, 뚝배기 맛집 BEST5
  • 쫄깃쫄깃, 탱글탱글! 입안에서 춤추는 주꾸미 맛집 BEST5
  • 각각의 재료의 맛이 조화롭게 이루어지는 비빔밥 맛집 BEST5
  • 때로는 담백하게, 때로는 매콤하게! 취향저격하는 족발 맛집 BEST5
  • ‘오징어 게임2’를 세계에서 가장 먼저 볼 수 있는 나라는?
  • 주말 극장서 뭘 볼까? 로마 냄새 ‘글래디에이터’ VS 부성애 오컬트 ‘사흘’
  • 류덕환·김동영·안재홍 ‘위대한 소원’, 베트남서 리메이크
  • 44분에 관람료 4000원..영화 ‘4분 44초’, 4만4000명 관객 돌파
//php echo do_shortcode('[yarpp]'); ?>

함께 보면 좋은 뉴스

  • 1
    지금 가장 핫한 스카프 활용법

    연예 

  • 2
    홍명보호 '슈퍼서브'로 환하게 빛난 '스토크의 왕' 배준호[심재희의 골라인]

    스포츠 

  • 3
    명태균 구속에…공천개입 의혹 등 ‘판도라 상자’ 열리나

    뉴스 

  • 4
    “한국을 위해 뛰고 싶다”… 대표팀 은퇴 고민했던 손흥민, 엄청난 대기록 세웠다

    스포츠 

  • 5
    손흥민 50호골 터뜨린 한국, 쿠웨이트 완파하고 월드컵 예선 4연승

    연예 

[차·테크] 인기 뉴스

  • '포켓몬 고' 지스타 2024, 세대 넘나드는 열기 속으로 고!
  • [박상진의 e스토리] 월즈 5회 우승 -아시안게임 금메달에도... "다시 한 번 국가대표를 하고 싶다"는 페이커
  • [지스타]라이온하트, "콘솔부터 서브컬쳐까지 다각화로 '오딘' 성공 이어간다"
  • 미국 뉴스위크 2025년 가장 기대되는 신차로 지프 왜고니어 S 선정
  • 지스타 2024 야외부스, AI 음성 대결부터 발판 미션까지 이색 체험으로 열기 가득
  • 국산차 무덤이라는데 “도전장 내밀었다”… 2천만 원대 전기차로 공략 나선 현대차

지금 뜨는 뉴스

  • 1
    최승용, 일본전 선발 출격...프리미어12 운명의 한 판

    연예&nbsp

  • 2
    초전박살! 대만전과 완전 달랐다…2회 6실점→2회 6득점! 쿠바 완파하고 기사회생한 류중일호

    스포츠&nbsp

  • 3
    3연패 후 2연승! 중국, 바레인 원정에서 1-0 승리→C조 4위로 점프[WC예선]

    스포츠&nbsp

  • 4
    “(채)은성 선배님처럼 멋지고 예의 바른 선배가 돼야겠다” 마법사 23세 파이어볼러는 마지막까지 한화에 ‘애정 뚝뚝’

    스포츠&nbsp

  • 5
    쿠바 감독 "김도영, 타격 기술·힘 갖춰…앞으로 잘될 것"

    스포츠&nbsp

[차·테크] 추천 뉴스

  • [월간자동차] 24년 10월, 신차 등록 두 달 연속 증가…싼타페 판매 1위
  • 해커는 '블프' 특수를 노린다···해외직구 쇼핑 시 지켜야 할 보안 수칙은?
  • “팰리세이드 자리 위협하나”…해외서 인기몰이 중인 기아 신차, 아빠들 ‘시선 집중’
  • KAIST 사족보행 로봇 '라이보2', 마라톤 풀코스 도전한다
  • GD가 탔던 바로 그 車 “또다시 결함 발견”.. 1년 만에 벌써 6번째 리콜
  • [인터뷰] ‘초보 감독의 첫 시즌이 끝났다’ - 팀04 정의철 감독

당신을 위한 인기글

  • ‘여기’에 먹으면 더 맛있는, 뚝배기 맛집 BEST5
  • 쫄깃쫄깃, 탱글탱글! 입안에서 춤추는 주꾸미 맛집 BEST5
  • 각각의 재료의 맛이 조화롭게 이루어지는 비빔밥 맛집 BEST5
  • 때로는 담백하게, 때로는 매콤하게! 취향저격하는 족발 맛집 BEST5
  • ‘오징어 게임2’를 세계에서 가장 먼저 볼 수 있는 나라는?
  • 주말 극장서 뭘 볼까? 로마 냄새 ‘글래디에이터’ VS 부성애 오컬트 ‘사흘’
  • 류덕환·김동영·안재홍 ‘위대한 소원’, 베트남서 리메이크
  • 44분에 관람료 4000원..영화 ‘4분 44초’, 4만4000명 관객 돌파

추천 뉴스

  • 1
    지금 가장 핫한 스카프 활용법

    연예 

  • 2
    홍명보호 '슈퍼서브'로 환하게 빛난 '스토크의 왕' 배준호[심재희의 골라인]

    스포츠 

  • 3
    명태균 구속에…공천개입 의혹 등 ‘판도라 상자’ 열리나

    뉴스 

  • 4
    “한국을 위해 뛰고 싶다”… 대표팀 은퇴 고민했던 손흥민, 엄청난 대기록 세웠다

    스포츠 

  • 5
    손흥민 50호골 터뜨린 한국, 쿠웨이트 완파하고 월드컵 예선 4연승

    연예 

지금 뜨는 뉴스

  • 1
    최승용, 일본전 선발 출격...프리미어12 운명의 한 판

    연예 

  • 2
    초전박살! 대만전과 완전 달랐다…2회 6실점→2회 6득점! 쿠바 완파하고 기사회생한 류중일호

    스포츠 

  • 3
    3연패 후 2연승! 중국, 바레인 원정에서 1-0 승리→C조 4위로 점프[WC예선]

    스포츠 

  • 4
    “(채)은성 선배님처럼 멋지고 예의 바른 선배가 돼야겠다” 마법사 23세 파이어볼러는 마지막까지 한화에 ‘애정 뚝뚝’

    스포츠 

  • 5
    쿠바 감독 "김도영, 타격 기술·힘 갖춰…앞으로 잘될 것"

    스포츠