판정 기준
이 서비스가 판정을 정하는 방법을 모두 공개합니다. 아래 규칙은 프로그램 코드로 고정돼 있어 AI가 바꿀 수 없습니다.
판정 6단계
- 사실
- 주요 사실관계가 정확하고 중요한 오류나 누락이 없습니다.
- 대체로 사실
- 전반적으로 맞지만 일부 세부 내용에 맥락 누락이나 경미한 오류가 있습니다.
- 절반의 사실
- 일부 사실에 기반하지만 중요한 정보가 빠졌거나 오해를 부를 수 있습니다.
- 대체로 사실 아님
- 핵심이 사실과 다르거나 왜곡됐으나 일부 요소는 사실입니다.
- 사실 아님
- 핵심이 사실과 명확히 다릅니다.
- 판단 유보
- 확인할 수 있는 근거가 부족하거나, 아래 규칙을 통과하지 못해 판단하지 않습니다.
검증 순서
- 주장 분석 — AI가 주장이 검증할 수 있을 만큼 구체적인지 확인하고, 검색어를 정리합니다. 기간·기준 등이 빠졌으면 검증할 수 있는 문장 후보를 제안하고, 사용자가 고릅니다.
- 근거 찾기 (동시에 진행)
- 수치·통계 주장이면 통계청 KOSIS에서 원 통계표의 수치를 직접 받아 옵니다(1차 자료).
- 정부·공공·통계 사이트 → 언론사·백과사전 순으로 검색하고, 부족하면 범위를 넓힙니다.
- 다른 팩트체크 기관이 이미 검증했는지 Google Fact Check Tools에서 찾습니다(참고용).
- 근거 정리 — 근거의 발행일을 확인하고(검색 결과 → 원문 페이지 정보 → 주소에 적힌 날짜 순), 같은 기사의 다른 주소(모바일·AMP)는 하나로 합칩니다. 날짜를 어디서 읽었는지도 함께 표시합니다.
- 사전 점검 — 아래 사전 점검 규칙에 걸리면 AI에게 묻지 않고 판단을 유보합니다.
- AI 판정 초안 — AI는 찾은 근거만 보고 판정 초안과 이유를 씁니다. 문장마다 근거 원문을 인용해야 합니다.
- 고정 규칙 검사 — 프로그램이 초안을 아래 규칙으로 검사해 판정을 정합니다.
- 사람 검토 — 기자 모드에서 사람이 근거를 확인하고 최종 판정을 확정합니다. 이유는 공개되고, 이전 판정은 지우지 않고 이력으로 남습니다.
출처 분류
사이트 주소(도메인)로 분류합니다. 신뢰 출처만 판정에 필요한 출처 수로 셉니다.
- 통계 (1차 자료) 신뢰 출처
통계청 KOSIS 원 통계표, 한국은행, OECD 등. KOSIS에서 받은 수치는 '1차 자료'로 따로 표시합니다.
- 정부·공공기관 신뢰 출처
정부 부처, 지자체, 공공·연구기관(go.kr, re.kr 등), 국제기구.
- 언론사 신뢰 출처
국내 종합·지역·전문 언론과 주요 해외 언론·통신사.
- 백과사전 신뢰 출처
위키백과, 브리태니커, 한국민족문화대백과 등.
- 기타(미분류) 보조
위 목록에 없는 사이트. 판정에 필요한 신뢰 출처 수에 넣지 않습니다.
- 보조 자료(교육·시험) 보조
시험지·문제지·교재처럼 사실 확인의 근거로는 약한 자료. 공공기관 사이트에 있어도 보조로만 씁니다.
- 블로그·커뮤니티 보조
블로그, 카페, 커뮤니티, SNS, 나무위키 등.
판정 규칙
사전 점검 (AI에게 묻기 전)
- 근거가 1건 이상 있음 (사전 점검)
검색해도 근거가 하나도 없으면 AI에게 묻지 않고 바로 '판단 유보'합니다.
- 신뢰 출처가 1건 이상 있음 (사전 점검)
찾은 근거가 모두 블로그·커뮤니티, 보조 자료, 미분류 출처뿐이면 AI에게 묻지 않고 바로 '판단 유보'합니다.
AI 초안 검사
- AI 초안 수신
AI가 답하지 않았거나 정해진 형식으로 답하지 않으면 '판단 유보'합니다.
- 판정 등급이 6단계 중 하나
AI가 6단계 밖의 등급을 쓰면 '판단 유보'로 바꿉니다.
- 문장마다 근거 원문 인용이 확인됨
AI는 판정 이유를 문장마다 근거 번호와 원문 인용으로 뒷받침해야 합니다. 프로그램이 인용 구절을 근거 원문과 글자 단위로 대조하고(띄어쓰기 차이는 무시), 확인되지 않는 문장은 결과에서 뺍니다. 뺀 문장도 기자 모드에서 공개합니다.
- 판정에 쓰인 근거가 있음
AI는 문장마다 주장을 '뒷받침'하는지, '반박'하는지, 판단에 쓰지 않는 '참고'(관련 없음·배경)인지 표시합니다. 뒷받침·반박 문장 중 인용이 확인된 것이 하나도 없으면 '판단 유보'합니다. '참고' 문장의 근거는 아래 출처 수 규칙에서도 세지 않습니다.
- 신뢰 출처 포함
인용이 확인된 근거 중에 신뢰 출처(통계, 정부·공공기관, 언론사, 백과사전)가 없으면 '판단 유보'합니다.
- 서로 다른 신뢰 출처 2곳 이상 (1차 공식 자료는 예외)
서로 다른 사이트의 신뢰 출처 2곳 이상으로 교차 확인해야 판정합니다. 같은 사이트의 여러 문서, 같은 기사의 모바일·AMP 주소는 한 곳으로 셉니다. 단, 통계·정부 1차 자료는 한 곳이어도 판정할 수 있습니다.
AI 교차 검증
- AI 교차 검증 (3개 중 2개 이상 일치)
같은 근거를 Claude(Anthropic)·GPT(OpenAI)·Gemini(Google)가 서로의 답을 보지 않고 각자 판정합니다. 각 판정에 위 규칙을 따로 적용한 뒤, 3개 중 2개 이상이 같으면 그 판정을 쓰고 다른 1개는 ‘다른 의견’으로 공개합니다. 의견이 모두 다르거나 2개만 답했는데 서로 다르면 판단을 유보하고 기자가 확인합니다. 1개만 답했으면 그 판정을 쓰되 ‘교차 검증 못 함’으로 표시합니다. 이미지·영상·음성의 AI 잠정 판정에도 (라벨, 등급)을 기준으로 같은 규칙을 적용합니다.
규칙을 하나라도 통과하지 못하면 AI 초안과 관계없이 ‘판단 유보’가 됩니다. 결과 화면의 ‘적용한 판정 규칙’에 통과 여부가 모두 나옵니다.
이미지 검증 기준
- AI 잠정 판정 → 사람 확정. AI가 모은 단서(원본 정보, 이미지 속 글자, 역이미지 검색 결과 등)만 보고 이미지 라벨(조작됨 / 맥락 누락 / 해당 없음)과 이용자 설명(주장)에 대한 6단계 판정을 먼저 냅니다. 이 판정은 ‘AI 잠정 판정 · 사람 확인 전’으로 구분해 표시하고, 기자가 단서를 확인해 확정하거나 고칩니다. AI 잠정 판정은 이력에 남습니다.
- AI 판단 문장도 단서 원문 인용을 글자 단위로 대조해, 확인되지 않는 문장은 뺍니다. AI 잠정 판정에는 아래 고정 규칙을 적용합니다.
- AI 조언 문장의 단서 인용이 확인됨
뒷받침·반박 문장 가운데 인용이 확인된 것이 없으면 ‘판단 불가 / 판단 유보’로 둡니다.
- AI 생성 신호만으로 판정하지 않음
근거가 C2PA·워터마크 같은 AI 생성 신호뿐이면 ‘판단 불가’로 둡니다. 어떤 판별 도구도 100% 확실하지 않습니다.
- ‘조작됨’은 서로 다른 단서 두 종류 이상
원본 정보, 역이미지 검색, 이미지 속 글자·장면, 유튜브 정보, 받아쓰기, AI 생성 신호 가운데 두 종류 이상이 뒷받침할 때만 ‘조작됨’을 붙입니다. 한 종류뿐이면 ‘판단 불가’로 낮춥니다.
- AI 조언 문장의 단서 인용이 확인됨
- 검증 순서(강의 기준): 원본 정보(EXIF·C2PA) → 역이미지 검색(가장 먼저 올라온 곳 찾기) → 지오로케이션(지도 → 스트리트뷰) → 과거 모습(구글 어스). 추측만으로 결론 내리지 않고 여러 단서를 비교합니다.
- AI 생성 여부는 판정하지 않습니다. ‘워터마크 확인됨 / AI 신호 있음 / 신호 없음 / 판단 불가’ 신호만 보여 주며, 신호가 없다고 진짜라는 뜻은 아닙니다.
- 역이미지 자동 검색(Google Vision)은 매달 무료 한도 안에서만 씁니다. 한도에 닿으면 자동 검색을 멈추고, 엔진 버튼으로 직접 검색하도록 안내합니다. 다음 달 1일에 다시 열립니다.
- 보관: 올린 이미지는 30일 뒤 자동으로 지웁니다. 파일 해시(SHA-256)와 검증 기록은 남습니다. 화면에는 위치 정보(GPS) 등 메타데이터를 지운 축소본만 보여 주고, GPS는 기자 모드에서만 표시합니다.
- 외부 전송: 역이미지 검색과 AI 분석을 위해 메타데이터를 지운 축소본을 Google(Vision)과 Anthropic(Claude)에 보냅니다. 올린 파일을 다른 검색 엔진에 자동으로 보내지는 않습니다.
영상 검증 기준
- 영상도 이미지와 같이 AI가 잠정 판정을 먼저 내고, 사람이 확정합니다. 같은 고정 규칙을 적용합니다.
- 장면 사진(키프레임): 장면이 바뀌는 지점을 중심으로 최대 8장을 뽑고, 그중 3장만 자동으로 역이미지 검색합니다(월 무료 한도 보호). 나머지는 내려받아 엔진에서 직접 검색할 수 있습니다.
- 원본 정보: 촬영 일시, 기기, 인코더, GPS(기자 모드에서만), C2PA를 읽습니다. 메타데이터는 쉽게 바꿀 수 있어 다른 단서와 함께 봅니다.
- AI 생성 신호: C2PA와 OpenAI 출처 확인(첫 장면·소리 앞 60초)을 자동으로 확인합니다. OpenAI가 만든 콘텐츠만 확인할 수 있어, 신호가 없다고 진짜라는 뜻은 아닙니다. InVID·WeVerify, Hive 데모는 링크로 둡니다.
- 유튜브 링크: 영상을 내려받지 않습니다(유튜브 약관). 공개 썸네일로 역이미지 검색을 하고, YouTube Data API로 업로드 시각·채널 개설일·먼저 올라온 비슷한 영상을 보여 줍니다. 업로드 시각은 그 채널에 올라온 시각일 뿐 촬영 시점이 아닙니다. 하루 할당량을 서버가 세어 한도 전에 멈춥니다.
- 발언 받아쓰기(선택): 이 서버 컴퓨터의 Whisper로 영상 속 말을 글로 바꾸고, 검증할 주장을 뽑아 텍스트 검증으로 넘길 수 있게 합니다. 자동 변환이라 틀릴 수 있습니다.
- 보관: 영상 원본은 분석이 끝나면 바로 지웁니다. 영상 해시, 장면 사진, 받아쓰기만 30일 보관합니다.
음성 검증 기준
- 음성도 AI가 잠정 판정을 먼저 내고, 사람이 확정합니다. 같은 고정 규칙을 적용합니다. 목소리만으로 누가 말했는지 추정하지 않습니다.
- 받아쓰기: 이 서버 컴퓨터의 Whisper로 항상 받아쓰고, 구간 시각을 함께 보여 줍니다. 자동 변환이라 틀릴 수 있어 원음과 대조할 수 있게 음성을 30일 보관합니다. 뽑은 주장은 텍스트 검증으로 넘길 수 있습니다.
- 원본 정보: 길이, 코덱, 녹음 앱·기기, 편집·변환 프로그램 흔적(예: Audacity, ffmpeg)을 읽습니다. 메신저를 거치면 대부분 지워지므로 없다고 조작됐다는 뜻은 아닙니다.
- AI 생성 신호: Meta AudioSeal 워터마크와 OpenAI 출처 확인(60초씩 최대 3구간)을 자동으로 확인합니다. 각 회사가 만든 음성만 확인할 수 있어, 신호가 없다고 진짜라는 뜻은 아닙니다. ElevenLabs 판별기와 Hive 데모는 링크로 둡니다.
- 발언 확인 체크리스트(기자 모드): 누가 말했나, 처음 나온 곳, 앞뒤 맥락, 편집 흔적, 원본 확보, 당사자 확인을 기록합니다. 화자 자동 구분은 하지 않습니다.
- 보관: 음성 원본은 30일 보관 후 자동으로 지웁니다. 해시와 받아쓰기·검증 기록은 남습니다.
AI가 하는 일과 하지 않는 일
- 하는 일: 주장 분석과 검색어 정리, 찾은 근거를 읽고 판정 초안과 이유 쓰기.
- 하지 않는 일: 최종 판정 결정, 규칙 변경, 근거에 없는 내용 보충.
- AI에게 보낸 지시문 전문과 AI의 응답 원문, 사용한 모델, 요청 번호를 모두 기록합니다. 기자 모드에서 보거나 리포트로 내려받을 수 있습니다.
- AI가 만든 이미지·영상인지 여부는 판정하지 않습니다. ‘신호’로만 표시합니다. 이미지는 AI가 조언만 하고 판정은 사람이 합니다.
다른 기관의 판정과 외부 검색
- 다른 팩트체크 기관의 판정은 참고로만 보여 주며 우리 판정에 반영하지 않습니다. 검색어가 비슷한 다른 주장일 수 있으니 같은 주장인지 직접 확인하세요.
- 네이버 뉴스는 검색 결과를 AI에 넣거나 저장하는 것이 약관상 금지돼 있어 자동으로 가져오지 않습니다. 대신 결과 화면에 ‘네이버 뉴스에서 직접 찾아보기’ 버튼을 둡니다.
검증 기록과 정정
- 검증마다 사용한 도구, 시각, 입력, 출력, 근거 내용의 해시(SHA-256)를 순서대로 저장합니다. 누구든 같은 자료로 과정을 따라가 볼 수 있습니다.
- 판정을 바꾸면 이전 판정과 바꾼 이유를 함께 남깁니다.
- 판정에 쓴 근거 페이지와 이미지·영상의 역이미지 검색에서 가장 이른 페이지는 인터넷 아카이브(Wayback Machine)에 보관하고, 출처 목록에 ‘보관본’ 링크를 붙입니다. 원 기사가 지워지거나 고쳐져도 당시 모습을 확인할 수 있습니다. 일부 사이트는 보관을 막아 실패할 수 있으며, 실패 이유도 기록에 남깁니다.
- 누구나 볼 수 있는 기록에서는 위치 정보(GPS 등)를 가립니다. 판정 확정·정정·이의 처리는 기자 비밀번호가 있어야 할 수 있습니다.
정정·이의제기 정책
- 이의제기: 결과 화면마다 ‘이의 제기하기’로 누구나 낼 수 있습니다. 이유와 근거 링크는 공개되고, 연락처(이메일)는 선택이며 공개하지 않고 처리가 끝나고 30일 뒤 지웁니다. 같은 접속지에서는 하루 5건까지 받습니다.
- 처리: 기자가 ‘검토 중 → 반영 / 기각’으로 처리하고, 반영·기각 이유를 결과 화면에 공개합니다.
- 정정: 사람이 확정한 판정이 바뀌면 정정으로 기록합니다. 결과 화면 맨 위에 정정 날짜·이전 판정·새 판정·이유를 표시하고, 정정 기록 페이지에 날짜순으로 모두 공개합니다. 이전 판정은 지우지 않습니다.
- 속보: 퍼지고 있는 주장은 ‘확인 중’으로 먼저 공개하고, 확인된 내용만 시각을 붙여 쌓습니다. 상태를 바꾼 기록도 모두 남깁니다.