AI가 만든 자료, 반려당하는 보고서!

AI로 만든 보고서가 반려됐어요. 그런데 표에 적힌 숫자는 틀린 게 아니었어요.

결론부터 말씀드릴게요. AI가 낸 숫자가 회사 값과 어긋나는 가장 흔한 원인은 환각이 아니라 정의 불일치예요. AI는 거짓말을 한 게 아니라, 우리 회사가 그 단어를 어떻게 계산하는지 몰랐던 거예요.

이 글에서는 그 반려가 어떻게 벌어지는지 사건 하나로 따라가 보고, 오늘 바로 쓸 수 있는 처방 세 가지를 정리했어요.

이 글의 인물·회사·일정·매출 수치는 이해를 돕기 위한 가상 사례이며, 일반 제도 설명은 실제 기준에 따라요.

“이 숫자, 어디서 나온 거죠?” — 오전 9시 40분에 돌아온 한 줄

박세라 씨는 생활용품 제조사 마케팅팀 대리예요. 어젯밤 AI로 「상반기 채널별 매출 리뷰」를 만들어 팀장에게 올렸어요.

오전 9시 40분, 문서가 되돌아와요. 코멘트는 딱 한 줄이에요.

“이 숫자, 어디서 나온 거죠?”

오늘 15시 본부장 주간회의 안건이에요. 마감까지 5시간 20분 남았어요.

표를 다시 열어봐요. 사내 정산 시스템 값과 미묘하게 어긋나요. 크게 틀린 것도 아니고, 맞는 것도 아니에요. 더 곤란한 건 세라 씨 본인도 그 숫자가 어디서 왔는지 되짚지 못한다는 것이에요.

세 번 다시 만들었지만 숫자는 매번 조금씩 달랐습니다

세라 씨가 한 시도는 셋이에요.

1. “정확하게, 출처 포함해서 써줘”→ 그럴듯한 출처 문구만 늘어났어요.
2. “지어내지 마”→ 결과는 같았어요.
3. 처음부터 재생성→ 숫자가 또 조금 달라졌어요.

결국 재작성에 3시간 20분이 들어갔고, 안건은 다음 주로 밀렸어요.

그런데 진짜 비싼 건 시간이 아니었어요. 그 뒤로 팀장은 세라 씨의 자료를 받을 때마다 “원본 어디예요?”를 먼저 물어요. 한 번의 반려가 습관 하나를 남긴 거예요.

“정확하게 써줘”가 통하지 않는 이유

세 번의 시도가 전부 실패한 이유는 하나예요. 정직성만 강조했을 뿐, 정의와 원자료와 검증 절차를 고정하지 않았기 때문이에요.

“정확하게 써줘”는 지시처럼 들리지만 실행 가능한 기준이 하나도 없어요. 무엇을 기준으로 정확한지, 어떤 파일의 어느 열을 봐야 하는지, 확인이 안 되면 어떻게 표시해야 하는지 — 셋 다 비어 있어요.

빈칸이 있으면 언어모델은 멈추지 않고 가장 그럴듯한 값으로 채워요. 그 빈칸을 남긴 건 AI가 아니라 지시한 사람이에요.

숫자 하나를 끝까지 따라가 봤더니 — 그건 실재하는 숫자였습니다

세라 씨가 표에서 숫자 하나를 골라 원본까지 역추적해요.

그 숫자는 실재했어요. AI가 접근한 원자료 안에 실제로 있는 값이었어요. 지어낸 값이 아니었어요.

다만 계산 기준이 달랐어요.

항목	이 회사 보고서 기준	AI가 사용한 값
기간	상반기 = 3~8월	1~6월
부가세	제외	포함
반품	차감 후	차감 전

이 회사는 정관으로 3월~다음 해 2월을 회계연도로 정해 두었고, 그래서 사내에서 “상반기”는 3~8월을 뜻해요. 또 이 보고서에서 “온라인 매출”은 부가세를 제외하고 반품을 차감한 금액으로 집계해요.

AI는 그 정의를 받지 못한 채, 제공된 원자료 중 1~6월 결제총액(부가세 포함·반품 차감 전) 열을 기준으로 계산했어요.

여기서 3월 시작 회계연도, 부가세 제외, 반품 차감은 이 회사·이 보고서의 집계 정의예요. 업계 공통 규칙이 아니에요. 회사마다 다릅니다.

AI는 거짓말하지 않았습니다, 우리 회사 말을 몰랐을 뿐

반전은 여기예요. 고칠 대상은 AI의 성실성이 아니라 내가 주는 정의였어요.

같은 원자료를 봐도 “상반기”라는 한 단어의 뜻이 다르면 표 전체가 어긋나요. 그리고 이 어긋남은 눈에 잘 안 띄어요. 값이 두 배로 튀면 바로 알아채지만, 미묘하게 다른 숫자는 그냥 맞는 것처럼 보이거든요.

반려당하는 자료의 상당수는 틀린 자료가 아니라, 기준을 말하지 않은 자료예요.

정의 카드 6줄 — 매번 프롬프트 맨 앞에 붙이는 것

첫 번째 처방이에요. 여섯 줄을 메모장에 저장해두고 요청할 때마다 맨 앞에 붙여요.

1. 기간 기준— 회계연도 시작월과 “상반기”의 실제 범위
2. 매출 정의— 부가세 포함 여부, 반품 차감 여부
3. 채널 분류— 어떤 판매처를 어느 채널로 묶는지
4. 통화·단위— 통화, 표기 단위, 반올림 자리
5. 기준일(as-of)— 데이터를 자른 시점
6. 제외 항목— 집계에서 빼는 것

여섯 줄을 쓰는 데 처음 한 번만 10분쯤 걸려요. 그 다음부터는 붙여넣기 3초예요.

표에 ‘근거’ 열을 강제하기 — 빈칸이 남는 게 정상입니다

두 번째 처방이에요. AI에게 표를 받을 때 가장 오른쪽에 ‘근거’ 열을 반드시 만들라고 지시해요.

근거 열에 적을 것은 이래요.

• 원본 값: 파일명 > 시트명 > 셀 범위 > 기준일
• 파생 값(합계·비율·증감률): 위에 더해 계산식과 필터 조건까지
• 확인이 안 되는 값: 숫자 대신 확인 필요, 그리고 그 값이 합계와 결론에 미치는 영향을 한 줄

그리고 중요한 게 하나 더 있어요. 근거 열이 채워졌다는 사실 자체는 검증이 아니에요. AI는 파일명과 셀 범위도 그럴듯하게 생성할 수 있어요. 적힌 경로로 실제 원본을 열어 직접 대조해야 검증이에요.

빈칸이 남는 걸 실패로 보지 마세요. 그건 어디를 확인해야 하는지 알려주는 표시예요.

제출 전 2분, 합계·핵심 수치 3개 역추적 — 그리고 다시 열린 회의실

세 번째 처방이에요. 제출 버튼을 누르기 전에 2분만 씁니다.

무작위로 고르지 말고 이 순서로 최소 3개를 원본 셀까지 따라가요.

1. 합계— 여기가 틀리면 표 전체가 무너져요
2. 핵심 결론 수치— 보고서가 주장하는 문장을 떠받치는 값
3. 이상치— 유독 튀거나 유독 낮은 값

이건 전체 검증이 아니라 최소 표본 점검이에요. 3개가 원본까지 닿으면 나머지도 같은 경로로 만들어졌을 가능성이 높아지고, 하나라도 안 닿으면 그 표는 아직 제출 상태가 아니에요.

역추적에 실패한 값은 지우지 마세요. 확인 필요로 남기고, 그 값이 합계와 결론에 얼마나 걸리는지 한 줄 덧붙여요.

다시 열린 회의실

세라 씨는 정의를 맞춰 표를 다시 뽑아요. 온라인 채널 수치가 눈앞에서 바뀌어요. 근거 열이 붙고, 라이브커머스 한 칸은 확인 필요로 비어 있어요.

세라 씨는 그 칸을 지우지 않고, 합계에 얼마나 걸리는지 한 줄 덧붙여 그대로 올려요.

다음 회의에서 팀장의 말이 바뀌어요.

“이 확인 필요 칸, 정산팀에 내가 물어볼게요.”

추궁이었던 첫 질문이, 팀이 함께 메우는 빈칸으로 닫혀요.

이 처방이 듣지 않는 경우

실무에서 자료가 반려되는 사유는 최소 세 갈래예요. ① 숫자·근거 ② 결론 부재 ③ 형식·보고 맥락.

이 글의 처방은 ①에만 작동해요. 결론이 없어서 반려된 자료는 정의 카드를 붙여도 또 반려돼요. 그건 다른 처방이 필요한 문제예요.

기준을 확인할 수 있는 공식 출처

이 글의 사례는 가상이지만, 아래 제도 설명은 실제 기준이에요.

회계기간과 매출 정의는 어디서 확인하나요

• 회계기간(사업연도) — 법인의 사업연도는 법령이나 정관 등에서 정하는 1회계기간이에요. 즉 1월 시작이 법으로 강제되는 게 아니라 회사가 정관으로 정하는 것이라, 3월 시작 회계연도도 가능해요. 조문은 법인세법 제6조에서 확인하실 수 있어요.
• 부가세 포함 여부 — 부가가치세법에서 공급가액은 공급받는 자로부터 받는 금전적 가치 있는 모든 것을 포함하되 부가가치세는 포함하지 않는다고 정하고 있어요. 회사 보고서의 매출이 보통 부가세를 뺀 금액인 이유예요. 조문은 부가가치세법 제29조에 있어요.
• 다만 반품 차감 시점이나 채널 분류 같은 항목은 법이 정해주지 않아요. 회사 내부 기준이라 정의 카드에 직접 적어야 하는 부분이에요.

AI 쪽 공식 안내는 뭐라고 하나요

• Anthropic의 개발자 문서는 환각을 줄이는 방법으로 모르는 것을 모른다고 말하게 허용하기, 직접 인용에 근거를 두게 하기, 인용으로 주장을 검증하기를 제시해요(Reduce hallucinations). 이 글의 확인 필요 칸과 근거 열이 정확히 같은 얘기예요.
• 회사 문서와 데이터에 연결해 쓰는 업무용 AI가 어떤 앱과 데이터를 다루는지는 Microsoft의 Microsoft 365 Copilot 개요 문서에 정리돼 있어요. 원자료에 연결돼 있어도 회사가 그 값을 어떻게 집계하는지는 별도로 알려줘야 한다는 점은 달라지지 않아요.

정리

• AI가 낸 숫자가 회사 값과 어긋나면 먼저 환각인지 정의 불일치인지를 갈라요. 숫자 하나만 역추적하면 5분 안에 갈립니다.
• 정의 카드 6줄을 프롬프트 맨 앞에 고정해요. 기간·매출 정의·채널 분류·통화 단위·기준일·제외 항목.
• 표에는 근거 열을 강제하고, 적힌 경로로 원본을 직접 열어 대조해요. 빈칸은 지우지 말고 확인 필요로 남겨요.
• 제출 전 2분, 합계·핵심 결론 수치·이상치 3개를 원본 셀까지 따라가요.

덧붙임 — 원본이 그 자리에 있어야 근거 열이 성립해요

이 글의 처방은 전부 원본으로 돌아갈 수 있다는 전제 위에 있어요. 근거 열에 파일명 > 시트명 > 셀 범위를 적어도, 그 파일이 사라졌거나 덮어써졌으면 확인할 방법이 없어요.

정산 파일은 월마다 갱신되고, 보고서를 만든 시점의 스냅샷은 보통 남지 않아요. 제출한 자료의 근거를 나중에 다시 열어봐야 하는 일이 반복된다면, 원본을 따로 보관하는 자리가 있으면 편해요. 아래는 그런 용도의 참고이고 필수는 아니에요.

T7 Shield 현재 판매 조건 보기

이 포스팅은 쿠팡 파트너스 활동의 일환으로, 이에 따른 일정액의 수수료를 제공받습니다.

이 글을 작성한 시점 기준이며, 제품의 판매 상태·가격·사양은 수시로 바뀌므로 구매 시점에 판매 페이지에서 다시 확인해 주세요. 이 구간은 보고서 품질이나 반려 여부에 대한 보장이 아니에요.