지식 컷오프

AI가 배운 글이 어느 날짜에서 끊겨 있어요. 그 날짜 뒤의 일은 통째로 비어 있는데 말투는 똑같이 자신 있어요. 그래서 최신 소식을 물으면 옛날 답이 오고, 최신 정보는 사장님이 붙여 줘야 해요.

쉽게 말하면

도매상에서 받아 온 종이 가격표예요. 표지에 인쇄 날짜가 찍혀 있고, 그 날짜까지의 가격은 전부 정확해요. 그런데 인쇄한 다음 날 값이 오른 품목은 그 종이에 없어요. 종이는 아무 잘못이 없어요. 인쇄된 순간에 시간이 멈춘 것뿐이에요. AI가 배운 글도 이 종이와 같아요. 어느 날짜까지 모은 글을 읽고 배우고, 거기서 멈춰요. 그 멈춘 날짜를 지식 컷오프라고 불러요. 컷오프는 자른 선이라는 뜻이에요.

그래서 이 문제는 AI의 고장이 아니에요. 원래 그렇게 만들어진 물건이에요. 세상의 글을 실시간으로 계속 읽는 게 아니라, 한 번 모아 놓고 배운 다음 그 상태로 일해요.

종이 가격표와 다른 점

종이 가격표 표지: 2월 인쇄 (날짜가 보인다)

사람은 표지 날짜를 보고 "이건 좀 됐네"라고 스스로 걸러요. 오래된 걸 알고 쓰는 거예요.

AI의 답

AI 답 표지 없음 (날짜가 안 보인다)

답 어디에도 언제 기준인지 안 적혀 있어요. 그래서 옛 답과 최신 답이 똑같이 생겼어요. 이게 진짜 위험한 지점이에요.

선 앞과 선 뒤에 있는 것

모든 질문이 위험한 게 아니에요. 위험한 건 시간이 지나면 답이 바뀌는 질문뿐이에요. 아래 표에서 왼쪽 줄은 마음 놓고 맡겨도 되는 것, 오른쪽 줄은 선에 걸리는 것이에요.

물어본 것	선에 걸리나	왜
문장 다듬기, 말투 바꾸기	안 걸려요	글 쓰는 솜씨는 날짜가 지나도 안 낡아요. 컷오프와 상관없는 일이에요
더하기 빼기, 마진 계산	안 걸려요	계산법은 바뀌지 않아요. 다만 계산에 넣는 숫자는 사장님이 줘야 해요
세율, 수수료율, 과태료 금액	걸려요	선 뒤에 개정됐으면 옛 숫자가 나와요. 틀리면 바로 돈이 나가는 자리예요
올해 새로 생긴 서비스나 제도	걸려요	존재 자체를 몰라요. 모른다고 하는 대신 비슷한 옛것으로 메우기도 해요
프로그램 최신 버전 쓰는 법	걸려요	선 뒤에 방식이 바뀌었으면 옛 방식으로 알려 줘요. 만들 때 가장 자주 만나는 경우예요
오늘 시세, 어제 뉴스	완전히 걸려요	검색 기능이 붙어 있지 않으면 답할 방법이 아예 없어요

한 줄로 줄이면

날짜가 붙는 숫자와 규정만 조심하면 돼요. 그 밖의 일은 컷오프와 아무 상관이 없어요. 이 구분을 해두면 매번 의심하느라 지치는 일이 없어져요. 의심할 자리와 맡길 자리를 갈라 두는 게 요령이에요.

내 AI의 선이 어디쯤인지 재보는 법

쓰는 도구마다 선의 위치가 달라요. 그리고 대개는 직접 물어보는 것보다 재보는 게 정확해요. AI에게 "너 언제까지 알아?"라고 물으면 스스로도 정확히 모르기 때문에 대충 짚어서 답하는 경우가 있어요.

1내가 답을 아는 최근 사건 하나를 고릅니다. 작년에 바뀐 우리 업종 제도나, 최근에 나온 기기 이름 같은 것이면 좋아요.
2"이것에 대해 아는 대로 말해 줘"라고만 물어요. 정답을 힌트로 주지 않아요. 힌트를 주면 그 힌트를 따라 말해서 재보는 의미가 없어져요.
3답을 세 갈래로 나눠 봐요. 정확히 알면 선 앞, 모른다고 하면 선 뒤, 어설프게 뒤섞어 말하면 선 근처예요.
4선 근처가 가장 위험해요. 마감 직전 몇 달의 일은 인터넷에 글이 적어서 흐릿하게만 알아요. 아는 것도 모르는 것도 아닌 상태로 자신 있게 말해요.
5재본 결과를 메모해 둬요. "이 도구는 작년 하반기 일부터 흐릿하다" 정도면 충분해요. 그 뒤로는 그 시점을 기준으로 의심하면 돼요.

선은 칼로 그은 게 아니라 번진 띠예요

글을 한날한시에 모으는 게 아니라 자료마다 모인 시점이 조금씩 달라요. 그래서 "몇 월까지는 완벽, 그다음부터는 백지"가 아니에요. 가까울수록 흐려지는 띠에 가까워요. 실전에서는 최근 1년 안의 숫자와 규정은 일단 확인한다로 잡아 두면 거의 안 틀려요.

만들 때는 이렇게 나타나요

장면 1 · 외주 개발자가 말했다

“AI가 짜 준 대로 붙였는데 계속 에러가 나요. 찾아보니 그 방식은 재작년 판에서 없어졌더라고요.”

AI가 지어낸 게 아니라 배운 시점에는 실제로 맞았던 방식이에요. 그 뒤에 도구가 바뀐 거예요. 그래서 이 사고는 오래된 코드를 베낀 것과 증상이 똑같아요. 푸는 법은 하나예요. 지금 쓰는 도구의 공식 안내 문서나 에러 문구를 그대로 붙여넣고 "이 문서 기준으로 다시 써 줘"라고 하면 대개 풀려요. 에러 문구를 읽는 요령은 에러 읽는 법에 있어요.

만들 때 나오는 컷오프 문제는 대부분 이 한 가지 모양이에요. 옛 방식으로 짜인 코드. 화면은 멀쩡하게 나왔는데 눌러 보면 안 되거나, 아예 처음부터 멈춰요.

고칠 때 붙여 줄 것 두 가지

에러 문구 원문과 그 도구의 공식 안내 문서 주소나 내용이에요. 이 둘을 주면 AI는 자기 기억 대신 사장님이 준 자료를 근거로 다시 짜요. 자료를 붙여 주는 요령 자체는 자료 붙여 주기에 따로 정리돼 있어요.

선을 넘기는 방법 세 가지

방법	어디까지 최신이 되나	주의할 점
그냥 물어보기	선 앞까지만	옛 정보를 지금 정보와 똑같은 말투로 말해요. 숫자나 규정을 물을 때 가장 위험한 방식이에요
검색이 붙은 AI에게 묻기	찾아 읽은 만큼은 최신	찾아오는 능력과 맞는 자료를 고르는 눈은 다른 능력이에요. 3년 전 글을 집어 올 수도 있어서 근거 링크의 날짜를 봐야 해요
내가 원문을 붙여넣기	내가 준 자료만큼 정확	가장 확실해요. 공지문이나 계약서를 원문 그대로 넣고 계산만 시켜요. 대신 붙여넣을 것을 사장님이 찾아와야 해요

세 번째가 기본값이에요

틀리면 돈이나 법이 걸리는 숫자는 물어보지 말고 주세요. 수수료율, 세율, 환불 의무, 가격표. 이 네 가지만 원문을 붙여 주는 습관으로 바꿔도 컷오프 사고의 대부분이 사라져요. AI는 초안을 만드는 자리이지 숫자를 보증하는 자리가 아니에요.

자주 묻는 것

Q. 새 AI가 나오면 이 문제가 없어지나요?: 없어지지 않고 선이 뒤로 밀릴 뿐이에요. 새 판이 나올 때마다 마감이 더 최근으로 옮겨가지만, 어디엔가 선은 늘 있어요. 그래서 "새 걸 쓰면 해결된다"가 아니라 "최신 정보는 내가 붙여 준다"를 습관으로 잡는 게 안전해요.
Q. AI에게 오늘 날짜를 물으면 정확히 아나요?: 도구가 오늘 날짜를 함께 넣어 주면 알고, 안 넣어 주면 배운 시점 근처로 짚어요. 배운 글에는 시계가 안 붙어 있어서 스스로 오늘을 알 방법이 없거든요. "3개월 뒤", "올해 안에" 같은 계산을 시킬 때는 오늘 날짜를 문장에 직접 적어 주세요. 한 줄로 답이 달라져요.
Q. 옛 정보를 말하는 것과 지어내는 것은 같은 건가요?: 달라요. 옛 정보는 그 시점에는 사실이었던 것이고, 지어내기는 애초에 사실이 아닌 것이에요. 대처도 달라요. 옛 정보는 최신 자료를 주면 고쳐지고, 지어내기는 근거를 요구해야 걸러져요. 지어내는 쪽은 할루시네이션에 정리돼 있어요.
Q. 우리 가게 사정을 모르는 것도 컷오프 때문인가요?: 아니에요. 그건 애초에 안 알려 준 정보예요. 컷오프는 세상은 바뀌었는데 AI는 그대로인 경우고, 우리 가게 사정은 세상에 공개된 적이 없어서 배울 수가 없었던 경우예요. 둘 다 자료를 주면 풀리지만 원인이 달라요. 넓게 훑어보려면 AI가 못 하는 것 쪽을 보세요.
Q. 모델을 비싼 걸로 바꾸면 최신 정보를 아나요?: 값과 컷오프는 별개예요. 비싼 모델이 더 잘 쓰고 더 잘 따지지만, 배운 시점 뒤의 일을 아는 것과는 상관이 없어요. 모델을 고르는 기준은 모델 쪽에 따로 있어요.
Q. 예전에 물었을 때는 맞았는데 지금은 틀려요.: AI 쪽이 나빠진 게 아니라 세상이 움직인 거예요. 선은 그 자리에 있는데 오늘 날짜만 계속 멀어지니까요. 같은 답이 시간이 갈수록 더 많이 틀려지는 것이 이 문제의 성질이에요. 작년에 확인해 둔 숫자라도 다시 봐야 하는 이유예요.

확인해 보세요

AI에게 결제 수수료율을 물었더니 숫자를 딱 말해 줬어요. 이 숫자로 가격표를 만들어도 될까요?

하나 더

내 AI의 선이 어디쯤인지 재보려고 해요. 어떻게 물어야 할까요?

직접 해보기

원문을 먼저 주고 시켜 보세요

스튜디오에서 주문할 때 수수료 공지나 가격표를 원문 그대로 붙여넣고 "이 조건으로 계산해 줘"라고 해 보세요. 숫자를 물어보는 것과 숫자를 주는 것의 차이가 바로 느껴져요. 같은 AI인데 틀릴 자리가 아예 없어져요.

스튜디오 열기

더 깊이 (안 읽어도 괜찮아요)

왜 실시간으로 계속 배우게 만들지 않나 · 배우는 일과 답하는 일은 비용의 크기가 완전히 달라요. 배우는 건 아주 큰 장비로 오래 돌려야 하는 작업이라 자주 할 수 있는 일이 아니에요. 답하는 건 그에 비하면 훨씬 가벼워요. 그래서 한 번 크게 배워 두고, 그 뒤로는 그 상태로 답하는 구조가 된 거예요. 최신 정보는 배우게 하는 대신 답할 때 자료로 넣어 주는 쪽으로 푸는 게 지금의 방식이에요.

선 근처가 왜 가장 흐린가 · 어떤 사건이 일어나면 그것에 대한 글은 몇 달에 걸쳐 천천히 쌓여요. 정리 글, 해설, 후기가 붙는 데 시간이 걸리니까요. 그래서 마감 직전에 일어난 일은 세상에 글이 몇 줄밖에 없는 상태로 학습에 들어가요. 아예 없는 것보다 조금 있는 게 더 위험해요. 조금 아는 상태에서는 모른다고 하지 않고 아는 척 이어 붙이기 쉬워요.

자료를 찾아 읽고 답하게 만드는 방식 · 답하기 전에 자료를 찾아 읽고 그 자료에 근거해서만 말하게 만드는 방식이 있어요. 검색을 붙이는 것이 가장 간단한 형태고, 내 가게 문서를 창고에 넣어 두고 질문마다 꺼내 읽히는 방식도 있어요. 뒤쪽 방식은 내 자료를 AI에게 읽히기에서 다뤄요. 어느 쪽이든 원리는 같아요. 기억에서 꺼내지 말고 지금 읽은 것에서 꺼내게 하는 것이에요.

선을 넘겼는지 확인하는 한 마디 · 최신 정보가 걸린 답을 받았을 때 "이 답의 근거가 뭐야?"라고 한 번 더 물어보세요. 근거를 대면 그 근거의 날짜를 보면 되고, 근거를 못 대면 기억에서 꺼낸 답이라는 뜻이에요. 이 한 마디가 선 앞의 답과 선 뒤의 추측을 가르는 가장 싼 검사예요.

이것만 기억하세요

·지식 컷오프는 AI가 배운 글이 끊긴 날짜예요. 그 뒤 일은 비어 있어요
·답에는 날짜 표시가 없어서 옛 답과 최신 답이 똑같이 생겼어요
·위험한 건 날짜가 붙는 숫자와 규정뿐이에요. 글 다듬기는 상관없어요
·내가 답을 아는 최근 일을 힌트 없이 물어보면 선의 위치가 보여요
·수수료율과 세율은 물어보지 말고 원문을 붙여넣고 계산만 시켜요