검증 가능한 업무 루프

AI가 보고서를 다 썼다는 답을 보냈는데, 무엇을 확인했는지는 알 수 없습니다. 8장에서 완료 조건을 넣어 일을 맡겼다면, 이제 그 조건을 통과한 근거까지 돌려받을 차례입니다. 이 절에서는 목표에서 실행으로, 관찰에서 검증으로 이어지는 업무의 고리를 만들어 봅니다.

1. 만들었다는 말 다음에 볼 것

결과물이 나오는 것과 업무가 끝나는 것은 구분할 필요가 있습니다. 표를 만들었어도 원문 한 줄이 빠질 수 있고, 빠짐없이 옮겼어도 합계가 틀릴 수 있습니다. 무엇을 만들었는지와 무엇을 확인했는지를 함께 받아야 결과를 쓸지 판단할 수 있습니다.

이 책에서는 목표·실행·관찰·검증이 이어지고, 기준을 통과할 때 결과를 보고하는 흐름을 업무 루프라고 부르겠습니다. 루프는 같은 일을 되풀이하는 고리라는 뜻입니다. 문제가 생기면 원인을 고쳐 다시 확인하고, 자료가 없어 끝낼 수 없으면 그 상태를 드러냅니다.

대화창에 원문과 기준을 주고 결과, 대조표, 남은 문제를 받는 것부터 시작할 수 있습니다. 4장에서 본 에이전트 업무도 실행 결과를 관찰하고 확인하는 고리를 붙여 생각하면 이해하기 쉽습니다.

2. 목표에서 검증까지 연결하기

목표: 결과를 어디에 쓸지 정하는 단계입니다. 준비물 표라면 참가자가 쓸 수 있는 수량을 파악하는 것이 목적일 수 있습니다. 이때 받은 수량과 쓸 수 있는 수량이 다르다는 점까지 기준에 넣어야 합니다.

실행: 실제 결과를 만드는 단계입니다. AI가 자료를 읽고 항목을 정리하며 수량을 계산합니다. 여기까지는 초안입니다. 결과가 어떤 원문을 바탕으로 만들어졌는지도 연결해 두면 다음 단계가 편해집니다.

관찰: 만들어진 결과를 확인할 수 있는 형태로 꺼내는 단계입니다. 완성 표, 사용한 자료 목록, 계산에 쓴 값, 작업 중 발견한 빈칸이 여기에 해당합니다. 원문을 읽었다고 말하는 대신 어느 행을 반영했는지 보여 주게 합니다.

검증: 관찰한 결과를 처음 정한 기준과 대조하는 단계입니다. 누락이 없는지, 파손 수량을 뺐는지, 행별 수량의 합이 맞는지를 각각 확인합니다. “전반적으로 좋다”는 평가로 여러 기준을 한꺼번에 통과시키지 않습니다.

이 고리에서 검증이 빠지면 실행을 오래 반복해도 기준을 충족했는지 모릅니다. 반대로 검증에서 문제가 나왔는데 원문이나 기준을 그대로 둔 채 문장만 다시 쓰게 하면 같은 문제가 남습니다. 되돌아갈 곳을 고르는 일도 업무의 일부입니다.

3. 통과 근거는 다시 찾아볼 수 있어야 합니다

좋은 검토 보고에는 기준과 결과 위치, 판단을 뒷받침하는 근거가 함께 있습니다. 준비물 표라면 원문 번호와 계산식을 적을 수 있습니다. 행사 안내문이라면 확정 장소가 적힌 문서 항목과 최종 안내문의 해당 문장을 연결할 수 있습니다.

단순한 계산은 입력값과 식을 함께 받으면 확인이 쉽습니다. “합계 확인 완료”만으로는 어떤 값을 더했는지 모릅니다. 파손품을 빼야 하는 표에서 받은 수량을 더해 놓고 합계만 맞다고 할 수도 있습니다. 산술의 정확성과 업무 기준의 정확성을 각각 확인해야 합니다.

문장 업무에서도 근거를 남길 수 있습니다. “독자가 할 행동을 먼저 쓴다”는 기준이라면 첫 문장이 실제로 어떤 행동을 요구하는지 표시하게 합니다. 자료에 없는 내용을 쓰지 않는다는 기준은 주요 사실 문장마다 근거 항목을 연결해서 대조합니다.

모든 문장에 긴 설명을 붙일 필요는 없습니다. 숫자, 일정, 약속, 필수 정보처럼 틀리면 결과를 바꾸는 부분부터 근거를 받으세요. 꾸밈말 하나까지 검토표에 넣으면 정작 중요한 오류를 찾으려고 읽어야 할 양이 커집니다.

위니브의 교재 개정도 사실 조사와 집필 뒤에 독립 검토와 화면 미리보기를 거쳐 발행합니다. 원고가 작성됐다는 사실에 더해 내용과 화면이 확인된 결과를 받아 내보낼지 정하는 것입니다.

4. 통과하지 못한 이유를 나누기

기준을 충족하지 못했다고 모두 같은 방식으로 고치지는 않습니다. 자료가 충분한데 계산을 틀렸다면 다시 계산하면 됩니다. 원문에 수량이 비어 있다면 누군가 그 값을 확인해야 합니다. 기준이 서로 충돌한다면 무엇을 우선할지 결정해야 합니다.

특히 일부를 확인하지 못했다면 전체 통과로 보고하지 않게 해야 합니다. 사용할 수 있는 부분과 보류할 부분을 나누어 받으면 사람이 다음 결정을 하기 쉽습니다. 모르는 항목이 표시된 표도 쓸모가 있지만, 그 빈칸을 감춘 표는 결과를 오해하게 합니다.

수정 뒤에는 연결된 부분까지 다시 봅니다. 표의 한 수량을 바꾸면 합계와 보고문 속 숫자도 달라집니다. 처음과 똑같이 모든 일을 다시 할 필요는 없지만, 바뀐 값이 쓰이는 자리는 확인해야 합니다. AI에게 수정한 항목과 다시 확인한 범위를 함께 보고하게 하세요.

5. 따라 해 보기

아래는 받은 물품에서 파손품을 빼야 하는 가상 업무입니다. 원문과 잘못된 초안을 함께 주고 업무 루프를 실행하게 합니다. 실제 회사의 재고표는 넣지 않아도 됩니다.

가상 모임에서 사용할 수 있는 물품 수량표를 완성해 줘. 아래 원문과 초안은 모두 연습용 자료야. 목표는 파손품을 제외한 실제 사용 가능 수량을 파악하는 것이야.

[원문]
S1. 수첩: 받은 수량 12개, 파손 2개
S2. 연필: 받은 수량 20개, 파손 0개
S3. 파일: 받은 수량 8개, 파손 1개

[검토할 초안]
수첩 12개, 연필 20개, 파일 8개. 사용 가능 합계 40개.

[통과 기준]
세 품목이 모두 있어야 한다.
각 품목의 사용 가능 수량은 받은 수량에서 파손 수량을 뺀 값이어야 한다.
합계는 품목별 사용 가능 수량의 합이어야 한다.

목표와 기준을 짧게 확인하고, 초안에서 관찰한 문제를 원문 번호와 함께 적어 줘. 그다음 수정한 표를 만들고 행별 계산식과 합계 계산식을 보여 줘. 기준별로 통과 여부와 확인 위치를 대조한 뒤 최종 결과를 보고해 줘. 자료가 부족하면 그 기준은 통과시키지 말고 확인 필요로 남겨 줘. 실제 재고 변경이나 외부 전달은 하지 마.

이런 답이 오면 잘된 것: 파손품을 뺀 행별 수량과 합계가 계산식으로 나오고, 초안의 문제와 수정 결과가 연결됩니다.

이렇게 오면 이렇게 다시 말하기: 합계만 검사했다면 “세 품목의 사용 가능 수량부터 S1~S3과 대조하고, 그 결과를 더해 합계를 다시 확인해 줘”라고 합니다.

보고에서 통과 표시 하나를 골라 근거를 따라가 보세요. 원문과 계산, 결과가 연결되면 내가 모든 작업을 되풀이하지 않아도 판단할 자리가 보입니다. 다음 절에서는 이 검토를 다른 대화의 AI에 따로 맡길 수 있도록 기준표를 만듭니다.