BLACKBOLD'S VIEW
초안을 만드는 시간이 짧아져도 검토자가 처음부터 다시 읽어야 한다면 전체 업무는 빨라지지 않습니다. 어떤 내용이 어디에서 왔고 무엇을 확인해야 하는지 보이게 만들어야 합니다.
과제별 품질 차이를 다룬 연구와 에이전트 평가 자료를 참고했습니다. 초안 생성과 최종 승인 사이의 작업을 별도로 설계하는 것은 Blackbold의 적용 관점입니다.
초안 생성 시간만 재면 검토와 수정 비용을 놓칩니다
문서가 몇 초 만에 만들어져도 검토자가 모든 수치와 근거를 다시 찾아야 한다면 전체 업무는 크게 빨라지지 않을 수 있습니다. Blackbold는 문서 자동화의 성공 기준에 검토 편의성을 포함할 것을 제안합니다. 어디에서 가져온 정보인지, 어떤 부분을 새로 작성했는지, 원문과 충돌하는 내용은 없는지를 확인할 수 있어야 합니다. 이 원칙은 일반적인 사내 보고서와 제안서에도 적용할 수 있습니다.
문장과 근거를 함께 전달해야 검토가 쉬워집니다
가상의 월간 운영 보고서라면 매출 수치의 출처 파일과 기준 기간을 각 문단에 연결할 수 있습니다. 자료가 없는 설명을 자연스러운 문장으로 채우기보다 미확인 항목을 남기는 편이 검토에 유리합니다. 표현 수정과 사실 수정도 구분하면 다음 평가에서 무엇이 문제였는지 알기 쉽습니다. 중요 문서에서는 승인된 템플릿과 필수 항목을 기준으로 누락 여부를 확인하고 담당자가 최종 내용을 판단해야 합니다.

다른 회사의 성과 수치를 그대로 목표로 삼아서는 안 됩니다
공개 사례의 효과는 해당 데이터와 업무 설계, 평가 방식에 따른 결과입니다. 같은 도구를 도입한다고 같은 개선이 생긴다고 볼 수 없습니다. 문서 한 종류를 정해 현재 작성·검토 시간을 기록한 다음, AI를 사용한 결과의 오류 유형과 수정 부담을 비교하세요. 임상적 판단이나 규제 적합성을 자동으로 보장한다는 주장은 이 사례에서 가져올 수 없습니다. 적용하려는 분야의 전문가 검토 체계를 유지해야 합니다.
검토자가 다시 찾아야 하는 일을 줄입니다
가상의 주간 사업 보고서에서 AI가 매출, 비용과 고객 의견을 모아 초안을 썼다고 해 보겠습니다. 문장이 자연스러워도 숫자의 출처와 기준일이 없으면 검토자는 원본 표를 다시 열어야 합니다. 문장마다 참고 자료를 연결하고, 계산한 값과 그대로 옮긴 값을 구분해야 확인 시간이 줄어듭니다.
Blackbold는 결과물뿐 아니라 검토 화면을 함께 설계할 것을 제안합니다. 원문, 초안과 바뀐 내용을 비교하고, 아직 확인하지 못한 부분을 표시합니다. 검토자가 수정한 이유도 남기면 다음 실행의 기준을 구체적으로 개선할 수 있습니다.

작성자와 승인자의 역할을 다시 나눕니다
작성자는 모든 문장을 직접 쓰는 역할에서 입력 자료를 준비하고 중요한 맥락을 설명하는 역할로 이동할 수 있습니다. 승인자는 문장 표현만 고치기보다 논리, 근거와 의사결정에 필요한 내용을 확인합니다. 누가 사실을 확인하고 누가 최종 발행을 승인하는지 분명해야 검토가 중복되지 않습니다.
새로운 분업에는 교육이 필요합니다. 자료가 충분한지 판단하는 법, 근거 없는 문장을 찾는 법, 수정 요청을 구체적으로 남기는 법을 실제 문서로 연습합니다. 검토 능력을 단순히 AI 사용 숙련도로 대체해서는 안 됩니다.
초안 수가 아닌 승인까지 걸린 시간을 잽니다
한 사람이 초안을 많이 만드는 것이 목표가 되면 검토자에게 일이 쌓일 수 있습니다. 작업 중인 문서 수에 한도를 두고, 긴급한 문서와 일반 문서를 나누어 처리합니다. 승인 단계가 느리다면 생성 기능을 더 늘리기보다 검토 기준이나 역할 분담을 먼저 조정해야 합니다.
성과를 볼 때에는 첫 초안 시간, 검토 시간, 수정 횟수와 최종 오류를 따로 기록합니다. 문서 종류와 난도가 다른 사례를 섞어 평균만 비교하지 않습니다. 품질을 유지하면서 최종 사용 가능한 문서가 빨리 나오는지가 핵심입니다.
적용 전에는 다음 항목을 확인해야 합니다
- 숫자와 주요 주장에 원문 근거가 연결되어 있는가?
- 사실 확인과 최종 승인 책임이 분명한가?
- 초안 수와 별개로 검토 대기·수정 횟수를 측정하는가?
핵심 용어는 이렇게 이해하면 됩니다
- 변경 이력
- 문서의 어떤 부분을 누가 언제 바꿨는지 남긴 기록입니다.
- 평가 사례
- AI 결과가 업무 기준에 맞는지 반복해서 확인하기 위해 준비한 입력과 판정 기준입니다.
참고 자료는 다음 범위에서 활용했습니다
- With gen AI, Merck and McKinsey transform clinical authoring (새 창)McKinsey & Company · 2025.06.27
McKinsey가 공개한 Merck 사례는 생성형 AI를 활용한 임상 문서 초안 작성과 전문가 검토를 함께 다룹니다. 기술 도입뿐 아니라 업무 과정, 역할, 역량 개발도 함께 진행했다고 설명합니다.
- Navigating the Jagged Technological Frontier (새 창)Harvard Business School · 2023.09.21
AI 활용의 효과가 과제마다 다를 수 있다는 실험 결과를 참고했습니다.
특정 도구와 컨설팅 과제를 대상으로 한 연구입니다. 모든 직무나 최신 도구에 같은 효과를 적용할 수 없습니다.
- Demystifying evals for AI agents (새 창)Anthropic · 2026.01.09
에이전트의 최종 답변뿐 아니라 실제 작업 결과를 평가합니다.
구현 방법을 설명하는 기술 자료입니다. 평가 도구를 갖추었다는 사실만으로 현장 품질이 보장되지는 않습니다.
- Artificial Intelligence Risk Management Framework: Generative AI Profile (새 창)NIST · 2024.07.26
설계부터 운영·평가까지 AI 위험을 계속 관리하는 관점입니다.
자발적으로 활용하는 관리 지침입니다. 이 자료를 인용하는 것만으로 법규 준수나 안전성이 인증되지는 않습니다.
공개 자료를 비교하고 Blackbold의 업무·조직·시스템 설계 관점으로 정리했습니다. 본문의 가상 예시는 적용 방법을 설명하기 위한 것이며 고객 실적이 아닙니다. 출처 기관과의 제휴나 승인을 의미하지 않습니다.
주간 회차 기준일 2026.08.17 · 실제 게시 및 자료 확인 2026.10.19
이 관점을 실제 업무로 연결하려면
AI 에이전트 개발 알아보기


