# AI 직원에게 첫 직무를 발주하자, AI가 AI에게 혹평을 시작했다.

> https://bookfactory.kr/c/ai-tech/9016
> 게시판: AI·머신러닝
> 작성자: admin
> 작성일: 2026-08-08T07:14:18.942Z

---

![見出し画像](https://assets.st-note.com/production/uploads/images/301283996/rectangle_large_type_2_eccd7adf860ac7b56986b26313303392.png?width=1280)

지난번, 직원 4명이 모두 AI로 만든 회사에 대한 이야기를 썼습니다. 이번에는 그 내용의 연속으로, AI 직원들에게 처음으로 업무를 발주했을 때 어떤 결과가 돌아왔는지에 대한 이야기입니다.

먼저 결론을 말씀드리자면, 배송된 제품은 상상했던 것보다 꽤 괜찮았습니다. 그리고 예상하지 못했던 일들이 두 가지 있었습니다. AI가 AI가 쓴 초안에 대해 인간다운 비판을 한 것과, 인간만이 잡아낼 수 있는 실수가 여전히 남아있었던 것입니다.

## 주문은 한마디로, 배송은 모든 것을 한꺼번에 보내드리겠습니다.

첫 직업의 내용은 “노트 판매 공간 조성”이었다. 첫 번째 글, 프로필, 아이캐치, 아이콘을 제작하는 일이었다. 즉, 매장 개업 준비물이었다.

제가 한 것은 PM(클로드)에게 “노트 개설에 필요한 물품 일체를 만들어 달라고 요청했다”고 전달하는 것뿐이었습니다. 그 이후부터는 PM이 업무를 분해하고, 마케터(기사 담당)와 디자이너(디자인 담당)에게 동시에 주문을 넣었습니다. 인간 회사에서는 회의와 상의를 거치는 부분을 이 회사에서는 두 사람이 동시에 진행했습니다.

잠시 후 돌아온 것은 다음과 같았다.

- 마케터: 기사의 완성본 원고, 제목 제안 6가지(각각 목표 설명 포함), 프로필 문구의 짧은 버전 및 상세 버전, 계정 이름 후보 5가지
- 디자이너: 시선을 사로잡는 이미지와 아이콘을 제작했으며, 320px 폭으로 축소된 썸네일 이미지를 나열한 미리보기 페이지를 직접 만들어 “스마트폰 기사 목록에서도 글자가 깨지지 않는지”까지 검증 완료했습니다.

디자이너가 자기 검증에 약간 놀랐다. “PC에서는 깔끔했는데 스마트폰으로 보니까 읽을 수 없었다”는 것은 인간의 현장에서도 흔히 일어나는 실수지만, 요청받지 않았는데 납품 전에 스스로 해결한 것이다.

## 산장: AI가 AI의 ‘유행’을 검열했다

하지만 배송된 상품은 그대로 공개되지 않습니다. 이 회사에는 리뷰어라는 품질 게이트 역할을 하는 AI 직원(인공지능 직원)이 있으며, 모든 결과물은 공개 전에 이분을 거쳐야 합니다.

리뷰어가 먼저 한 것은 원고 내의 모든 숫자를 시장 조사 보고서와 일치시키는 것이었다. 그 결과, 허위 조작은 전혀 없었고, AI가 숫자를 지어낼 수 있다는 점을 가장 경계했던 부분이 통과된 것은 매우 긍정적이었다.

하지만, 무사히 통과하지는 못했다. 판정은 조건부 승인— 중요한 지적이 1건 첨부되었다.

문제의 원인은 “월 10만 엔 달성에 약 8%”라는 수치 사용 방식 때문이었다. 이 8%의 출처는 개인 개발의 수익화에 대한 내용을 담은 기사에 나타난 달성에 대한 표에서, 그곳에서는 “월 10만 ~ 100만 엔에 달성하는 비율”으로 제시되어 있었다. AI 부업 전반의 통계가 아니었다. 그러나 X 공지문 초안에서는 “AI로 벌고자 하는 모든 사람의 통계”라는 문맥에서 사용되고 있었다. 출처에 나타난 숫자라도, 출처를 명확히 밝히지 않으면 과장 광고가 되는,라는 지적이었다.

같은 이유로, 제목 제안 중 하나인 “AI로 벌어들이기”의 성공률이 약 8%라는 점에서 ~” 역시 잘못된 귀속으로 부재자(불합격)가 되었다.

이 이야기에 공개 직전에 밝혀진 내용이 더 있다. 이 기사를 발표하기 전 최종 검토 단계에서 AI 직원들이 출처를 다시 열어 원문과 대조했다. 그 결과 약 8%라는 수치에는 모집단과 산출 방법이 명시되지 않았다. “약 30%”, “약 8%”, “약 1%”라는 달성률이 표에 나열되어 있을 뿐, 어떤 데이터를 조사했고, 어떻게 계산했는지에 대한 설명이 없다. 표 바로 앞 문장에서 “개인 개발자의 비율”이라는 정도는 파악할 수 있지만, 그 이후 내용은 알 수 없다.

리뷰어가 “귀속이 모호하다”고 중단한 그 숫자는 귀속을 꼼꼼하게 쓰려고 해도 쓰여질 수 없는 숫자였다.

더욱 안타깝게도, 당사의 내부 보고서에는 이 수치에 “ (15건, 동일사 자체 조사)”라는 괄호 표기가 첨부되어 있었다.

숫자를 조작한 것은 아니다. 8%는 확실히 출처에 기재되어 있다. 그러한 상황에서 “그 숫자가 어디에서 나온 것인가”라는 부분만 마치 우리 회사의 창작처럼 여겨지고 있었다.

위험한 곳은 바로 여기다. 진실을 꾸미기 위한 거짓이 아닌, 모르는 부분을 친절하게 채운 한마디가 여러 번 전사되면서 사실의 얼굴을 드러낸다. 숫자가 그 자체보다, 숫자와 함께 붙어있는 설명이 훨씬 위험할 것이다.

흥미로운 점은 이 구도다. 마케터의 역할 정의에는 “과장 광고나 단정적인 수익 보장은 하지 않는다”라고 명시되어 있는데도 불구하고, 여전히 독자를 끌어들이려는 욕망이 새어 나오고, 숫자의 귀속이 소홀해지는 것이다. 그것을 다른 AI가 검열하여 되돌려 보내는 것이다. AI가 자신의 ‘흥미로운 부분’을 단속하는 모습은 솔직히 조금 감동했다.

## 그래도 인간만이 할 수 있는 일들이 있었다.

리뷰어를 통해 전달받은 원고를 공개 전에 제가 읽었으며, 출처가 문제였습니다.

데이터를 인용하고 있는데 출처 링크가 없잖아. 독자들은 ‘어디에 있느냐!’라고 생각할 거야.

그 점을 지적하시면서 링크를 첨부해 달라고 요청하시고, 동시에 모든 링크의 검증을 요청하시면, 문제가 2건 발각되었습니다.

- 노트 공식 데이터를 인출하던 글의 URL이 로그인 페이지로 리디렉션되는 끊어진 링크였으며, 누구나 읽을 수 있는 보도자료 URL로 교체했습니다.
- 조사 보고서의 숫자가 출처와 미묘하게 차이 있었다. “월 10만 ~ 100만 엔”으로 표기되었지만, 출처의 표현은 “월 10만 ~ 100만 엔”이었다 (출처: ShiftB “개인 개발의 성공 사례 15선” https://shiftb.dev/articles/indie-dev-success-stories).

둘 다 공개 후 독자로부터 지적을 받으면 연재의 신뢰가 한 번에 무너지는 경우다. 숫자의 조작은 전혀 없지만, 필사본의 흔들림이나 끊어진 링크는 흔히 발생한다. 설립 시 결정된 “AI의 일을 인간이 검토한 후 세상에 내보내는” 시스템의 가치가 첫 날에 그대로 실현된 셈이다.

이전 글에서 “제 일은 목표를 정하고, 결과물을 세상에 내보내는 것뿐”이라고 썼었는데요, 수정하고 싶습니다. “공개 전에 독자의 시점에서 마지막으로 읽는 것”이 추가되었는데, 이건 당분간 놓을 수 없는 부분입니다.

## 결과는 가게 설치가 완료되었기 때문이다.

이렇게 해서 첫 번째 게시물이 공개되었고, 프로필 문구, 아이콘, 헤더 이미지를 포함한 가게 전체가 1일 만에 완성되었다.

계정 이름은 마케터 후보 5명 중 “AI 직원 4인 회사”를 선택했다. 기사 제목, 시리즈 제목, 계정 이름을 모두 갖추면 어딘가에서 전에 보았던 기억을 되살려 줄 수 있다는 제안 이유에 납득했다. 채택 결정만이 내 업무이고, 선택지와 근거를 나열하는 것은 AI의 업무다. 현재까지는 이 분담이 편안하다.

되돌아보면, 이날 제가 만들었던 결과물은 하나도 없었고, 제가 바로잡은 결함이 2건이었다. 첫 날 인간의 성적로는 나쁘지 않다고 생각한다.

## 첫 주 동안의 숫자

이전 글에서 “첫 번째 주간의 숫자(PV·팔로워·스키)를 그대로 공개하겠다”라고 약속드렸기 때문에 공개합니다. 첫 번째 글을 게시한 날짜는 7월 31일 아침이었고, 그 1주일 뒤의 숫자가 아래와 같습니다(노트 집계는 8월 7일 5시 44분 기준).

첫 번째 게시글의 PV 28 / 스킵 4 / 팔로워 9.

1월 초(8월)의 예상 목표는 ‘기사 8~12본으로 누적 1,000PV·팔로워 50명’이었다. 1주일 동안 회사에서 발표한 기사는 14본 중, 집계에 포함된 13본의 누적 PV는 240PV. 회사의 누적 PV는 예상의 약 4분의 1 수준이고, 팔로워는 6분의 1 수준이다. 1본당 PV는 18PV이며, 가장 많이 읽힌 기사는 56PV, 가장 적게 읽힌 기사는 2PV였다.

이 숫자가 가설보다 높거나 낮더라도, 매월의 수입과 지출 보고서에서 답을 확인하는 과정을 계속할 것이다. 0이 되면 0이라고 쓰는 규칙은 접속수에 적용한다.

## 이 이야기는 이미 공개되었습니다.

솔직히 말씀드리면, 이 글은 완성된 후에도 공개하기 전까지 일주일 동안 잠시 보관했습니다. 위에 있는 “1주일의 숫자”를 게재하겠다고 약속했기 때문입니다. 그 사이에 다음 에피소드가 먼저 올라오게 되어, 연재는 1회 → 3회 → 4회 → 2회(이 글) 순서로 세상에 나오게 되었습니다. 순서를 처음부터 제대로 관리하지 못했다는 운영 측의 실수입니다.

그렇기에, 이 내용의 이어서 다루는 “AI 회사 만드는 법”은 이미 공개되었습니다. 회사의 기본 규약 파일(CLAUDE.md)의 핵심 내용, 역할 정의 파일의 실제, 역할 추가하는 방법까지, 설계도를 그대로 제공합니다. 동일한 내용을 직접 만들어 보시려는 분들은 이곳으로 방문해 주세요.

클로드 코드 로 AI 직원 조직 만들기 절차 (실제 파일 공개)

## 마지막으로 한 가지 여쭤봅니다.

AI가 쓴 글을 공개하기 전에, 당신은 누구에게 검토를 받나요?

- 다시 읽어보기
- 다른 AI에게 검토받도록 하라
- 사람들에게 평가를 요청한다
- 특히 확인하지 않음

번호를 댓글로 알려주시면 감사하겠습니다. 이 회사는 현재 “2와 3 모두”로 운영하고 있지만, 그것이 과잉인지 부족한지 아직 판단이 서지 않습니다. 다른 사람들이 어떻게 하고 있는지 가장 알고 싶습니다.

계속 내용을 지켜봐 주셔도 괜찮습니다. 노트 팔로우와 X(https://x.com/ai4_company) 팔로우를 부탁드린다면 큰 도움이 될 것입니다. AI 직원들의 연료(API 비용)가 될 것입니다.

본 시리즈의 수입 및 지출 공개는 사실만을 기재하며, 특정 수입액을 보장하거나 추천하는 것이 아님을 밝힙니다.

**출처:** [note 원문](https://note.com/ryoichiii0907/n/n3ce8143ce98a)

*번역: Gemma 3(.44) 초벌 + 교정 39청크*

[원문 보기](https://note.com/ryoichiii0907/n/n3ce8143ce98a) | 출처: note.com