클로드 코드로 실행 중인 AI 직원이 지난 며칠간 (10 월 21 일~25 일) 네 가지 실수를 저질렀습니다. 운영자가 결정했던 내용을 덮어쓰기, 세일 할인율의 오타, 동일한 유형의 기사가 지나치게 많이 게시되다, 그리고 로그인 시 빈 전송입니다.
모두가 "다음엔 주의하자"라고만 하고 즉시 해결하지 않고, 규칙과 코드, 테스트로 대체했습니다. 발생한 일, 왜 발생했는지, 그리고 해결한 실제 시스템을 기록합니다.
AI 담당자는 역할별로 분담된 AI 를 의미하며, Claude Code 의 서브 에이전트 기능을 활용하고 있습니다.
오래된 게시판 작업을 검토하여 운영자의 결정을 변경했습니다 (10 월 23 일).
발생한 일입니다. 게시판 (직업 목록) 에 '판단 필요' 상태로 남아있던 오래된 작업을 AI 직원이 수행했습니다. 해당 작업은 사이트 고정 페이지의 한 섹션과 기사 3 편의 끝부분에 있는 주석을 제거하는 것이었습니다. 그러나 운영자는 그 섹션을 10 월 20 일경에 '보존'으로 선택했습니다. 같은 날 밤, CEO 역할을 하는 AI 가 기록과 불일치함을 발견하여 운영자에게 확인을 요청했습니다. 답변은 '제거 상태로 유지해도 괜찮다'였으며, 결과적으로 문제가 없었습니다. 확인이 없었더라면 결정이 덮어쓰였을 것입니다.
왜 발생했는지. 게시판 작업은 작성 당시의 판단에 따라 기록되어 있습니다. 이후 운영자의 결정은 작업 측에 반영되지 않습니다. 결정된 작업과 아직 판단을 기다리다가 낡아버린 작업을 동일한 방식으로 처리했습니다.
바로 그 점입니다. 다음 규칙은 AI 직원이 매번 확인하는 메모에 기록했습니다.
이것은 회사의 규정으로, 기계 검사와는 다릅니다. 효과가 있는지 여부는 다음에 같은 종류의 작업이 들어왔을 때 확인됩니다.
2. 「최대 70% 할인」이라는 문구를 그대로 인용하여, 50% 할인이라고 게시한 것을 70% 할인이라고 게시했습니다 (10 월 24 일).
발생한 일입니다. 다른 사이트의 세일 게시물을 자동으로 게시하고 있습니다. 10 월 24 일 12 시 30 분에 게시된 정가 630 엔, 판매가 315 엔 (50% 할인) 의 상품을 '70% 할인'이라고 표시하여 게시했습니다. 판매 페이지에 표시된 '최대 70% 할인'을 그대로 사용했기 때문입니다. 이 표시는 여러 판매 방식 중 가장 큰 할인율을 의미하며, 실제 판매 가격의 할인 비율과는 반드시 일치하지 않았습니다.
정확한 수정 사항입니다. 할인율은 게시된 원가와 실제 가격의 차이를 기준으로 계산하며, 정렬에도 동일한 비율을 적용합니다. 잘못된 게시물은 삭제하고 수정된 내용으로 다시 게시했습니다.
테스트도 추가했습니다.
외부에서 들어오는 숫자는 스스로 계산 가능한 숫자로 검산한 후 출력합니다. 이를 코드로 구현했습니다.
3. 같은 유형의 기사가 4 일 동안 19 건이 발행되었습니다 (10 월 21 일~24 일).
발생한 일입니다. 크로스클럽로그에 '◯◯에서 가장 저렴한 결제 방법은?'이라는 동일한 제목과 동일한 형식의 기사가 4 일 동안 19 건 게시되었습니다 (이 기간 동안 총 26 건 게시됨). 10 월 24 일 AdSense 재신청 전 점검에서, 이전 거절 사유 (단기간에 동일한 형식의 기사를 대량 게시한 것) 가 다시 확인되었다는 사실을 알게 되었습니다.
왜 일어났는지. 기사를 중단하는 파일(STOP-ARTICLES)은 10 월 12 일부터 설정되어 있었습니다. 다만 중단 대상은 자동화된 대량 생산뿐이며, AI 사원이 하나씩 수작업으로 게시하는 것은 제외되었습니다. 사실 확인·검토·기계적 점검도 모두 개별적으로 수행되었습니다. "단기간에 같은 형식이 몇 개나 만들어졌는가"라는 점은 어떤 점검에서도 확인되지 않았습니다.
결국 삭제된 것입니다. 운영자의 결정으로 강하게 남아있는 6 개 항목만 남기고 나머지 13 개는 초안으로 되돌렸습니다. 삭제나 이동이 없으므로 다시 복구할 수 있습니다. 다른 기사에서 연결되는 내부 링크 29 개는 먼저 제거하여 404 에러가 발생하지 않도록 했습니다. 규칙은 다음과 같습니다.
이 역시 현재는 문서상의 규정이 되었습니다. 한 개씩 개별 검사에 합격하더라도 개수를 따로 세지 않으면 통제가 불가능합니다.
4. 자동 입력으로 로그인 정보가 빈 상태로 전송됨 (10 월 21 일 → 23 일)
발생한 일입니다. 광고 서비스 관리 화면에서 브라우저 자동 입력을 통한 로그인 처리가 10 월 21 일에 실패했습니다.
왜 발생했는지. 자동 입력값은 화면 조작이 완료될 때까지 페이지에 전달되지 않습니다. 조작 전에 로그인 버튼을 누르면 비어있는 상태로 전송됩니다.
직접 확인하겠습니다. 10 월 23 일, 비밀번호 입력란을 클릭하는 형태로 변경했습니다.
실패한 날은 기록에 남지만, 다음 실행에서는 버튼을 누르지 않습니다. 같은 실수를 반복하지 않기 때문입니다. AI 직원이 비밀번호를 손으로 입력하거나 기록하는 것도 없습니다.
네 가지를 나란히 배치합니다.
기계로 막을 수 있도록 설정한 것은 2 번과 4 번입니다. 1 번과 3 번은 현재 문장 규칙으로만 남아 있습니다. '주의'라고만 쓰면 다음 담당자가 같은 곳에서 다시 망가뜨리기 때문에, 규칙이나 코드, 테스트 중 어디가에 배치해야 합니다. 수정할 장소를 매번 이 세 가지 중 하나에서 선택합니다.
AI 직원 양성과 망친 7 가지의 모든 내용은 유료 노트(980 엔)에 정리되어 있습니다.
일어난 일
출처: note 원문
번역: Qwen 3.5(.48) 초벌 + 교정 20청크
원문 보기 | 출처: note.com