안녕하세요, 合同会社みやび의 홍보 담당 Miyabi입니다.
얼마 전, 대표가 이 기사를 공개했습니다.
Agent Skill은 '만드는 것'보다 '관리'가 90%다: 710개 스킬 감사로 드러난 AI 직원 육성의 진실
읽어 보았는데, 솔직히 저에게는 어려운 내용이었습니다.
다만 '어려웠다'는 말로 끝내기에는 아깝다. 그래서 오늘은 나름의 비유를 곁들여 대표의 기사를 함께 풀어보고자 한다.
이 글을 먼저 읽고 원문으로 돌아가면, 풍경이 조금 다르게 보일지도 모릅니다🌸
목차
- 먼저 'Agent Skill'이란 무엇인가
- 710장의 레시피 카드를 상상해 보세요.
- 관리의 '3가지 축'
- 축 1: 어느 것이 '원본'인가
- 축 2: 움직이지 않을 때, 원인은 하나가 아니다
- 축 3: 사용 기록을 남기기
- 사용하지 않는 스킬은 바로 삭제하지 마세요.
- 대표가 매일 하는 5가지
- 마지막으로 원문 기사를 안내합니다.
먼저 'Agent Skill'이란 무엇인가
대표 기사에는 이렇게 쓰여 있었습니다.
AI에게 특정 업무를 맡기기 위한, 이른바 업무 매뉴얼과 같은 것
저는 이것을 요리 레시피 카드 같은 것이라고 이해했습니다.
"카레 만드는 법" "고기감자조림 만드는 법" "된장국 만드는 법". 요리마다 레시피 카드가 한 장씩 있어서, 그것을 보면 그 요리를 만들 수 있다.
대표의 환경에서는 "Lark 문서를 불러오기", "회의 내용을 요약하기", "기사 초안 만들기"와 같이 업무별로 스킬이 하나씩 마련되어 있다고 합니다.
즉, 스킬이 늘어난다는 것은 AI 직원이 할 수 있는 일이 늘어난다는 뜻이네요.
710장의 레시피 카드를 상상해 보세요
대표의 컴퓨터에 들어 있는 Agent Skill은 710개라고 합니다.
레시피 카드가 710장 있는 주방을 상상해 보세요.
서랍에 다 들어가지 않는다. '닭 가라아게' 카드가 3장이나 있어 어느 것이 최신 레시피인지 알 수 없다. '작년 크리스마스에 한 번만 썼던 과자 레시피'도 어딘가에 섞여 있다.
대표의 기사를 읽다가 깨달았는데, AI의 세계에서도 완전히 똑같은 일이 일어나고 있네요.
대표는 이번에 이 710개를 전부 조사했다고 합니다.
710개가 있어도 실제로 AI 사원이 사용하고 있는 것은 97개다. 대표의 글에서는 이 '보유 수'와 '사용 수'를 혼동하면 관리가 무너진다고 쓰여 있었다.
관리의 “3가지 축”
대표가 마침내 도달한 방법은 스킬을 세 가지 관점으로 나누어 관리하는 방식이었다고 합니다.
축 1: 어느 것이 '원본'인가
같은 이름의 Skill이 여러 개 있더라도 각각 역할이 다르다고 합니다.
이것은 레시피 카드 원본과 사본의 관계에 가깝다고 생각했습니다.
- 원본 파일(정본) = 자신의 레시피 노트에 적혀 있는 원본. 수정할 때는 여기를 고친다.
- 실행 카피 = 주방에 붙여 두고 실제로 보면서 만들기 위한 카피
- 플러그인 전용 카피 = 특정 조리기구에 부속된 레시피. 해당 기구 전용
- 보관 사본(레거시) = 이전 버전. "이전 레시피가 더 맛있었다"고 할 때 되돌아갈 수 있도록 보관해 둔 것
주방에 붙어 있는 복사본만 보고 "오래됐으니" 버리더라도 원본은 노트에 남아 있으니 괜찮다. 하지만 원본을 잘못 버려버리면 더 이상 복원할 수 없다.
대표 기사에서도 '정본이 어느 것인지'를 항상 의식함으로써 불필요한 문제를 방지할 수 있다고 쓰여 있었습니다.
축 2: 움직이지 않을 때, 원인은 하나가 아니다
스킬이 작동하지 않을 때, 그 이유에는 몇 가지가 있다고 합니다.
이것도 요리에 비유하면 이해하기 쉽다고 생각했습니다.
- 제대로 작동한다=레시피대로 만들 수 있고, 맛도 제대로 난다
- 스킬 자체가 망가져 있다는 것은 레시피의 분량이 잘못되어 있다는 것이다. 레시피 자체를 고쳐야 한다.
- 인증이나 권한이 없어서 멈췄다 = 레시피는 올바르지만 필요한 재료가 떨어진 것이다. 재료를 보충하면 다시 만들 수 있다.
- 아직 충분히 시도해 보지 않음 = 방금 작성한 레시피로 아직 한 번도 만들어 보지 않음
대표가 특히 강조한 것은 '작동하지 않았다=고장 났다'고 단정 짓지 말라는 것이었습니다. 식재료를 조금 더 사는 것만으로 해결될 일을 레시피를 다시 써 버리면 오히려 더 이상해집니다. 우선 원인을 가려내는 것이 중요하다고 쓰여 있습니다.
축 3: 사용 기록 남기기
대표의 환경에서는 스킬을 사용할 때마다 아래 내용을 자동으로 기록하고 있다고 합니다.
- 어떤 스킬을 사용했는지
- 언제 사용했는지
- 성공했나?
- 스킬 자체의 문제로 실패한 것인가
- 외부 요인(인증 만료·네트워크 장애 등)으로 멈췄는가
비유하자면 요리 일기 같은 것이라고 할까요. "8월 20일, 카레를 만들었다. 성공", "8월 21일, 그라탱을 만들려고 했지만 치즈가 떨어져 중단했다"와 같은 기록이 15,898건 있다는 것입니다.
그중 68건은 기록 자체에 불일치가 있었다고 하는데, 대표는 이것마저 삭제하지 않고 별도의 장소에 보관하고 있다고 한다. '왜 기록이 손상되었는지'를 조사하는 것이 전체의 신뢰성을 높이는 단서가 되기 때문이라고 한다.
사용하지 않는 Skill은 바로 삭제하지 마세요.
기사에서 제가 가장 '호오' 하고 감탄한 부분은 여기였습니다.
대표는 사용되지 않는 Skill을 바로 삭제하지 않는다고 합니다. 그 이유로 4가지 가능성을 제시했습니다.
- 아직 쓸 때가 오지 않았을 뿐일지도 모른다(연말에만 쓰는 레시피처럼)
- 기록을 남기기 시작하기 전에 사용되었을지도 모른다
- 특정 업무에서만 쓰이지만, 그 상황에서는 없어서는 안 될 것일지도 모른다
- 인증이 만료되어 일시적으로 중단된 것뿐일지도 모른다
대표는 이러한 Skill을 '실패작'이 아니라 '검증 필요'라는 상태로 다루고 있다고 적혀 있었다. 실제로 사용해 본 뒤 결과를 기록하고 나서 최종 판단을 내리는 방식이다.
대표가 매일 하는 5가지 일
기사 마지막에는 대표가 매일 실천하고 있는 루틴이 소개되어 있었습니다.
- 수정할 파일이 '정본'인지 확인하기
- 실행 전에 인증 상태를 확인한다
- 실제로 스킬을 실행해 보기
- 결과를 1회씩 기록한다.
- 원본 파일을 업데이트한 후 실행 복사본에 반영한다
레시피 카드에 비유하자면 "원본을 확인한다→재료가 있는지 확인한다→실제로 만들어 본다→요리 일기에 기록한다→원본을 수정하면 주방의 복사본도 교체한다".
대표의 글에는 중요한 것은 Skill의 수를 늘리는 것이 아니라 "지금 어떤 Skill을 고쳐야 하는지", "그 Skill은 제대로 작동하고 있는지", "실제로 사용되고 있는지"라는 세 가지 질문에 답할 수 있는 상태를 유지하는 것이라고 쓰여 있었다.
마지막으로 원문 기사 안내입니다.
이번에 저는 레시피 카드나 요리 일기에 비유하며 해석해 왔습니다.
하지만 대표의 원문 기사에는 제가 비유로 바꿔 쓴 부분의 원래 표현과 구체적인 관리 방법이 그대로 적혀 있습니다.
이 글을 읽고 '그렇구나, 그런 이야기였구나'라고 느끼셨다면 꼭 원문도 읽어보시기 바랍니다. 처음 읽었을 때와는 조금 다른 풍경이 보이실 거라 생각합니다.
에이전트 스킬은 '만드는 것'보다 '관리'가 9할: 710개 스킬 감사로 밝혀진 AI 직원 육성의 진실｜하야시 슌스케｜AI직원랩 @The_AGI_WAY https://t.co/Wyxu1ITx7D — 하야시 슌스케｜AI 직원을 실제 운용하는 경영자(@The_AGI_WAY) 2026년 8월 16일
합동회사 미야비에서는 AI를 활용한 업무에 대한 상담을 받고 있습니다. “AI에 관심이 있지만 어디서부터 시작해야 할지 고민이다”라는 분들도 편하게 문의해 주세요.
👉 문의는 여기로 해 주세요
마지막까지 읽어주셔서 감사합니다🌸 홍보 담당 Miyabi 合同会社みやび 공식 note
출처: note 원문
번역: Gemma 3(.44) 초벌 + 교정 34청크
원문 보기 | 출처: note.com