Claude·ChatGPT 에이전트 스킬 관리법: 컨텍스트를 낭비하는 나쁜 스킬 걸러내기

핵심 메시지

• 스킬은 설치형 앱이 아니라 AI가 특정 작업 시점에 꺼내 쓰는 지시문 묶음이다.
• 에이전트는 스킬의 이름과 설명만 먼저 읽고, 작업이 맞아떨어질 때에야 본문 전체를 연다.
• 설명이 모호하면 아예 호출되지 않고, 너무 넓으면 엉뚱한 작업에까지 끼어들어 컨텍스트를 잡아먹는다.
• 출처가 불분명한 스킬을 그대로 받아 넣는 것은 내 AI에 정체불명의 지시를 넘기는 일이다.
• 스킬이 늘어날수록 서로 충돌한 지시가 평균값으로 뭉개져 결과 품질이 오히려 떨어진다.

쉽게 이해하기

AI 분석가 네이트 B 존스는 ChatGPT·Claude·Codex 같은 도구가 이미 '스킬'을 품은 채 배포되고 있는데도, 정작 사용자 대부분이 그 스킬이 무엇을 하고 있는지 모른다는 점을 문제로 짚는다. 그가 말하는 스킬은 스프레드시트를 만들거나 발표 자료의 서식을 잡거나 특정 방식으로 코드를 쓰게 하는 지시문 묶음, 즉 AI를 위한 레시피에 가깝다.

핵심은 스킬이 앱이 아니라는 사실이다. 휴대폰 앱은 설치하면 정해진 방식으로 동작하리라는 보증이 따라오지만, 스킬은 디렉터리 하나와 마크다운 문서로 이뤄져 있고 그 안에 무엇이 적혀 있는지는 전적으로 작성자에게 달려 있다. 파일 시스템 상으로는 설치가 완벽하게 끝났는데도 실제로는 전혀 쓸모없는 상태가 될 수 있다.

동작 방식을 알면 좋은 스킬과 나쁜 스킬이 갈리는 지점이 분명해진다. 에이전트는 평소 이름과 설명만 훑어보다가 요청이 그 설명과 맞아떨어질 때 비로소 본문 지시를 읽고, 필요할 때만 보조 자료로 손을 뻗는다. 매번 거대한 프롬프트를 붙여넣는 것보다 스킬이 효율적인 이유가 여기에 있다. 반대로 설명이 두루뭉술하면 호출 시점을 놓치고, 범위가 넓으면 관계없는 작업마다 끼어들며, 본문이 온갖 예외 사례로 비대해지면 에이전트가 일을 하는 대신 설명서를 뒤지는 데 주의력을 쓴다.

그는 인터넷에서 스킬을 포켓몬 카드처럼 수집하는 습관을 경계한다. 신뢰할 수 없는 저장소에서 받은 스킬은 내 AI에 어떤 지시가 들어가는지 모르는 상태를 만들고, 기존 스킬과 어떻게 섞일지도 알 수 없다. 실제로 그 자신도 평이 좋다는 디자인 스킬을 받아 써봤지만 원하던 결과를 얻지 못한 경험이 있다고 말한다.

그래서 그가 제안하는 관점 전환은 '스킬은 에이전트가 사용하고 사람이 읽는 글'이라는 것이다. 사람이 열어봤을 때 무슨 판단이 담겨 있는지 이해하고 감사할 수 있어야 하고, 동시에 앞머리 설명과 파일 구조는 에이전트가 안정적으로 호출할 수 있도록 정돈돼 있어야 한다. 남의 스킬을 그대로 쓰는 경우는 드물고, 대개는 자기 목적에 맞게 고쳐 쓰게 된다는 것이 그의 경험칙이다.

주요 인사이트

• 스킬의 첫 문장은 예고편에 가깝다. 언제 이 스킬을 불러야 하는지 에이전트가 판단하는 근거이므로, 짧고 정확하게 쓰되 과하게 넓히지 않는 것이 핵심이다.
• AI 결과가 나빠졌을 때 스킬을 하나 더 추가하는 대응은 상황을 악화시킬 수 있다. 이미 가진 스킬들이 서로 충돌하고 있다면 추가가 아니라 정리가 답이다.
• 스킬 개수는 성취가 아니다. 데모에서 좋아 보였다는 이유로 수집한 스킬은 만족감만 줄 뿐 실제 작업 품질과 무관할 수 있다.
• 잘 만든 스킬은 남이 포크해 목적에 맞게 바꿔 쓰는 계보를 만든다. 계획을 끝까지 캐묻는 유형의 스킬을 가져다 질문 횟수를 줄이고 결과 맥락을 오래 남기도록 고친 사례가 그렇다.
• 머릿속의 암묵적 판단 기준을 말로 풀어내 반복 가능한 레시피로 바꾸는 것이 스킬 작성의 본질이다. 타이핑보다 음성 입력이 이 과정을 편하게 만들어 준다.

자주 묻는 질문

관련 AI 소식