스킬 200개 전역 설치 방식과 하네스 정리 논쟁

낮 12시 50분을 넘기며 에이전트코리아 대화창은 한 참가자의 불만으로 달아올랐다. 상대가 쓰는 하네스가 가볍지 않을 것이고 스킬도 덕지덕지 남아 있을 것이라고 짐작한 참가자는, 새 세션을 열어 하네스를 가볍게 하고 안 쓰는 스킬을 점검시켜 보라고 권했다. 여기서 하네스는 에이전트를 둘러싼 규칙 문서와 스킬, 설정의 묶음을 가리키는 말로 읽힌다. 이는 기사의 풀이이며, 대화에서 따로 정의된 것은 아니다.

곧바로 다른 참가자가 반론을 내놓았다. 경량화를 해 봐야 그걸로 아낄 토큰은 10%도 안 된다는 주장이었다.

경량화로 나가는 토큰의 10% 도 안돼

경량화를 권한 참가자는 작은 낭비도 쌓이면 커진다고 받았고, 스킬 200개가 깔린 클로드 코드를 본 적이 있느냐고 되물으며 그 광경이 충격이었다고 말했다. 쓰는 토큰은 세금처럼 어차피 내야 하니 그 세금을 아껴야 한다는 것이 이 참가자의 논리였다. 한 참가자가 세션을 켤 때마다 스킬 200개를 매번 불러오느냐고 묻자, 그 자체가 이상하다는 반응도 나왔다.

개수보다 어디에 두느냐

한 개발자의 반응은 두 가지를 갈라 놓았다. 스킬이 200개가 되는 것은 가능하지만 그것을 전역으로 들고 다니는 것이 문제라는 것이다.

전역으로 들고다니면 안되지

이 개발자는 자신이 쓰는 정리 도구를 소개하며 설치하면 알아서 정리해 준다고 했다. 대화 안에서 전역 스킬을 몇 개씩 두고 있느냐는 질문이 이어졌고, 한 참가자는 스킬을 5개쯤만 쓴다고 답했다. 이 장면은 스킬이 많은 것 자체보다 매 세션에 기본으로 딸려 오는 범위가 비용과 혼란의 원인이라는 쪽으로 읽힌다. 이것 역시 대화에 근거한 풀이일 뿐 측정된 사실은 아니다.

멈추게 만든 계획

한 참가자는 자기 봇들의 규칙을 점검한 결과를 대화에 붙여 넣었다. 같은 규칙이 여러 문서에 되풀이해 복사되어 있고, 규칙 문서에 적힌 절차 가운데 실제로 코드가 막는 것은 일부뿐이라는 자체 점검 내용이었다. 해당 참가자는 혼자 정리해 보려니 기존 봇들과 새로 만드는 것을 어떻게 갈라야 할지 순서를 못 잡겠고, 작업 중 AI가 경고를 띄울 때마다 겁이 나서 자꾸 멈춘다고 털어놓았다.

겁나서 중간에 자꾸 멈춰요

이에 대한 조언은 단호했다. 꼬인 하네스 위에서 돌아가는 봇이 제대로 될 리 없으니 설계를 바닥부터 다시 하고, 지금 만든 것을 살릴 생각은 버리라는 것이다. 먼저 정보가 어디서 어디로 가고 각 구성 요소가 무슨 일을 하는지를 글로 정확히 풀어 보라는 주문도 따랐다. 자기 구조를 설명하지 못하면 그것은 쓸모없다는 말까지 나왔다.

자동화 앞의 반자동화

앞서 정리 도구를 소개했던 그 개발자는 자동화에 들어가기 전의 순서도 제안했다.

반자동화를 하나하나 때려가면서 해가야지

이 개발자는 자신도 자동화가 아직 무서워 시키지 않고 무조건 반자동으로 한다고 했다. 처음 조언한 참가자는 반자동화가 다 되고 나면 설계를 다시 해야 하며 두 단계는 전혀 다른 개념이라고 덧붙였다. 논쟁이 끝나갈 무렵에는 이미 잘 돌아가는 시스템은 일단 내버려 두고 고치는 일은 테스트 공간에서 하라는 정리가 나왔고, 한 참가자는 그 공간으로 샌드박스를 꼽았다. 샌드박스는 실제 환경과 떼어 놓고 안전하게 시험하는 공간을 뜻하는 말로, 이 풀이는 기사가 붙인 것이다. 삭제하기 겁나는 자료는 보관 폴더에 옮겨 두고 건드리지 않는 방법도 한 참가자가 제시했다. 앞서 멈춘다던 참가자는 남길 기록만 남기고 나머지는 지우는 쪽으로 뼈대를 다시 잡아 가는 중이라고 전했다.

읽히는 것

이날 대화는 한 줄로 요약되지 않는 의견 차이를 드러냈다. 한쪽은 도구와 스킬을 줄이는 일의 효과가 작다고 보았고, 다른 쪽은 정리되지 않은 구조가 낳는 낭비와 혼란이 크다고 보았다. 두 입장은 서로 다른 층위를 말하고 있어 반드시 충돌하는 것은 아닌 것으로 보인다. 토큰 절감 폭에 대한 수치는 대화에서 확인된 바 없고, 모두 참가자의 주장으로 남아 있다.

공통으로 읽히는 흐름은 에이전트를 많이 돌리기에 앞서 자기 구성이 어떻게 생겼는지를 설명할 수 있어야 한다는 감각이다. 자동화를 서두르다 멈춘 경험과, 반자동 단계에서 하나씩 확인하라는 조언이 같은 방향을 가리킨다는 점은 시사적이다.