지피터스 팀이 AX를 더 잘하기 위한 방향 3가지

소개

제가 시도한 것은 아니고 함께 공유하고자 하는 현재 지피터스팀이 다음 레벨의 AX 조직이 되기 위한 방향입니다.

ALT

여자가 컴퓨터 화면에서 이야기하고 있다

첫 번째 - 퇴근할 때 에이전트 일 시키고 퇴근할 방법 찾기

위의 영상 스크린샷은 How I AI의 Claire Vo 가 GPT 5.5에게 프롬프트 하나로 GPT가 6시간 연속으로 일을 하게 했어요.

원 영상 - https://youtu.be/kCMgUvnpzsM?si=XmbqVz1qpFYO5Xkx

I need you to figure out a way to programmatically test every thread that's currently in local for validation issues and success posting to Anthropic and Open Al. I want t make a scalable system here, ideally a CLI, that any agent can call to test a thread and any shape of new message including messages that could potentially have file parts in them, attachments, etc. I trust you make a call and then figure out how to spawn a subagent to use this, test this, identify any issues in all my threads, repair them and get this ready for production. Thank you.

현재 로컬에 있는 모든 스레드를 프로그래밍 방식으로 테스트해서, 검증 이슈가 있는지와 Anthropic 및 OpenAI에 성공적으로 포스팅되는지 확인할 방법을 찾아줘.

여기서는 확장 가능한 시스템을 만들고 싶어. 이상적으로는 어떤 에이전트든 호출해서 특정 스레드와 어떤 형태의 새 메시지든 테스트할 수 있는 CLI였으면 해. 여기에는 파일 파트가 포함될 수 있는 메시지, 첨부파일 등이 포함될 수 있어.

네가 적절히 판단해서 진행해줘. 그리고 이걸 사용할 서브에이전트를 띄우는 방법을 찾아서, 테스트하고, 내 모든 스레드에서 문제를 식별하고, 수정한 뒤, 프로덕션에 배포할 준비까지 해줘.

지금 우리 팀은 클로드 코드, 오픈클로 에이전트 도입이 성공적이라 생각합니다. 하지만, 아직도 우리가 6개의 터미널을 띄우고 각 터미널에서 5 ~ 15분 짜리 일을 시키는 것을 여러개 돌아가며 하고 있어요.

그래서, 우리가 쉬는 시간에 에이전트도 쉬게 됩니다.

이제 우리가 쉴때도 에이전트가 일 할 수 있는 여건을 만들어야 합니다.

두 번째 - AI의 성능을 끌어 올리는 AI Evals

오픈클로에 GPT 5.4를 붙이면, Opus 4.6보다 말투나 일하는 것이 성능이 엄청 떨어지는 것을 체감을 많이 하고 있어요. 하지만, 이게 모델의 문제가 아니라 우리가 잘 쓰지 못하는 것일수도 있어요.

이를 비교해본 블로그가 있어서 흥미로웠습니다. Opus에서 쓰던 SOUL과 같은 .md 파일들의 내용을 모델에 맞게 최적화하면, 비슷한 성능이 나온다는 것이 핵심이었어요.

원문: GPT-5.4 in OpenClaw doesn’t suck. Your prompts do. • Skylar Payne

핵심 결과는 이 그래프에요:

ALT

훈련은 gpt 5 4를 많이 변경했습니다.

Opus 4.7과 비교하면,

그리고, 이런 최적화하는 것도 간단한 AI-Eval을 AI에게 시키는 것이었어요.

우리 팀 개인이 이런 간단한 AI Eval을 사용할 수 있다면, 훨씬 매일의 업무를 더 정확하게 할 수 있게 될 것 같아요.

세 번째 - 팀이 함께 쓸 수 있는 스킬 만들기

우리가 AI에게 시키는 일들, 작은 반복적인 것을 스킬로 만들어 공유하려 했습니다. 그런데, 이전 작은 반복적인 것이 아니라, 길고 복잡한 일, 많은 인지적 노력이 필요한 것도 스킬로 만들어서 공유할 수 있게 되었어요.

그래서 우리가 에이전트에게 다양한 업무를 시켜 보면서, 이거 만들면 팀에 도움이 되겠는데? 하는 것들을 찾아 적극적으로 aitk 에 공유면, 전체 팀이 다 혜택을 보게 됩니다.

• aitk - AI Toolkit

이 부분 매주 고민해야 할 부분인 것 같아요.

결과와 배운 점

지난 4주간 우리 팀의 AX 게시물의 수가 급감했습니다.

하지만 우리가 AI를 안쓰고 있진 않았어요.

작은 인사이트라도 적어두고 팀이랑 같이 나눠요. 그런 행동이 쌓여서 결국 큰 결과가 나올겁니다.

매일 새로운게 나오는 이 시점에, 매일 조금씩 해 가는 사람이 앞서갑니다.

지피터스 팀원 각자가 AI 전문가로 함께 성장해봅시다!