같은 AI인데 왜 결과가 다를까 — 하네스 이야기

AI에게 “이것 좀 알아서 잘 처리해 줘”라고 부탁해 본 적 있으실 겁니다. 어떤 날은 기가 막히게 해내고, 어떤 날은 엉뚱한 걸 내놓습니다. 같은 도구, 같은 모델인데 왜 결과가 들쭉날쭉할까요. 빠진 것은 더 똑똑한 AI가 아닙니다. AI를 둘러싼 장치입니다. 요즘 AI 업계가 하네스(harness) 엔지니어링이라 부르기 시작한 것이 바로 그 장치를 설계하는 일입니다.

하네스는 본래 말에 채우는 마구(馬具)를 뜻합니다. 아무리 힘센 말이라도 마구 없이는 마차를 끌지 못합니다. 방향을 잡아 주는 고삐, 힘을 전달하는 끈이 있어야 비로소 그 힘이 일이 됩니다. AI도 똑같습니다. 모델이 아무리 좋아도, 그 힘을 일정한 결과로 바꿔 주는 장치가 없으면 매번 운에 맡기게 됩니다.

프롬프트에서 하네스로

지난 몇 년간 AI를 잘 쓰는 법의 무게중심은 계속 옮겨 왔습니다. 처음에는 프롬프트였습니다. “뭐라고 말해야 잘 알아들을까.” 다음은 컨텍스트였습니다. “무엇을 보여 줘야 제대로 일할까.” 그리고 지금은 하네스입니다. “어떤 환경에서, 어떤 규칙과 검증 속에서 일하게 할까.”

관심이 “모델에게 뭐라고 말하나”에서 “모델을 둘러싼 시스템을 어떻게 짜나”로 옮겨 온 것입니다. 한 번 말 잘하는 것보다, 매번 같은 품질이 나오도록 판을 짜는 일이 더 중요해졌다는 뜻입니다.

”잘 해줘”는 부탁, 막아 두면 규칙

차이를 가장 쉽게 보여 드리겠습니다. 새로 들어온 직원에게 “꼼꼼히 좀 해 주세요”라고 부탁만 하는 것과, 실수가 끼어들 수 없도록 체크리스트와 승인 단계를 만들어 두는 것은 완전히 다릅니다. 앞은 잘 될 수도 안 될 수도 있는 부탁이고, 뒤는 반드시 지켜지는 장치입니다.

AI도 마찬가지입니다. 프롬프트에 “우리 규칙을 지켜 줘”라고 적는 건 부탁입니다. 지킬 때도 있고 놓칠 때도 있습니다. 반면 규칙을 어기면 결과물이 자동으로 반려되도록 장치를 걸어 두면, 그건 규칙이 됩니다. 하네스 엔지니어링은 결국 이 부탁을 규칙으로 바꾸는 일입니다.

같은 AI, 다른 결과

그 차이는 생각보다 큽니다. OpenAI는 사람이 손으로 코드를 한 줄도 쓰지 않고, AI에게 일을 맡겨 실제 서비스를 출시했다고 밝혔습니다. 비결은 더 똑똑한 AI가 아니라, AI가 일하는 환경과 검증 절차 — 하네스 — 를 잘 설계한 데 있었습니다.

Anthropic 역시 오래 걸리는 작업을 AI에게 맡기려면, 매번 기억이 끊기는 AI를 위해 처음 판을 까는 장치와, 일을 차곡차곡 쌓는 장치를 따로 설계해야 한다고 설명합니다. 같은 모델을 두고도, 하네스를 어떻게 짜느냐에 따라 결과가 크게 갈리는 것입니다.

하네스는 결국 ‘파일’입니다

거창하게 들리지만 하네스의 정체는 단순합니다. AI가 따를 규칙을 적은 문서, 반복 작업을 한 번에 처리하는 작은 자동화, 결과를 자동으로 검사하는 장치 — 전부 한 번 만들어 두면 계속 일하는 파일들입니다. 손으로 매번 챙기던 것을, 장치가 대신 지켜 주는 셈입니다.

그리고 좋은 하네스에는 한 가지가 더 들어갑니다. 언제 사람이 확인할지를 정해 두는 것입니다. AI에게 전부 맡겨 버리지 않고, 중요한 길목에서는 사람이 한 번 보게 하는 장치 — 이 사람 게이트가 있어야 빠르면서도 안심할 수 있습니다.

그래서 이음은 도구가 아니라 하네스를 짓습니다

많은 곳이 “이 AI 도구 한번 써 보세요”라고 말합니다. 그런데 도구만 쥐어 주면, 결과는 그날그날 운에 맡겨집니다. 잘 되는 날도 있고 멈추는 날도 있습니다. 도구를 다루는 부담은 고스란히 당신 몫으로 남습니다.

이음은 도구를 권하는 데서 멈추지 않습니다. 당신 비즈니스에 맞는 하네스를 직접 지어 드립니다 — 규칙과 자동 검증, 그리고 사람이 확인할 길목까지. 그래서 우리가 드리는 것은 다루기 어려운 도구가 아니라, 믿고 맡길 수 있는 결과입니다.

사실 이 방식은 이음이 일하는 모든 곳에 배어 있습니다. 고객의 일을 맡을 때도, 심지어 이 웹사이트를 짓는 일에도 같은 하네스로 움직입니다. 한 번 잘 지어 둔 구조 위에서 일이 굴러가기에, 오래 함께할수록 더 정확하고 빨라집니다.

다음 한 걸음

당신 비즈니스에서 매주 손으로 똑같이 반복하는 일 하나를 떠올려 보십시오. 견적 정리, 문의 답장, 재고 확인 같은 것 말입니다. 그게 바로 하네스로 맡길 수 있는 첫 후보입니다.

무엇을 먼저 맡기면 좋을지, 이음의 무료 진단 30분으로 함께 찾아 드립니다. AI 도구를 또 하나 배우실 필요는 없습니다. 어려운 건, 저희가 짓겠습니다.