AI 품질 평가 플랫폼 Braintrust가 OpenAI의 Codex와 GPT-5.5를 활용해 고객 기능 요청을 수 분 내에 작동 가능한 preview branch로 변환하는 데 성공했다. 팀 규모의 절반이 1개월 내 Codex로 업무 방식을 전환했을 정도로 개발 속도가 극적으로 개선됐다.

Braintrust는 생성형 AI 기반 제품의 품질과 성능을 평가하고 모니터링하는 플랫폼이다. 회사가 주목한 Codex의 가장 큰 강점은 "속도"다.

Ankur Goyal 창립자 겸 CEO는 "Codex는 터미널에서 더 많은 텍스트를 직접 출력할 수 있으면서도 속도가 떨어지지 않는다"며 "다른 모델들은 이 속도를 따라올 수 없다"고 강조했다. 단순해 보이는 이 차이가 개발 워크플로우를 근본적으로 바꿨다.

기능 요청 → 실시간 피드백 루프로의 전환

기존에는 고객 기능 요청이 제출되면 백로그에 들어가 우선순위에 따라 나중에 처리되곤 했다. Codex로는 다르다. 엔지니어들은 요청을 복사해 Codex에 입력하고, 해당 기능을 구현한 preview branch를 만들어 고객에게 보여줄 수 있다. 이 전 과정이 수 분 내에 완료된다.

Goyal은 "Codex의 정말 좋은 점은 고객과 함께 실시간으로 기능 요청을 반복하고 발전시킬 수 있다는 것"이라고 말했다. 기존에는 고객-개발팀 간의 피드백이 회의, 이메일 등 비동기식으로 진행되다 보니 여러 사이클을 거쳤다. Codex의 속도라면 고객이 회의 중이나 데모 세션에서 즉시 아이디어를 검증할 수 있다.

속도가 실험 문화를 가능하게 하다

속도 향상은 단순한 성능 개선을 넘어 사고방식 자체를 바꿨다. Goyal은 이제 "다른 모델처럼 단계적으로 프롬프트를 작성하지 않는다"고 설명했다.

대신 새로운 실험 방식을 택했다. 먼저 문제를 설명하는 테스트를 작성하고, 샌드박스 환경을 구성한 뒤, Codex가 그 환경 안에서 자동으로 실행되도록 한다. 느린 도구는 많은 수동 개입이 필요해서 실험 비용이 높지만, Codex의 속도라면 이런 저비용 실험이 가능해진다.

"더 많은 코드를 작성할수록 더 많은 고객 문제를 풀 수 있고, Codex가 지금 그걸 가장 효과적으로 하는 방법"이라고 Goyal은 덧붙였다.

산업적 의미 — 개발 문화의 재편

이 사례는 코드 생성형 AI의 "속도"가 단순한 편의성을 넘어, 엔지니어링 팀의 협업 방식과 고객 피드백 루프를 완전히 재구성한다는 점을 시사한다. 기존 개발은 계획→구현→검증의 선형 구조였다면, Codex 시대는 아이디어→즉시 프로토타입→실시간 피드백의 순환 구조로 전환될 가능성이 크다.

특히 사용자와 개발팀 간의 공동 창작이 분 단위로 가능해지면, 스타트업부터 대규모 조직까지 제품 개발 속도와 방식 자체가 재편될 것으로 예상된다. 프로토타이핑 문화가 강화되는 반면, 배포 전 코드 리뷰·테스트·기술 부채 관리에 미칠 영향에 대해선 여전히 업계의 관찰이 필요하다.

Braintrust 같은 AI 품질 평가 플랫폼의 역할도 더욱 중요해질 전망이다. 생성형 AI의 속도가 빨라질수록 산출물의 정합성·안정성을 점검하는 프로세스가 필수 요소가 될 것이기 때문이다.