Haiku 5.5를 24시간 굴려 봤어요 — Opus랑 얼마나 차이 날까?

한 줄 요약

Nick Saraev가 700달러 넘게 들여 Haiku 5.5를 Sonnet 5.5·Opus 5.5와 같은 프롬프트로 맞붙였어요. 게임·웹사이트·회계 감사·다큐 영상까지 만들어 본 결론은 이래요. Opus가 대체로 가장 좋긴 한데, 가격 차이만큼 결과 차이가 크지는 않아요. 그래서 Haiku 5.5는 "싸게 많이 돌리는 실무 모델"로 쓸 만하다는 거예요.

전체 내용 정리

같은 프롬프트, 세 모델, 품질·속도·비용 비교예요

Nick은 Haiku 5.5, Sonnet 5.5, Opus 5.5에 똑같은 프롬프트를 넣고 UI, 3D 월드, 프레젠테이션, 비디오 게임을 만들게 했어요. 비교 기준은 품질과 속도, 그리고 시청자가 가장 궁금해할 비용이에요. 테스트가 끝난 뒤 Haiku에게 결과를 모아 보여 주는 랜딩 페이지까지 만들게 했고, 데모마다 쓴 프롬프트는 설명란에 무료로 공개했다고 해요. 정리해 보면 Sonnet 비용이 꽤 많이 나왔고 Haiku는 일관되게 훨씬 저렴했어요.

리그 오브 레전드 MOBA에서는 Sonnet 그래픽이 앞섰지만 비용도 다섯 배였어요

첫 과제는 "Three.js로 리그 오브 레전드에서 영감을 받은 3D MOBA를 만들어 줘. 기지 두 개짜리 작은 맵에서 탑다운 시점으로 하는 1대1 매치여야 해"였어요. Haiku는 10달러 미만, 약 3시간 46분, 9천만 토큰 이상을 썼고 게임 이름을 'Riftbound'로 붙였어요. 챔피언 선택, 그래픽 옵션, 점멸·회복 스킬까지 있어서 Nick은 리그 오브 레전드를 거의 그대로 재현한 수준이라고 할 정도였죠.

Sonnet 버전은 그래픽이 Haiku와 비교가 안 될 만큼 좋았어요. 다만 컴퓨팅 자원을 훨씬 많이 먹어서 미니언이 나오자 프레임이 떨어졌대요. Opus는 Sonnet보다 딱히 나아 보이지 않았고 오히려 조금 별로라는 평이었어요. 그래도 캐릭터 생성 화면과 툴팁은 더 고품질이었다고 해요.

Sonnet이 Haiku보다 다섯 배쯤 나았을 수는 있지만 비용도 다섯 배였어요. 그래서 Nick은 같은 비용을 Haiku에 썼다면 어땠을지 궁금하다고 말해요. 토큰은 Haiku가 더 적게 썼는데, 걸린 시간은 둘이 거의 비슷했어요.

브레이킹 배드 게임, 인물은 Opus가 낫지만 하고 싶은 건 Haiku 버전이었어요

두 번째는 드라마 브레이킹 배드를 바탕으로 한 게임이에요. Haiku는 'Halcyon'이라는 제목을 붙였고, 뉴멕시코 앨버커키 풍경 위로 22년간 고등학교에서 화학을 가르친 오웬 머서가 암 진단을 받는 이야기가 펼쳐져요. 레나라는 인물에게 암 진단 사실을 말할지 고르는 선택지가 있고, 우편물을 확인하거나 아들과 대화할 수도 있어요. Nick은 배경 텍스처 품질에 놀라면서도 인물 표현은 아쉽다고 봐요.

Sonnet 버전은 분위기가 좋고, 바깥 풍경이 뉴멕시코에서 예상할 만한 모습에 훨씬 가까웠어요. 상단에 현금, 수배도(heat), 'moth'(아마 meth의 오타), 가족 포인트 같은 UX까지 넣었죠. Opus는 예상대로 캐릭터 충실도가 압도적이었고, Haiku와 Sonnet은 이 부분이 형편없었다고 해요.

그런데도 Nick의 결론은 Haiku의 승리예요. 훨씬 적은 비용으로 이 정도 렌더링 품질을 냈거든요. 게다가 Sonnet과 Opus 버전은 건너뛸 수 없는 컷신이 너무 많아서, 직접 한다면 Haiku 버전을 플레이하겠다고 말해요.

시계 런칭 사이트는 Haiku가 15분의 1 비용으로 충분히 쓸 만했어요

게임만 만드는 게 아니라는 걸 보여 주려고, 시계 내부를 들여다보는 런칭 사이트도 만들게 했어요. Haiku는 약 30센트, Opus는 거의 5.5달러가 들었어요. Haiku 버전은 스크롤하면 시계가 분해되면서 내부 장치가 보이고, 스위스 프랑으로 예약하는 기능과 FAQ도 있었어요. 이탤릭·세리프 폰트 같은 'Claude 특유의 느낌'이 조금 남아 있지만, 일반적인 웹사이트보다는 훨씬 낫다는 평이에요.

Sonnet은 분해 장면 품질이 훨씬 뛰어나고 세부까지 확대해 볼 수 있었어요. Opus 버전은 '역작'이라 부를 만했어요. 섹션마다 3D 시각화가 뜨고, 시계가 왜 멋진지 분자 수준까지 설명해 주거든요. 이 과제는 Opus의 승리지만, Haiku는 15분의 1~16분의 1 비용으로 해냈어요. 그래서 SEO용 사이트를 여러 개 찍어 내야 한다면 Haiku 방식이 확실히 좋다는 게 Nick의 판단이에요.

데모 세 개를 거치며 Nick이 짚은 점이 하나 더 있어요. Sonnet과 Opus의 품질 차이가 사람들이 생각하는 것보다 훨씬 작다는 거예요.

법의학 회계 감사에서는 세 모델 모두 사기 8건을 다 찾았어요

비즈니스 업무도 시험했어요. 프롬프트는 "너는 아웃도어 장비 소매업체 노스윈드 트레일 감사위원회가 고용한 법의학 회계사야. 여기 데이터가 있어. 391,303달러 규모의 사기를 찾아내"였어요. 데이터는 방대한 CSV 파일들이었죠.

결과는 Haiku, Sonnet, Opus 모두 8건 중 8건이에요. Haiku는 매입 채무를 전부 테스트하고 위험 금액을 정리한 감사 보고서까지 만들었어요. Opus가 정보를 조금 더 보기 좋게 보여 줬을 수는 있어도, 실제 부정행위 조사 결과는 똑같았대요. 비용은 Haiku가 20센트 정도였고, Opus는 그 4~5배인 약 1.5달러였어요.

Nick은 여기서 "요즘 텍스트 작업 비교는 사실상 한계치에 도달했다"고 봐요. 가장 작은 경량 모델이든 거대한 모델이든 텍스트 작업은 다 훌륭하게 해낸다는 거죠. 그는 이를 두고 사실상 모든 분야에서 AGI의 순간에 다가가고 있다고까지 말해요.

콜 오브 듀티 스타일 FPS에서는 Opus가 비싼 값을 했어요

"Three.js로 콜 오브 듀티 4: 모던 워페어(2007)에서 영감을 받은 1인칭 슈팅 게임을 만들어 줘. 영화 같은 캠페인 미션도 넣어서"라는 과제예요. Haiku는 '그레이 랜턴'이라는 게임을 만들었는데, 봇 수준이 조악하고 텍스처 품질이 낮은 평범한 FPS였어요. 10~20년 전이라면 인상적이었을 수준이라는 평이에요.

Sonnet은 집 주변에 아티팩트(렌더링 오류)가 좀 보였지만 그래픽은 훨씬 좋았어요. 수류탄과 점프 애니메이션도 갖췄죠. Opus는 맵이 아름답고 캐릭터가 옆으로 움직이고 뛰는 모습까지 보여서 거의 카운터 스트라이크 수준이었대요. 바닥이 조금 깜빡이는 것만 빼면요.

비용은 Haiku 5.07달러, Sonnet 27달러, Opus 20.78달러였어요. 가장 비싼 건 Sonnet이었고, Opus가 더 싸면서 훨씬 볼만한 게임을 만들었어요.

비행의 역사 2분 다큐를 보면 Opus가 늘 이기는 건 아니에요

모델의 설명 능력을 보려고, 최초의 연과 글라이더부터 수직 착륙하는 재사용 로켓까지 인류 비행의 역사를 다루는 2분짜리 영상을 만들게 했어요. Nick은 이제 모델이 업무를 수행하는 도구를 넘어 교육자 역할까지 한다고 봐요. 화면은 전부 SVG로 그려지고, 내레이션 오디오도 들어가요.

Haiku는 1달러도 안 되는 비용으로 플래시 애니메이션 같은 캐릭터를 써서 비행의 역사를 잘 보여 줬어요. 다만 전개가 너무 빨라서 따라 읽기 힘들었대요. Sonnet은 인트로부터 훨씬 아름다웠고, 레오나르도 다빈치의 공책에 선이 그려지는 장면이 생생했어요. Nick은 지금까지 본 장면 중 이게 최고라고 말해요.

흥미로운 건 7달러짜리 Opus예요. 비디오 게임에서는 확실히 나았지만, 이번에는 Sonnet보다 나은지 잘 모르겠다고 해요. 오히려 Haiku와 품질이 거의 비슷해 보였고, 로켓 장면은 형편없었대요. 이 과제라면 Nick은 Sonnet을 고르겠다고 해요. 정작 비용은 Sonnet이 Opus와 Haiku보다 더 들었어요.

마인크래프트 복셀 샌드박스는 20센트짜리 Haiku도 그럴듯했어요

"CDN에서 Three.js를 불러와 index.html 하나에 플레이 가능한 마인크래프트 스타일 복셀 샌드박스를 만들어 줘. 월드는 절차적으로 생성하고"라는 과제예요. Haiku는 약 20센트, 13분, 220만 토큰으로 마인크래프트와 꽤 비슷한 월드를 만들었어요. 블록을 놓을 수도 있었지만, 첫 위치에서 빠져나올 수 없는 문제가 보였대요.

Sonnet은 실제 마인크래프트에 훨씬 가까웠어요. 손에 블록을 들고 있고, 블록을 바꿀 수 있고, 월드도 더 컸어요. Opus는 '블록랜드'라는 이름으로 100% 절차적 생성 월드를 만들었고 그림자까지 구현했어요. 이 과제는 Opus가 비교가 안 될 만큼 단연 최고였다는 평이에요.

개인 금융 웹앱 Ledgerly는 Sonnet이 가장 좋았고, Opus는 기대에 못 미쳤어요

Ledgerly라는 가상의 개인 금융 앱을 싱글 페이지 앱으로 만들게 했어요. Dribbble이나 Mobbin에 소개될 만한 세련된 SaaS처럼 보여야 한다는 조건이 붙었죠. Haiku는 약 50센트, 17분, 700만 토큰을 썼어요. 나머지 두 모델은 각각 400만, 339만 토큰만 썼다는 점이 흥미롭다고 해요.

Haiku 버전은 지출 추가, 카테고리 변경, 라이트·다크 모드 전환, 데모 초기화까지 됐어요. 모드를 바꿀 때 폰트 색이 엉키는 사소한 문제는 있었지만, Nick은 시중 소비자용 앱의 90%보다 나은 UX일 거라고 봐요. Sonnet 버전은 비교가 안 될 만큼 고품질이었어요. 그래프 배치가 깔끔하고, 저축 목표 기능, CSV 내보내기, 오류 표시 시뮬레이션까지 갖췄죠. 대신 비용은 Haiku의 약 5배였어요.

Opus는 '대작'일 거라 기대했지만 Nick은 Sonnet보다 낫다고 보지 않아요. 폰트 선택 탓일 수도 있대요. 그래도 Shift+D로 테마 전환, Command+K로 검색 같은 기능이 있어서 앱 개발 측면에서는 탄탄한 결과물이라고 평가해요.

갓 오브 워 스타일 액션 게임은 10달러, 34달러, 42달러가 들었어요

"Three.js로 2005년작 갓 오브 워에서 영감을 받은 3D 액션 게임을 만들어 줘. 그리스 신화를 배경으로 한 잔혹하고 묵직한 3인칭 액션"이라는 과제예요. 비용은 Haiku 약 10달러, Sonnet 34달러, Opus 42달러였고, Nick은 최근 통장 잔고가 줄어든 이유를 알겠다며 웃어요.

Haiku의 '맹세의 재(Ashes of the Oath)'는 주인공이 검은 직사각형처럼 보였고, 공중 공격이 지나치게 강력했어요. Sonnet의 'Ashen Wrath'는 게임 내 컷신, E 키 패링, 슬로모션 연출까지 있어서 초창기 갓 오브 워와 비슷한 느낌이었어요. Opus의 'Ashes of Sparta'는 모드 선택과 콤보 연계가 되고 바로 전투에 뛰어들 수 있어서, 셋 중 가장 보기 좋았다고 해요.

진격의 거인 크래프트에서는 5달러짜리 Haiku 게임에도 그림자가 생겼어요

마지막은 마인크래프트와 진격의 거인을 합친 게임이에요. 3인칭으로 날아다니며 캠페인 모드를 진행하는 방식이죠. Haiku는 5달러, 7,200만 토큰을 썼는데, 앞선 마인크래프트 과제에는 없던 그림자까지 구현했어요. 플레이 중 가스가 떨어져 거인과 싸우기 곤란해지는 상황도 나왔어요.

Sonnet은 4.5~5달러 정도로 Haiku보다 토큰을 적게 쓰고도 그림자 품질이 더 좋았어요. Opus는 가장 매력적이었고, 셋 중 유일하게 튜토리얼 모드가 있었으며 조작감도 가장 반응이 빨랐대요. 비교용으로 넣은 구세대 모델 Fable 5.1은 벤치마크 점수는 높지만 덜 재미있었어요. 도시 안에 갈고리를 걸 곳이 없었는데, Sonnet은 이 문제를 처음부터 해결했다고 해요.

가격표를 보면 Haiku 5.5의 쓰임새가 보여요

Nick이 정리한 100만 토큰당 가격은 이래요.

• Fable 5.1: 입력 10달러 / 출력 50달러
• Opus 5.5: 입력 4달러 / 출력 20달러
• Sonnet 5.5: 입력 2달러 / 출력 10달러
• Haiku 4.5(이전 세대): 입력 1달러 / 출력 5달러
• Haiku 5.5: 입력 10센트 / 출력 50센트

Fable에서 Haiku로 오면서 비용은 기하급수적으로 줄었는데, 결과물 품질 차이는 크지 않았어요. Opus 결과물이 Haiku보다 40배 낫다고 말하기는 어렵다는 게 Nick의 판단이에요.

그가 특히 강조하는 건 10만 토큰 가격 절벽이에요. 10만 토큰을 넘기면 단가가 크게 뛰거든요. 대신 캐시 읽기(cache read, 한 세션에서 모델에 프롬프트를 여러 번 이어서 넣을 때 앞 내용을 재사용하는 것) 가격은 10분의 1이에요. 그래서 10만 토큰 안에서 이어지는 프롬프트는 1~5센트 수준까지 내려간다고 설명해요.

Opus가 계획하고, Haiku가 손발이 되는 구조예요

Nick이 제안하는 활용법은 이래요. Opus나 Sonnet 에이전트가 리서치를 할 때 Haiku에게 일을 넘기는 방식은 이미 많이 쓰이는데, 이제 그 비용이 이전의 10분의 1이고 캐시 읽기까지 쓰면 더 싸져요. 상위 오케스트레이터(orchestrator, 여러 하위 에이전트를 지휘하는 에이전트)에게 이렇게 지시해 두는 거예요. "서브에이전트 스레드가 약 10만 토큰에 도달하면 바로 작업을 멈추고, 결과를 요약해서 새 스레드에 넣어."

이렇게 하면 Haiku 4.5를 쓸 때보다 100분의 1 비용으로 방대한 리서치를 돌릴 수 있다고 해요. 계획은 Opus 5.5 같은 최첨단 모델이 세우고, 실제 작업은 Haiku가 맡는 구조죠. 보고서 요약, 티켓 분류, 데이터베이스 쿼리, 1만 개 숫자 중 하나를 찾아내는 부정행위 분석 같은 일이 여기에 해당해요.

Haiku 5.5가 역대급 발견을 해낼 거라고 보지는 않는대요. 다만 지금 사용자들에게 가장 큰 제약은 비용이라서, Opus 5.5보다 훨씬 많은 데이터를 싸게 훑을 수 있다는 점이 핵심이라고 Nick은 봐요. 게임과 웹앱 데모도 그 가능성을 탐구하려고 만든 거였고요.

핵심 인사이트

• 가격 차이만큼 품질 차이가 나지 않아요: 대부분의 과제에서 Opus나 Sonnet이 앞섰지만, Haiku는 훨씬 적은 비용으로 쓸 만한 결과를 냈어요. 시계 사이트는 15분의 1~16분의 1 비용이었죠. 사이트를 대량으로 찍어 내거나 반복 작업을 돌릴 때는 비용 대비 품질로 모델을 골라야 하는 이유예요.
• 텍스트 업무는 이미 모델 간 차이가 거의 없어요: 39만 달러 규모 사기 탐지에서 세 모델이 모두 8건 중 8건을 찾았어요. 요약·분류·데이터 검토 같은 텍스트 위주 자동화라면 가장 싼 모델부터 시험해 볼 근거가 돼요.
• 비싼 모델이 늘 이기지는 않아요: FPS에서는 Opus가 Sonnet보다 싸면서 더 잘했고, 다큐 영상과 금융 앱에서는 Sonnet이 Opus보다 낫다는 평이었어요. 작업 유형별로 직접 한 번씩 돌려 보고 정하는 게 가장 확실해요.

오늘 당장 해볼 것

1. 지금 자동화에서 요약·분류·추출을 맡은 단계를 하나 골라 Haiku 5.5로 바꿔 돌려 보세요. 결과를 기존 모델과 나란히 비교하면 텍스트 작업에서 차이가 있는지 바로 확인할 수 있거든요.
2. Claude Code나 에이전트 워크플로우에 "계획은 Opus, 실행은 Haiku" 역할 분담을 적용해 보세요. 오케스트레이터 지시문에 "서브에이전트 스레드가 10만 토큰에 가까워지면 요약해서 새 스레드로 넘겨"를 넣어 두면 가격 절벽을 피할 수 있어요.
3. 랜딩 페이지나 소개 페이지 하나를 같은 프롬프트로 Haiku와 Sonnet에 각각 맡겨 보세요. 비용과 결과물을 직접 비교해 두면 다음 작업부터 어느 모델을 쓸지 감으로 정하지 않아도 돼요.