기본 콘텐츠로 건너뛰기

AI도 수능 봤다…450점 만점?, 한국 AI는 몇 점?

AI도 수능 봤다…450점 만점, 한국 AI는 몇 점? AI가 올해 수능을 풀었다면 몇 점을 받았을까요. 이데일리는 2026년 11월 20일, 한 대학생이 국내외 AI 모델에게 2027학년도 수능 문제를 풀게 하고 그 결과를 대시보드로 공개했다고 보도했습니다. 결과부터 말하면 미국 모델 두 개가 450점 만점을 받았고, 국내 모델 1위와는 35.3점 차이가 났습니다. 한눈에 보기 오픈AI GPT-6.2 아스트라 와 구글 제미나이 4 네온 이 450점 만점으로 공동 1위. 국내 1위 LG AI연구원 K-엑사원 2.5 는 414.7점으로 전체 12위였습니다. 1. 어떻게 풀게 했나 항목 기사가 전한 내용 시점 19일 수능 문제와 정답이 공개된 직후 풀이 (정답을 외웠을 가능성을 줄이기 위해) 방식 AI 모델 API를 직접 이용, 검색·계산기 등 외부 도구 배제 문제 입력 텍스트로 옮기고 표·밑줄은 마크다운으로, 그림·그래프는 고화질 이미지로 첨부. 이미지 입력을 지원하지 않는 모델은 그림 없이 풀이 범위 국어·수학 모든 선택과목, 영어, 한국사, 과학·사회탐구 전 과목 450점이란 필수 5개 영역(국어·수학·영어·한국사·탐구 2과목) 원점수 합산 총점 2. 성적표 순위 모델 (회사) 점수 공동 1위 GPT-6.2 아스트라(Astra) · 오픈AI 450점 공동 1위 제미나이 4 네온(Neon) · 구글 450점 3위 GPT-6.2 솔(Sol) · 오픈AI 449.6점 공동 4위 클로드 페이블 5.2 · 앤스로픽 449.3점 공동 4위 클로드 오퍼스 5.5 · 앤스로픽 449.3점 - GPT-6.1 테라(Terra) · 오픈AI 445.8점 - 키미 K1 프로 · 문샷AI 438점 - 큐웬4 맥스 · 알리바바 434.5점 - 딥시크 V4 플래시 · 딥시크 432.7점 12위 (국내 1위) K-엑사원(K-EXAONE) 2.5 · LG AI연구원 414.7점 14위 솔라 프로 4(Solar Pro 4) · 업스테이지 392....

Uber의 Software Factory에서 배울 점: AI 에이전트는 ‘비용’이 아니라 ‘운영 설계’의 문제다

Uber의 Software Factory에서 배울 점: AI 에이전트는 ‘비용’이 아니라 ‘운영 설계’의 문제다

Uber Engineering이 공개한 “Running a Software Factory Efficiently at Uber Scale” 글은 단순한 AI 코딩 도구 소개가 아닙니다. 핵심은 AI 에이전트를 개발 현장에 많이 쓰면서도 비용을 통제하기 위한 운영 구조입니다.

저는 이 글을 보면서 개인용 AI 오케스트레이션, 특히 제가 정리하고 있는 CPAO(Cost-aware Personal Agentic Orchestration)와 매우 가까운 문제의식을 느꼈습니다. 규모는 Uber처럼 크지 않더라도, 개인·소규모 조직도 이제 AI를 “가끔 쓰는 도구”가 아니라 “반복 업무를 맡기는 업무팀”으로 운영해야 하는 단계에 들어섰기 때문입니다.

1. Uber가 말하는 AI Software Factory

Uber는 AI 도구가 소프트웨어 개발 전 과정에 들어와 있다고 설명합니다. 코드 작성, 코드 리뷰, CI 실패 복구, 버그 분석, 온콜 알림 처리, 유지보수 PR 생성 등 여러 업무가 에이전트 기반으로 움직이고 있습니다.

인상적인 것은 사용량 증가입니다. Uber에 따르면 2026년 2월부터 8월까지 주간 활성 사용자는 7배, 주간 에이전트 요청은 9.4배 증가했습니다. 그런데 총 AI 비용은 4월 이후 비교적 안정화됐다고 합니다. 동일 모델 기준으로 보면 1,000개 요청당 비용은 피크 대비 약 34%, 세션당 비용은 6월 피크 대비 52% 낮아졌다고 합니다.

즉, Uber의 방향은 “AI를 덜 쓰자”가 아닙니다. 오히려 더 많이 쓰되, 낭비되는 턴·요청·토큰을 줄이는 방식입니다.

2. 핵심은 비용 방정식이다

Uber는 AI 에이전트 비용을 다음과 같은 식으로 분해합니다.

총비용 = 사용자 수 × 세션/사용자 × 턴/세션 × 요청/턴 × 토큰/요청 × 토큰당 가격

이 식이 중요한 이유는 AI 비용을 막연한 “이번 달 청구서”가 아니라, 각각 줄이거나 관리할 수 있는 운영 지표로 바꿔주기 때문입니다.

  • 사용자 수: AI를 쓰는 사람 또는 에이전트 수
  • 세션/사용자: 얼마나 자주 AI를 업무에 쓰는가
  • 턴/세션: 한 작업을 끝내기 위해 오가는 대화 횟수
  • 요청/턴: 한 턴에서 모델이나 도구를 몇 번 호출하는가
  • 토큰/요청: 매 요청마다 얼마나 많은 문맥·도구 설명·파일 내용이 들어가는가
  • 토큰당 가격: 어떤 모델을 어떤 가격으로 쓰는가

여기서 앞의 두 항목, 즉 사용자 수와 세션 수는 늘어나는 것이 좋습니다. AI가 실제 업무에 더 많이 쓰인다는 뜻이기 때문입니다. 반대로 턴/세션, 요청/턴, 토큰/요청은 줄여야 합니다. 이 세 항목이 바로 에이전트가 쓸데없이 헤매거나, 같은 정보를 반복해서 보내거나, 불필요한 도구를 많이 부르는 영역입니다.

3. 모델 가격보다 중요한 것은 에이전트 운영 방식

많은 사람들이 AI 비용을 이야기할 때 먼저 “어떤 모델이 싸냐”를 묻습니다. 물론 모델 가격은 중요합니다. 하지만 Uber 글이 보여주는 더 중요한 포인트는 비용 폭증의 원인이 모델 가격만은 아니라는 점입니다.

실무에서 AI 비용이 커지는 이유는 대체로 이런 것들입니다.

  • 에이전트가 같은 문제를 여러 번 반복해서 시도한다.
  • 필요 없는 파일과 긴 대화 내역을 매번 다시 보낸다.
  • 도구 목록이나 MCP 스키마가 너무 많이 로드된다.
  • 실패한 명령을 원인 분석 없이 계속 재시도한다.
  • 작업이 중간에 오래 멈춰 캐시가 깨지고, 다시 비싼 컨텍스트를 보낸다.

따라서 AI 비용 최적화는 단순히 “싼 모델 쓰기”가 아닙니다. 더 정확히는 에이전트가 일을 덜 헤매고, 필요한 도구만 쓰고, 작은 문맥으로도 정확히 끝내게 만드는 운영 설계입니다.

4. 개인용 Hermes에도 그대로 적용된다

이 관점은 대기업에만 필요한 것이 아닙니다. 오히려 개인이나 소규모 조직일수록 더 중요합니다. 예산이 작기 때문입니다.

제가 Hermes를 개인용 AI 업무팀으로 운영한다고 할 때, Uber의 비용 방정식은 이렇게 바꿔볼 수 있습니다.

  • 블로그 글 1건당 비용
  • 문서 리뷰 1건당 비용
  • 상담 리포트 1건당 비용
  • 자동화 성공 1건당 비용
  • 작업당 재시도 횟수
  • 검증 완료율

예를 들어 블로그 자동화를 한다면 “글을 썼다”가 끝이 아닙니다. 다음까지 봐야 합니다.

  • 자료 수집은 자동화됐는가?
  • 초안 작성은 자동화됐는가?
  • 사실 확인과 출처 표시는 됐는가?
  • Blogger 초안 저장까지 됐는가?
  • 발행 전 사람의 승인 지점이 있는가?
  • 이 한 건을 만드는 데 비용과 시간이 얼마나 들었는가?

5. 개인용 Software Factory 4단계

Uber의 Software Factory 개념을 개인용 Hermes 운영에 맞추면 다음 네 단계로 볼 수 있습니다.

1단계: 대화형 에이전트

텔레그램에서 Hermes에게 직접 요청합니다. 예를 들면 “이 글 리뷰해줘”, “이 문서 요약해줘” 같은 방식입니다. 가장 쉽지만, 매번 사람이 지시해야 합니다.

2단계: Skill 기반 에이전트

반복되는 업무를 Skill로 표준화합니다. 예를 들면 한국어 문서 리뷰, DOCX 보고서 생성, 유튜브 원고 패키지 작성, 블로그 초안 작성 같은 작업입니다. 이 단계부터 품질이 안정됩니다.

3단계: Managed Workflow

정해진 흐름을 자동으로 실행합니다. 예를 들면 “자료 수집 → 요약 → 블로그 초안 → 승인 요청 → Blogger 초안 저장” 같은 흐름입니다. n8n, cron, Hermes 작업을 연결할 수 있습니다.

4단계: Autonomous Factory

여러 에이전트가 역할을 나눕니다. 리서처, 작성자, 검토자, 발행 담당자, 기록 담당자가 따로 움직이는 구조입니다. 단, 이 단계에서도 중요한 결정은 사람이 승인해야 합니다.

6. 조심해야 할 점

Uber 글에서 한 가지 조심할 부분도 있습니다. “70% 이상의 PR이 local 또는 cloud agent에 attributed 된다”는 표현은 매우 인상적입니다. 하지만 이것이 곧 “AI가 개발자의 70%를 대체했다”는 뜻은 아닙니다.

AI가 코드 일부를 작성했을 수도 있고, 리뷰나 테스트나 수정 과정에 관여했을 수도 있습니다. 따라서 이런 숫자는 과장해서 해석하면 안 됩니다. 중요한 것은 대체율이 아니라, 업무 흐름 안에 AI가 얼마나 안정적으로 들어왔는가입니다.

또 하나는 품질입니다. 비용을 줄이는 것만으로는 충분하지 않습니다. 싸게 만든 결과물이 틀리면 오히려 더 비쌉니다. 그래서 AI 업무 자동화에는 항상 다음 질문이 따라와야 합니다.

이 작업은 자동화됐는가? 그리고 검증됐는가?

7. 내일부터 해볼 수 있는 3단계

1단계: 반복 업무 하나를 고른다

처음부터 모든 업무를 자동화하려고 하면 실패하기 쉽습니다. 블로그 초안 작성, 강의안 정리, 회의록 요약, 상담 리포트 작성처럼 반복되는 업무 하나를 고릅니다.

2단계: 작업당 비용과 시간을 적는다

AI를 쓰기 전과 쓴 후를 비교합니다. 몇 분이 걸렸는지, 몇 번 수정했는지, 최종 산출물이 바로 쓸 수 있었는지를 봅니다.

3단계: 승인 지점을 남긴다

AI가 초안을 만들고 저장까지 할 수는 있습니다. 하지만 공개 발행, 고객 발송, 결제, 삭제 같은 일은 사람이 승인해야 합니다. 자동화의 목적은 사람을 빼는 것이 아니라, 사람이 더 중요한 판단에 집중하게 하는 것입니다.

마무리 의견

Uber 글에서 제가 가장 크게 배운 점은 이것입니다.

AI 비용은 모델 가격 문제가 아니라, 에이전트 운영 설계 문제다.

개인이나 소규모 조직도 이제 같은 질문을 해야 합니다.

  • AI가 실제 업무를 줄여주고 있는가?
  • 작업당 비용은 낮아지고 있는가?
  • 품질 검증은 되고 있는가?
  • 사람의 승인 지점은 안전하게 남아 있는가?

앞으로 Hermes를 단순 챗봇이 아니라 개인용 AI 업무팀으로 운영하려면, 이런 지표가 필요합니다. 저는 이것을 CPAO(Cost Aware Personal Agentic Orchestration), 비용인지형 개인 에이전틱 오케스트레이션이라고 부르고 싶습니다.

AI를 많이 쓰는 시대에는 “어떤 모델이 제일 똑똑한가”보다 더 중요한 질문이 생깁니다.

내 AI 업무팀은 같은 비용으로 더 많은 검증된 결과를 만들고 있는가?

이 질문을 관리하는 사람이 앞으로 AI를 제대로 쓰는 사람이 될 것입니다.


참고: Uber Engineering, “Running a Software Factory Efficiently at Uber Scale”
https://www.uber.com/kr/en/blog/efficient-software-factory/

댓글

이 블로그의 인기 게시물

[새로와진 Gmail U/I 입니다] 사용 방법 소개

오늘  Gmail이 새롭게 업데이트 되었습니다. U/I가 새롭게 변경이 되었고, 새로운 기능들이 몇가지 추가 되었습니다. 일반 개인 지메일 사용자는 오른쪽 상단 톱니바뀌 아이콘을 선택하면 '새 Gmail 사용해 보기' 를 선택하여 사용이 가능합니다. G Suite 사용자는 관리자 콘솔에 접속후 앱 >G Suite > Gmail에 대한 설정 >고급 설정 에서 '새 Gmail 얼리 어뎁터 프로그램' 에서 액세스를 허용함으로 체크 해야 합니다. 적용되는데는 최소 1시간 이상 소요된다고 합니다. 새롭게 Gmail U/I 가 시작되면 아래와 같은 환영합니다 메시지가 표시됩니다. 새롭게 변경된 U/I에서는 오른쪽에 '캘린더", "구글 메모 킵", "새로운 Task"앱 이 표시가 됩니다. 이제는 지메일 안에서 '캘린더', '구글 킵'을 사용할 수 있게 되었습니다. Task는 이번에 새롭게 기능 개선이 된 새로운 Task 앱입니다. 신 Task 시작시 환영 메시지입니다. 그외에도 '다시 알림' 기능이 추가 되었습니다. 해당 메일 메시지를 선택 후 해당 메시지를 다시 알림을 설정하여 나중에 다시 알림을 받을 수 있는 기능입니다. 자세한 정보는 구글 블로그 -  https://www.blog.google/products/g-suite/new-security-and-intelligent-features-new-gmail-means-business/ 참고하시기 바랍니다. ----------------- G Suite/Chromebook 전문 블로그 - charlychoi.blogspot.kr

[G Suite 업데이트] 새롭게 통합된 (Gmail/Chat/Meet/Drive) Gmail ('Home for Work')

  새롭게 통합된 (Gmail/Chat/Meet/Drive) Gmail  지난 7월16일자에 이미 발표한 ‘Home for Work 이란 이름으로 Gmail 이 새롭게 통합된 환경으로 설계된 버전이 릴리스 ’ 된다고 하였습니다. 이 통합된 Gmail 버전이 지난 8월12일 기준으로 최대 15일안에 모든 G Suite 서비스에 적용될 예정이라고 발표 하였습니다.  드디어 이 버전이 활성화 되었습니다. 이 버전에 대한 소개입니다.  이 버전이 활성화된 경우는 G Suite 계정으로 로그인 시 아래와 같은 도움말이 표시됩니다. “Gmail 새로운 소식 확인하기’    그리고 Chat, 채팅방, 영상통화 메뉴가 Gmail 안에 표시됩니다.  이 새로워진 Gmail 버전의 가장 큰 특징은 ‘Gmail 메인 화면에서, Google Chat, 채팅방에서 공유된 파일들 목록 보기, 채팅방 멤버들과 할일 목록 만들기’ 입니다. 뿐만아니라, 채팅방에 공유된 구글 문서는 별도의 드라이브 창을 열지 않고 바로 문서를 열고 편집 작업이 가능하게 되었습니다. (현재는 Gmail 화면에서 열수 있는 문서 포맷은  스프레드시트, 슬라이드는 안되고 구글문서만 가능합니다)  Gmail 안에서 채팅방 멤버들에게 공유할 ‘할일(Task)’ 목록 만들기 가능  Gmail 안에서 지메일/채팅 검색 기능으로 쉽게 채팅 기록 또는 채팅방에 공유된 문서들 찾기 가능 이제 부터는 채팅을 위하여 별도의 Google Chat ( ‘chat.google.com’)이나, 화상회의를 위해서 Google Meet (meet.google.com), 채팅방에서 채팅하기 위하여 별도의 창을 띄우지 않고 Gmail 안에서 모든 작업이 가능해졌습니다.  

[행아웃 업데이트] 행아웃 그룹 초대가 쉬워졌습니다.

그동안 행아웃에서 대화 그룹을 만들고 그룹 멤버들 초대하려면, 멤버들 이메일 주소로 일일히 초대를 해야만 했었으나, 이번 업데이트를 통해서 Google 그룹을 이용하여 한번에 행아웃 초대가 가능해 졌습니다. Google Apps 를 사용하지 않는 개인 지메일 사용자들은 행아웃 초대시 행아웃 초대를 위한 링크를 만들어, 초대하고자 하는 사용자들에게 링크를 메일로 보내서 쉽게 초대 할 수 있게 되었습니다. 행아웃에서 그룹 초대 하는 방법   (1). 행아웃 대상자를 선택                                (2).. 다른 멤버 추가 버튼 클릭  (3). 그룹 만들기                                            (4). 설정 (5). 링크로 참여하기-> 링크복사 (6). Google 그룹 메일로, 행아웃 초대 링크를 보냅니다.   (7). 행아웃 그룹에서 멤버를 삭제하기 -------------------------------------------- Google Apps 전문 블로그 - charlychoi.blogspot.kr

[Gmail 업데이트 소식] Gmail에서 Smart Compose를 사용하여 이메일 작성 속도 향상

이메일을 사용하면 친구, 동료 및 가족과 정보를 쉽게 공유 할 수 있지만 메시지 작성에는 시간이 걸릴 수 있습니다. 작년에 Google은 수신 이메일에 신속하게 답변 할 수 있도록 Gmail에 Smart Reply를 도입했습니다. 오늘, 인공 지능으로 구동되는 새로운 기능인 Smart Compose를 발표하여 이메일을 처음부터 초안 작성하는 데 도움을줍니다. 자신감을 가지고 신속하게 이메일 초안 작성 인사말에서 종료 (및 그 사이의 일반적인 문구)까지 Smart Compose는 이메일의 문장 전체를 제안하므로 쉽게 작성할 수 있습니다. 백그라운드에서 작동하기 때문에 평상시와 같이 이메일을 작성할 수 있으며 입력하는 동안 Smart Compose가 제안 문구를 제공합니다. 원하는 제안이 있으면 "탭"버튼을 클릭하여 사용하십시오. Smart Compose는 반복적 인 글쓰기를 줄이고 맞춤법 및 문법 오류 가능성을 줄여 시간을 절약 해줍니다. 심지어 관련 문맥 어구를 제시 할 수도 있습니다. 예를 들어 금요일 인 경우 "좋은 주말 되십시오!"라고 제안 할 수 있습니다.  시작하기 앞으로 몇 주 안에 Smart Compose는 소비자 용 Gmail에 새로 선보일 예정이며, 향후 몇 개월 내에 G Suite 고객에게 제공 될 예정입니다. 시작하려면 설정> '새로운 Gmail 사용해보기'로 이동하여  새 Gmail을 사용 하도록 설정했는지 확인하십시오. 설정에서 일반 탭으로 이동하여 아래로 스크롤하여 '실험용 액세스'를 사용하도록 설정합니다. 전환하려는 경우 뒤로, 항상 선택 취소 할 수 있습니다. 자세한 정보는 구글 블로그 참고 -  https://www.blog.google/products/gmail/subject-write-emails-faster-smart-compose-gmail --------------------------...

Grok Bot 업데이트 정리: 컴퓨터 작업 3배(회사 발표)부터 채팅 카드·음성 통화·이메일·알림까지

"Grok @Bot got much faster." 일론 머스크(@elonmusk)가 이렇게 인용한 Grok Bot 업데이트가 2026년 10월 17일 오전 4시 55분(KST) @bot 공식 계정에 올라왔습니다. 리서처K 쇼츠로 정리한 주요 업데이트 5가지를, 회사 발표와 외신 보도를 구분해서 적어 봅니다. ▶ YouTube에서 쇼츠 보기 1. 속도: 컴퓨터 작업 평균 3배 (회사 수치) @bot 공식 게시물에 따르면 Grok Bot의 컴퓨터 작업은 평균 3배 빨리 끝나고, 그 밖의 답장은 절반도 안 되는 시간에 도착합니다. 다만 '3배'는 회사가 밝힌 자체 수치이고 측정 방법은 공개되지 않았습니다. 확인일 기준 Grok Bot 공식 changelog에는 10월 7일 "Bots work faster on their computer" 항목만 있고 배수는 적혀 있지 않습니다. 2. 채팅 카드 새 디자인 채팅 카드가 더 깔끔한 레이아웃으로 바뀌었습니다(@bot 공식). 새 글꼴과 테마도 함께 적용됐다는 내용은 외신 iPhone in Canada가 보도했습니다. 3. 음성 통화 개선 음성 통화가 더 빠르고 안정적이 됐고, 지난 대화를 더 잘 기억합니다(@bot 공식). 4. 이메일 플러스 별칭 이메일 주소에 플러스 별칭(이름+태그@…)을 붙일 수 있어서, 특정 주소로 온 메일에만 루틴이 실행되도록 나눌 수 있습니다(@bot 공식). 5. 알림은 지금 쓰는 기기로만 알림이 여러 기기로 흩어지지 않고, 지금 쓰고 있는 기기로만 갑니다(@bot 공식). 정리 이번 Grok Bot 업데이트의 핵심은 속도입니다. 다만 3배라는 숫자는 회사 발표이니, 내 작업에서 얼마나 빨라졌는지는 직접 써 보며 확인해 보시길 권합니다. 위 5가지는 @bot 스레드에서 리서처K가 고른 주요 항목이고, 스레드 전체에는 이 밖의 내용도 있습니다. AI 에이전트를 업무에 어떻게 쓸지 고민이시라면 찰리초...