기본 콘텐츠로 건너뛰기

[ 2024년 기업의 생성형 AI 현황과 미래 전망 분석] Menlo Ventures의 "2024: The State of Generative AI in the Enterprise" 보고서

 2024년 기업의 생성형 AI 현황과 미래 전망


본 내용은 Menlo Ventures의 "2024: The State of Generative AI in the Enterprise" 보고서를 Claude AI 로 분석 및 재 해석한 자료입니다

(참조: https://menlovc.com/2024-the-state-of-generative-ai-in-the-enterprise/)

목차

서문

1. AI 지출 급증

2. 기업 생성형 AI 주요 활용 사례 도입률

3. 부서별 생성형 AI 투자 현황

4. 생성형 Ai 도구 선택 시 주요 고려 사항

5. 산업별 생성형 Ai 시장 분석

6. Ai 설계 패턴 트렌드 변화

7. 향후 생성형 AI 시장 주요 예측

결론

서문

2024년은 생성형 AI가 기업의 핵심 필수 요소로 자리잡는 결정적인 전환점이 되고 있습니다. 지난 2023년이 실험과 탐색의 시기였다면, 2024년은 본격적인 실행과 가치 창출의 해로 자리매김하고 있습니다. AI 투자 규모가 전년 대비 6배 증가한 138억 달러를 기록하며, 기업들이 실험실 단계를 넘어 실제 비즈니스 현장으로 AI를 이동시키고 있음을 명확히 보여주고 있습니다.

기업들의 AI 도입은 이제 선택이 아닌 필수가 되어가고 있습니다. 조사 대상 기업의 72%가 생성형 AI의 광범위한 도입을 예상하고 있으며, 프로그래머부터 의료 서비스 제공자까지 다양한 전문가들의 일상 업무에 AI가 깊이 통합되고 있습니다. 특히 주목할 만한 점은 기업들이 단순한 비용 절감이나 효율성 향상을 넘어, 비즈니스 모델의 근본적인 혁신을 위한 도구로 AI를 바라보고 있다는 것입니다.

이러한 변화는 투자 구조에서도 확인할 수 있습니다. 전체 AI 투자의 60%가 혁신 예산에서, 40%가 정규 예산에서 조달되고 있으며, 이는 기업들이 AI를 일시적인 트렌드가 아닌 장기적인 전략적 자산으로 인식하고 있음을 보여줍니다. 더불어 산업별로 특화된 AI 솔루션의 등장과 함께, 각 산업의 고유한 요구사항을 반영한 맞춤형 AI 도입이 가속화되고 있습니다.

1. AI 지출 급증

2024년 생성형 AI 기업 투자 현황을 분석한 결과, 전체 투자규모가 2023년 대비 6배 증가한 138억 달러를 기록했으며, 특히 Foundation Models 분야가 65억 달러로 가장 큰 투자 비중을 차지했습니다. 기업들은 기반 기술에 대한 투자와 함께 학습 및 배포(23억 달러), 부서별 AI 솔루션(18억 달러) 등 실제 비즈니스 적용을 위한 투자도 크게 확대했습니다.

산업별로는 헬스케어(5억 달러), 법률(3.5억 달러), 금융 서비스(1억 달러) 순으로 투자가 이루어졌으며, 특히 산업특화 AI 분야가 전년 대비 12배 성장하며 가장 높은 성장률을 기록했습니다. 이는 기업들이 일반적인 AI 도입을 넘어 각 산업과 부서의 특수성을 반영한 맞춤형 AI 솔루션 개발에 주력하고 있음을 보여주며, 실제로 기업의 72%가 향후 AI 도입을 더욱 확대할 계획이라고 응답했습니다.

2. 시장 점유율 변화

  • OpenAI: 50% → 34% (감소)
  • Anthropic: 12% → 24% (증가)
  • Google: 7% → 12% (증가)
  • Meta: 16% (유지)
  • Cohere: 3% (유지)
  • Mistral: 5% (1%p 하락)

2. 기업 생성형 AI 주요 활용 사례 도입률

생성형 AI의 기업 활용 사례를 분석한 결과, 코드 생성이 51%로 가장 높은 도입률을 보이며, 개발자 생산성 향상에 크게 기여하고 있습니다. 그 뒤를 이어 고객 지원 챗봇(31%), 기업 내 검색 및 정보 검색(28%), 데이터 추출 및 변환(27%), 회의 요약(25%) 순으로 높은 도입률을 보이고 있으며, 이는 기업들이 실질적인 업무 효율성 향상과 직접적인 ROI를 창출할 수 있는 영역에 우선적으로 AI를 도입하고 있음을 보여줍니다.

한편, 카피라이팅(21%), 이미지 생성(20%), 코칭(13%), 워크플로우 자동화(10%), 웹 리서치 자동화(9%) 등은 상대적으로 낮은 도입률을 보이고 있습니다. 이는 이러한 영역들이 아직 성숙도가 낮거나, 기업의 핵심 업무 프로세스와의 통합이 덜 이루어졌기 때문으로 분석됩니다. 그러나 이러한 영역들도 AI 기술의 발전과 함께 점차 도입이 확대될 것으로 예상되며, 특히 워크플로우 자동화와 웹 리서치 자동화 분야는 높은 성장 잠재력을 가지고 있는 것으로 평가됩니다.

3. 부서별 생성형 AI 투자 현황

부서별 생성형 AI 투자 현황을 세 가지 주요 그룹으로 나누어 분석하면 다음과 같습니다:

1). 기술 중심 부서 (총 49%):

  • IT 부서: 22% (최대 비중)
  • 제품/개발: 19%
  • 데이터 사이언스: 8% 이 그룹은 AI 기술의 도입과 구현을 주도하며, 전체 투자의 약 절반을 차지합니다.

2). 고객 대면 부서 (총 24%):

  • 고객 지원: 9%
  • 영업: 8%
  • 마케팅: 7% 고객 서비스 향상과 매출 증대를 위한 AI 활용에 초점을 맞추고 있습니다.

3). 지원 부서 (총 23%):

  • 인사: 7%
  • 재무/회계: 7%
  • 디자인: 6%
  • 법무: 3% 업무 효율성 향상과 프로세스 자동화를 위해 AI를 활용하고 있습니다.

이러한 투자 분포는 기업들이 AI를 전사적 차원에서 도입하고 있으며, 특히 기술 개발과 구현을 담당하는 부서들이 선도적 역할을 하고 있음을 보여줍니다. 또한 고객 서비스와 내부 업무 효율화를 위한 AI 활용도 활발히 진행되고 있음을 알 수 있습니다.

4. 생성형 Ai 도구 선택 시 주요 고려 사항

기업들의 생성형 AI 도구 선택 기준을 분석한 결과, 측정 가능한 ROI(30%)와 산업/조직 맞춤화(26%)가 가장 중요한 선택 기준으로 나타났습니다. 이는 기업들이 AI 도입 시 실질적인 비즈니스 가치 창출과 자사의 특수성을 고려한 맞춤형 솔루션을 우선시함을 보여줍니다. 특히 주목할 만한 점은 단순 비용(1%)이 거의 고려사항이 되지 않는다는 것으로, 기업들이 비용보다는 가치 창출에 초점을 맞추고 있음을 시사합니다.

반면, 성능과 정확도(7%), 시스템 통합 용이성(6%), 구매 후 지원 서비스(5%) 등 기술적 고려사항은 상대적으로 낮은 우선순위를 보였습니다. 또한 확장성(2%), 평판/신뢰도(1%), 인력 감축 가능성(1%) 등은 매우 낮은 비중을 차지했는데, 이는 기업들이 AI 도입을 단순한 비용 절감이나 인력 대체 수단이 아닌, 장기적 관점에서의 비즈니스 혁신 도구로 인식하고 있음을 보여줍니다.

1). 주요 선택 기준 분석

핵심 고려사항 (56%)

  • 측정 가능한 ROI: 30%
  • 산업/조직 맞춤화: 26%

기술적 고려사항 (13%)

  • 성능과 정확도: 7%
  • 시스템 통합: 6%

기타 고려사항 (5% 이하)

  • 지원 서비스: 5%
  • 확장성: 2%
  • 기타 요소: 각 1%

2). 주요 특징

  • ROI와 맞춤화가 가장 중요한 선택 기준
  • 비용보다 가치 창출에 초점
  • 기술적 성능은 상대적으로 낮은 우선순위
  • 장기적 가치 창출에 중점

5. 산업별 생성형 Ai 시장 분석

주요 트렌드 분석

  • 산업별 특화 솔루션 증가
  • 각 산업의 고유한 요구사항 반영
  • 규제 및 컴플라이언스 준수
  • 투자 규모와 성장성
  • 헬스케어: 가장 큰 투자 규모
  • 법률: 빠른 성장세
  • 금융: 높은 잠재력
  • 솔루션 특징
  • 업무 자동화 중심
  • 의사결정 지원
  • 생산성 향상

6. Ai 설계 패턴 트렌드 변화

주요 특징

  • RAG의 급격한 성장
  • 기업 데이터 활용 증가
  • 정확성과 신뢰성 향상
  • AI 에이전트의 부상
  • 복잡한 작업 자동화
  • end-to-end 프로세스 처리
  • 기존 방식의 변화
  • 단순 프롬프트 엔지니어링 감소
  • 파인튜닝의 제한적 사용

7. 향후 생성형 AI 시장 주요 예측

1). AI 에이전트가 주도할 차세대 혁신

주요 영향

  • 4천억 달러 규모의 소프트웨어 시장 재편 예상
  • 10조 달러 규모의 미국 서비스 산업에 영향
  • 복잡한 다단계 업무 자동화 실현

새롭게 요구되는 인프라

  • 에이전트 인증 시스템
  • 도구 통합 플랫폼
  • AI 브라우저 프레임워크
  • AI 생성 코드 실행 환경

2). 기존 기업의 몰락과 새로운 기회

주요 사례와 영향

  • Chegg: 시가총액 85% 감소
  • Stack Overflow: 웹 트래픽 50% 감소

위험에 처한 기업군

  • IT 아웃소싱 기업 (예: Cognizant)
  • 레거시 자동화 기업 (예: UiPath)
  • 대형 소프트웨어 기업 (예: Salesforce, Autodesk)

3). AI 인재 부족 현상 심화

주요 현상

  • AI 전문가 수요 급증
  • 기존 고임금 직군 대비 2-3배 프리미엄
  • 도메인 전문성과 AI 역량 결합 필요

예상되는 영향

  • 인재 확보 경쟁 심화
  • 교육/훈련 투자 증가
  • AI 센터 오브 엑셀런스 설립 확대
  • 인재 풀 부족으로 인한 혁신 속도 제한


결론


2024년 기업의 생성형 AI 현황 분석 결과, AI 기술이 실험실을 넘어 실제 비즈니스 가치를 창출하는 단계로 빠르게 진화하고 있음을 확인할 수 있습니다. 특히 RAG(Retrieval-Augmented Generation)의 도입률이 51%로 증가하고, AI 에이전트가 새롭게 부상하는 등 기술적 성숙도가 높아지고 있습니다. 이러한 변화는 단순한 기술 도입을 넘어 기업의 근본적인 운영 방식과 비즈니스 모델의 변화를 이끌고 있습니다.

그러나 이러한 급속한 발전과 함께 여러 도전 과제들도 대두되고 있습니다. AI 전문 인재의 부족 현상이 심화되고 있으며, 많은 기업들이 아직 조직 전반의 AI 구현에 대한 명확한 비전을 확립하지 못하고 있습니다. 또한, AI 도입 과정에서 발생하는 데이터 프라이버시, 보안, 규제 준수 등의 문제도 해결해야 할 중요한 과제로 남아있습니다.

향후 AI는 기업의 경쟁력을 좌우하는 핵심 요소가 될 것이며, 이는 기존 시장 질서의 근본적인 재편으로 이어질 것으로 예상됩니다. 특히 AI 에이전트의 부상은 4천억 달러 규모의 소프트웨어 시장과 10조 달러 규모의 서비스 산업에 큰 변화를 가져올 것으로 전망됩니다. 이러한 변화의 물결 속에서 성공적인 디지털 전환을 이루기 위해서는 기업들의 선제적 준비와 함께 장기적 관점의 전략적 접근이 그 어느 때보다 중요해질 것입니다.


위 내용의 PDF 파일 링크


-------------------------------------

Claude AI 글쓰기 (도서):’AI 전환 시대엔 혼자보다 함께, 클로그 AI 글쓰기'

댓글

이 블로그의 인기 게시물

Uber의 Software Factory에서 배울 점: AI 에이전트는 ‘비용’이 아니라 ‘운영 설계’의 문제다

Uber의 Software Factory에서 배울 점: AI 에이전트는 ‘비용’이 아니라 ‘운영 설계’의 문제다 Uber Engineering이 공개한 “Running a Software Factory Efficiently at Uber Scale” 글은 단순한 AI 코딩 도구 소개가 아닙니다. 핵심은 AI 에이전트를 개발 현장에 많이 쓰면서도 비용을 통제하기 위한 운영 구조 입니다. 저는 이 글을 보면서 개인용 AI 오케스트레이션, 특히 제가 정리하고 있는 CPAO(Cost-aware Personal Agentic Orchestration) 와 매우 가까운 문제의식을 느꼈습니다. 규모는 Uber처럼 크지 않더라도, 개인·소규모 조직도 이제 AI를 “가끔 쓰는 도구”가 아니라 “반복 업무를 맡기는 업무팀”으로 운영해야 하는 단계에 들어섰기 때문입니다. 1. Uber가 말하는 AI Software Factory Uber는 AI 도구가 소프트웨어 개발 전 과정에 들어와 있다고 설명합니다. 코드 작성, 코드 리뷰, CI 실패 복구, 버그 분석, 온콜 알림 처리, 유지보수 PR 생성 등 여러 업무가 에이전트 기반으로 움직이고 있습니다. 인상적인 것은 사용량 증가입니다. Uber에 따르면 2026년 2월부터 8월까지 주간 활성 사용자는 7배, 주간 에이전트 요청은 9.4배 증가했습니다. 그런데 총 AI 비용은 4월 이후 비교적 안정화됐다고 합니다. 동일 모델 기준으로 보면 1,000개 요청당 비용은 피크 대비 약 34%, 세션당 비용은 6월 피크 대비 52% 낮아졌다고 합니다. 즉, Uber의 방향은 “AI를 덜 쓰자”가 아닙니다. 오히려 더 많이 쓰되, 낭비되는 턴·요청·토큰을 줄이는 방식 입니다. 2. 핵심은 비용 방정식이다 Uber는 AI 에이전트 비용을 다음과 같은 식으로 분해합니다. 총비용 = 사용자 수 × 세션/사용자 × 턴/세션 × 요청/턴 × 토큰/요청 × 토큰당 가격 이 식이 중요한 이유는 AI 비용을 막연한 “...

GPT-6 Astra 공개 내용 쉽게 해설: AI가 “대답하는 도구”에서 “일을 수행하는 동료”로

※ 아래 내용은 OpenAI가 공개한 GPT-6 Astra 소개 페이지의 주장을 바탕으로 쉽게 풀어쓴 해설입니다. 벤치마크 수치는 제조사가 제시한 조건과 측정 방식에 따라 달라질 수 있습니다. 한 줄 요약 GPT-6 Astra는 단순히 글을 잘 쓰는 모델을 넘어, 웹 브라우저와 컴퓨터를 직접 사용하고 여러 단계의 업무를 끝까지 수행하는 것을 목표로 한 모델입니다. 1. GPT-6 Astra는 무엇이 달라졌나? OpenAI는 GPT-6 Astra를 새로운 세대의 지능 모델이라고 소개합니다. 핵심은 지식량만 늘리는 것이 아니라 컴퓨터 사용, 웹 탐색, 소프트웨어 개발, 과학 연구, 사이버보안, 전문 업무 를 실제 작업 흐름 속에서 수행하도록 설계했다는 점입니다. 기존 챗봇이 질문에 답하고 결과물을 만들어 주는 데 집중했다면, Astra는 사용자의 목표를 이해한 뒤 브라우저를 열고, 자료를 찾고, 문서를 작성하고, 결과를 점검하는 식의 다단계 업무 수행 을 강조합니다. 2. 가장 중요한 변화: AI가 컴퓨터를 사용한다 소개 페이지의 표현을 쉽게 바꾸면 다음과 같습니다. 온라인 자료를 찾아 요약하기 문서·스프레드시트·프레젠테이션 만들기 웹사이트를 만들고 실제 화면에서 품질 점검하기 과학 데이터를 분석하고 그래프 만들기 양식 입력, 예약 검색, 상품 비교 같은 반복 업무 수행하기 이 변화는 “AI에게 무엇을 물어볼까?”에서 “AI에게 어떤 업무를 맡길까?”로 사용 방식이 이동한다는 뜻입니다. 프롬프트 한 번의 답변보다 목표·권한·검토 지점·완료 조건 을 설계하는 일이 중요해집니다. 3. 업무 성능에 대한 OpenAI의 주장 영역 공개 페이지에 제시된 내용 실무적으로 읽는 법 컴퓨터 사용 화면을 이해하고 브라우저·업무 도구를 조작 사람이 하던 반복적인 클릭·입력 업무를 위임할 가능성 소프트웨어 개발 코드 작성뿐 아니라 테스트와 수정까지 수행 코딩 보조를 넘어 이슈 해결 사이클에 참여 전문 업무 문서·스프레드시트·발표자료를 템플릿에 맞춰 생성 회사 ...

[알아두면 쓸모 있는 구글 문서 팁] 문서 공유시- 사용자 이름 대신에 익명의 동물이 표시 되는 이유와 동물 종류

구글 드라이브에는 다른 유사 서비스에서는 제공하지 않는 구글 만의 유니크한 기능들이 있다 구글 문서를  불특정 다수에게 전체 공개로 공유할 수 있습니다. 불특정인이 구글 문서에 접속한 경우 익명의 동물로 표시됩니다.  ' 웹에 공개' 또는 '링크가 있는 사용자' 공유 설정을 선택하면 인식할 수 없는 이름이나 익명의 동물이 표시될 수 있습니다. 파일에서 인식할 수 없는 이름을 볼 수 있는 몇 가지 이유는 다음과 같습니다. 메일링 리스트와 파일을 공유합니다. Google 계정이 없는 사용자와 파일을 공유하며, 그 사용자가 다른 사용자에게 공유 초대를 전달했습니다. 내 파일을 수정할 수 있는 누군가가 파일을 다른 사용자와 공유했습니다. 다른 사용자가 자신의 Google 계정 이름을 변경했습니다. 공유 설정 페이지에서 해당 사용자 이름 위로 마우스를 이동하여 이메일 주소를 확인하세요. 익명의 동물 다른 사용자에게 개별적으로 보기 또는 수정 권한을 부여하거나 메일링 리스트에 속해 있는 경우에만 사용자 이름이 표시됩니다. 파일 권한을 '링크가 있는 사용자'로 설정하면 파일을 보고 있는 사용자의 이름이 표시되지 않습니다. 대신 다른 사용자가 익명으로 라벨이 지정되어 표시되고 각 익명 사용자는 다양한 익명의 동물로 나열됩니다. 파일 권한을 '링크가 있는 사용자'로 설정했지만 특정 사용자와 파일을 공유하는 경우 파일을 공유한 사용자의 이름이 표시됩니다. 그 외 다른 사용자가 파일을 볼 때는 익명으로 나타납니다. 비공개 파일의 익명 동물 파일 권한을 '링크가 있는 사용자'로 설정한 다음 이를 '특정 사용자'로 변경하면 다음과 같은 경우 여러 익명의 동물이 표시될 수 있습니다. 누군가 파일을 여러 번 여는 경우에는 익명의 동물 목록에서 오래되고 연결이 끊긴 세션을 강제 종료하는 데 조금 시간이 걸릴 수 있습니다. 누군가 온...

Claude Fable 5.1 프롬프트 가이드: 쉽게 쓰는 AI 지시문 작성법

Claude Prompting Guide Claude Fable 5.1 프롬프트 가이드: 쉽게 쓰는 AI 지시문 작성법 Anthropic의 공식 문서는 Claude Fable 5.1을 더 잘 쓰기 위한 프롬프트 작성법을 설명합니다. 개발자용 문서라 조금 어렵지만, 핵심은 간단합니다. AI에게 “무엇을, 어느 정도로, 어떤 방식으로 끝낼지”를 더 분명히 알려주라는 것입니다. 출처: Anthropic Claude Platform Docs 한눈에 보는 핵심 작업 난이도에 맞게 AI의 “생각하는 정도”를 조절한다. 긴 작업에서는 중간 진행 상황을 사용자에게 알려달라고 요청한다. 독립적인 도구 호출은 한 번에 묶어서 처리하게 한다. 대화 기록은 중간에 고치지 말고 계속 뒤에 붙이는 방식이 안전하다. 글이 너무 길거나 딱딱하면 쉬운 문장과 구조를 요청한다. 작업을 시켰다면 끝까지 완료하고 검증하게 한다. 1. “생각하는 정도”를 작업에 맞게 정하라 Claude Fable 5.1에는 작업에 얼마나 많은 추론을 쓸지 정하는 effort 개념이 있습니다. 쉽게 말하면 AI에게 “빨리 대답할지, 더 깊게 생각할지”를 조절하는 장치입니다. 낮은 effort 간단한 요약, 분류, 짧은 답변처럼 빠른 처리가 중요한 작업 중간 effort 품질과 비용의 균형이 필요한 일반 업무 높은 effort 코딩, 분석, 복잡한 문서 작성처럼 실수가 비싼 작업 매우 높은 effort 긴 산출물이나 중요한 의사결정 보조 작업 문서의 조언은 명확합니다. 무조건 가장 높은 설정을 쓰지 말고, 실제 업무에서 품질·속도·비용을 비교해보라는 것입니다. AX 컨설팅 관점에서는 이 부분이 중요합니다. AI도 직원처럼 업무 난이도에 맞는 투입 시간이 필요합니다. 2. 오래 걸...

외식업 대표 사례에서 배우는 사회적기업·소상공인 AI 업무자동화 시작법

사회적기업·소상공인을 위한 AI 활용 가이드 외식업 대표 사례에서 배우는 AI 업무자동화 시작법 AI 업무자동화는 대기업만의 이야기가 아닙니다. 사람이 부족한 작은 조직일수록 AI가 초안을 만들고 사람이 승인하는 구조 가 현실적인 출발점입니다. 오늘의 핵심 AI는 사장이 아니라 업무를 도와주는 직원 작은 조직에 필요한 4개의 AI 업무팀 사람의 승인 지점을 남기는 법 내일부터 시작하는 3단계 AI는 사장이 아니라, 업무를 도와주는 직원입니다 최근 외식업 대표의 AI 자동화 활용 사례를 보며 한 가지를 다시 확인했습니다. AI 업무자동화는 더 이상 대기업만의 이야기가 아닙니다. 오히려 사람이 부족하고, 대표와 실무자가 여러 일을 동시에 처리해야 하는 사회적기업, 소상공인, 작은 조직 에게 더 현실적인 도구가 되고 있습니다. 하지만 AI가 모든 일을 마음대로 처리하게 만드는 것이 목표는 아닙니다. 브랜드 이미지, 고객 응대, 금전 처리, 계약, 민감한 개인정보가 걸린 일은 반드시 사람이 확인해야 합니다. AI가 초안을 만들고, 정리하고, 반복 작업을 준비한다. 사람은 마지막 판단과 승인을 한다. 이 구조가 가장 안전하고 실용적입니다. 저는 이것을 AI 직원 모델 이라고 부릅니다. 작은 조직에 필요한 AI 업무팀 4가지 1. AI 홍보팀 블로그 글, SNS 문구, 안내문, 보도자료, 뉴스레터, 행사 소개글 초안을 만듭니다. 2. AI 고객응대팀 반복 질문을 분류하고 답변 초안을 만들어 담당자가 빠르게 확인하도록 돕습니다. 3. AI 운영관리팀 일정, 체크리스트, 회의록, 업무보고, 미처리 업무 알림을 정리합니다. 4. AI 자료정리팀 흩어진 문서, 설문, 인터뷰, 보고서, 회의록을...