본문으로 건너뛰기
피드

기업 60%가 인공지능 지출에 제동…오픈소스 모델엔 기회가 열림

ai-ml 약 4분
vote
0
댓글
북마크

유비에스 애널리스트들이 기업 정보기술 임원들과 대화한 결과, 약 60%가 인공지능 지출을 어떤 형태로든 제한하고 있는 것으로 나타났다. 토큰 비용 부담이 커지면서 오픈에이아이, 앤트로픽 같은 상용 모델 업체에는 압박이 되고, 딥시크 같은 오픈소스 모델에는 기회가 될 수 있다는 분석이다.

  • 1

    기업 정보기술 임원 약 60%가 인공지능 지출을 억제하거나 제한 중이라고 조사됨

  • 2

    대기업에서는 토큰 비용이 최고재무책임자와 최고기술책임자가 직접 보는 비용 이슈로 커짐

  • 3

    코딩이 아닌 업무에서는 딥시크 같은 오픈소스 모델이 비용 절감 대안으로 주목받을 수 있음

  • 4

    유비에스는 이를 인공지능 도입 중단이 아니라 건전한 비용 최적화로 해석함

  • 기업들이 인공지능 지출에 슬슬 브레이크를 밟고 있다는 분석이 나옴

    • 유비에스 애널리스트들이 최근 몇 주 동안 십여 명의 기업 정보기술 임원과 대화한 결과임
    • 그중 약 60%가 인공지능 관련 지출을 어떤 형태로든 억제하거나 제한하고 있다고 함
  • 가장 직접적인 압박은 토큰 비용임

    • 대기업에서는 최고재무책임자와 최고기술책임자가 인공지능 비용 증가를 직접 보고 있음
    • 우버 운영 책임자 앤드루 맥도널드는 5월에 투자 대비 효과가 낮으면 비용 상승을 정당화하기 어렵다고 말함
    • 이제 인공지능은 실험 예산이 아니라 운영비 항목으로 들어가기 시작한 셈임

중요

> 핵심 숫자는 약 60%임. 기업 인공지능 도입이 꺾였다는 뜻은 아니지만, 비용 제한 없이 마구 쓰는 구간은 빠르게 지나가고 있음.

  • 유비에스는 이 흐름을 ‘공포 신호’보다는 건전한 조정으로 봄

    • 기업들이 인공지능 도입을 멈추려는 건 아니라고 해석함
    • 다만 토큰 지출 최적화가 대부분 기업의 중요한 과제가 됐다는 점은 분명함
    • 도입 초기 기업이나 투자 대비 효과가 뚜렷한 조직은 지출 장벽을 덜 느낄 수 있음
  • 비용 절감 압박은 상용 모델 업체에 먼저 영향을 줄 가능성이 큼

    • 오픈에이아이와 앤트로픽 같은 모델 개발사가 단기적으로 영향을 받을 수 있다는 분석임
    • 특히 코딩이 아닌 업무용 모델을 찾는 기업은 딥시크 같은 오픈소스 중국산 모델을 더 적극적으로 검토할 수 있음
    • 성능이 아주 최고가 아니어도, 충분히 쓸 만하고 싸면 기업 입장에서는 계산이 달라짐
  • 개발팀 입장에서는 모델 선택 기준이 바뀌고 있음

    • 예전에는 ‘제일 똑똑한 모델’이 기본 선택지였다면, 이제는 작업별로 비용 대비 성능을 따져야 함
    • 간단한 분류, 문서 요약, 내부 검색 보조 같은 작업은 더 저렴한 모델로 라우팅하는 전략이 현실적임
    • 다음 세대 칩으로 훈련된 새 모델이 나오면 토큰 비용이 더 낮아질 가능성도 언급됨

기술 맥락

  • 기업들이 지금 고민하는 건 인공지능을 쓸지 말지가 아니라, 어떤 작업에 어떤 모델을 붙일지예요. 모든 요청을 최고가 모델로 보내면 구현은 쉽지만, 사용량이 늘어나는 순간 비용이 통제하기 어려워지거든요.

  • 토큰 최적화가 중요한 이유는 입력과 출력이 모두 돈이기 때문이에요. 프롬프트가 길어지고, 사내 문서를 많이 붙이고, 사용자 수가 늘어나면 비용이 선형으로 커질 수 있어서 재무팀까지 보는 운영비가 돼요.

  • 오픈소스 모델이 기회를 얻는 지점도 여기예요. 자체 운영과 튜닝 부담은 있지만, 반복적인 비코딩 업무나 내부 문서 처리처럼 성능 요구가 상대적으로 낮은 작업에서는 비용을 줄이는 대안이 될 수 있어요.

  • 그래서 실제 도입에서는 모델 라우팅이 중요해져요. 어려운 추론은 고성능 모델로 보내고, 단순 분류나 초안 작성은 저렴한 모델로 처리하면 품질과 비용 사이에서 균형을 잡을 수 있거든요.

인공지능 도입의 다음 단계는 ‘쓸 수 있냐’가 아니라 ‘계속 써도 비용이 버티냐’로 넘어가고 있음. 기업 내부 도입을 하는 팀이라면 모델 성능표만 볼 게 아니라 토큰 사용량, 캐싱, 라우팅, 오픈소스 모델 혼합 전략까지 같이 봐야 함.

댓글

댓글

댓글을 불러오는 중...

ai-ml

메타의 남는 AI 인프라 판매설, 진짜 리스크는 미국 데이터센터 경제성이라는 지적

메타가 남는 AI 인프라를 클라우드처럼 외부에 빌려줄 수 있다는 관측에 시장이 반응했지만, 테크 전문가 마크 더글라스는 회의적인 시각을 냈다. 그는 미국 내 하이퍼스케일 데이터센터의 비용과 지역 반대가 커지는 사이, 걸프 지역의 저렴한 전력 기반 데이터센터가 강력한 경쟁자가 될 수 있다고 봤다. 다만 메타의 장기 AI 전략, 특히 라마와 광고 모델 개선 가능성에는 긍정적이었다.

ai-ml

클라우드플레어, 구글봇에 칼 뺐다…검색 크롤러랑 AI 학습 봇 분리하라는 압박

클라우드플레어가 9월 15일부터 광고가 붙은 페이지에서 검색과 AI 학습을 동시에 수행하는 혼합형 크롤러를 기본 차단하겠다고 밝혔다. 핵심 타깃은 검색 색인, AI 오버뷰, AI 모드에 구글봇 하나를 쓰는 구글식 구조다. 웹사이트 운영자가 검색 노출을 포기하지 않고도 AI 학습 수집은 거부할 수 있게 하겠다는 흐름이라, 웹 콘텐츠 생태계의 돈 흐름과 직결된다.

ai-ml

메타, 남는 AI 인프라로 클라우드 사업까지 노린다

메타가 AI 모델 훈련과 운영을 위해 구축한 데이터센터 인프라를 외부에 빌려주는 클라우드 사업을 준비 중인 것으로 알려졌다. AI 모델 접근권 판매나 데이터센터 컴퓨팅 임대가 거론되며, 실제로 시작되면 아마존, 구글, 스페이스X와 직접 경쟁하게 된다.

ai-ml

산업단지공단·네이버클라우드, 제조 현장 인공지능 전환 협력

한국산업단지공단이 네이버클라우드와 업무협약을 맺고 공공업무와 산업단지 제조기업의 인공지능 전환을 함께 추진한다. 하이퍼클로바엑스 기반 임직원 시범서비스, 스마트 케이-팩토리 연계, 입주기업 지원 프로그램이 주요 내용이다.

ai-ml

BC카드, 금융 특화 임베딩 모델 공개…한국어 금융 검색 성능 최대 15% 끌어올림

BC카드가 한국어 금융 데이터 182만건으로 학습한 금융 특화 임베딩 모델을 공개했다. 경량형은 6억 파라미터로 일반 중앙처리장치에서 돌릴 수 있고, 고품질형은 40억 파라미터로 정밀 검색 업무를 겨냥한다.