본문으로 건너뛰기
피드

가비아, 물리 GPU와 클라우드 묶은 하이브리드 AI 인프라 출시

ai-ml 약 4분
vote
0
댓글
북마크

가비아가 RTX 4090 기반 물리 GPU 서버호스팅과 가비아 클라우드를 연동한 하이브리드 AI 인프라 구성을 내놨다. AI 학습·그래픽 처리처럼 무거운 연산은 물리 GPU에서 돌리고, 서비스 운영과 트래픽 처리는 클라우드가 맡는 방식이다.

  • 1

    RTX 4090 기반 물리 GPU 서버와 클라우드를 결합해 AI 인프라 비용 부담을 줄이는 구성

  • 2

    대규모 학습·이미지 생성은 GPU 서버, 추론·서비스 운영은 클라우드로 분리

  • 3

    자체 구축과 전면 클라우드 사이에서 작업 단계별 인프라 조합을 제안

  • 가비아가 물리 GPU 서버와 클라우드를 결합한 하이브리드 AI 인프라 구성을 출시함

    • 제품 구성은 ‘GPU 서버호스팅’과 ‘가비아 클라우드’를 연동하는 방식임
    • 생성형 AI 확산으로 GPU 수요가 커지면서, 기업들이 고성능 인프라와 운영비 사이에서 치이는 상황을 겨냥함
  • 핵심 아이디어는 간단함. 비싼 GPU 연산과 상시 서비스 운영을 분리하자는 것임

    • AI 학습, 그래픽 처리 같은 고성능 연산은 RTX 4090 기반 물리 GPU 서버에서 수행함
    • 서비스 운영, 트래픽 처리, 상시 운영 환경은 클라우드가 담당함
    • 자체 GPU 구축의 큰 초기비용과 전면 클라우드의 누적 사용료 사이에서 중간 선택지를 만드는 셈임

중요

> 이 구성의 포인트는 ‘GPU를 쓰느냐’가 아니라 ‘언제 GPU를 켜고, 언제 클라우드로 넘기느냐’임. AI 비용 최적화는 모델보다 인프라 사용 패턴에서 먼저 터지는 경우가 많음.

  • 가비아가 든 예시는 이미지 생성 서비스임

    • 대량 이미지 생성은 물리 GPU 서버에서 처리함
    • 생성된 결과물은 클라우드 환경으로 이관해 사용자에게 제공함
    • 연산 피크와 서비스 제공 구간을 나눠서 인프라를 운영하는 구조임
  • AI 모델 개발 기업에도 비슷한 패턴을 제안함

    • 대규모 학습 단계에서만 GPU 서버를 집중적으로 활용함
    • 학습이 끝난 모델의 추론과 서비스 운영은 클라우드에서 처리함
    • 실시간 추론 서비스를 운영하는 기업도 신규 모델 개발 기간에만 GPU 서버를 붙이는 식으로 비용을 줄일 수 있음
  • 결국 메시지는 ‘자체 구축 vs 전면 클라우드’의 양자택일에서 벗어나자는 쪽임

    • 오석 가비아 클라우드사업팀장은 업무 단계별로 최적의 인프라를 조합할 수 있게 하려는 구성이라고 설명함
    • 초기 부담 없이 AI 인프라를 구축하려는 기업, 특히 GPU를 계속 상시 점유하기 애매한 팀에 현실적인 옵션이 될 수 있음

기술 맥락

  • 이번 구성에서 가비아가 고른 해법은 GPU 서버호스팅과 클라우드를 역할별로 나누는 방식이에요. AI 워크로드는 학습, 생성, 추론, 서비스 운영의 자원 사용 패턴이 다르기 때문에 한 가지 인프라로 전부 처리하면 비용이 쉽게 커지거든요.

  • RTX 4090 기반 물리 GPU 서버는 연산량이 큰 작업에 맞춰져 있어요. 이미지 대량 생성이나 모델 학습처럼 짧은 기간에 GPU를 강하게 쓰는 작업은 물리 GPU를 붙이는 편이 예측 가능한 비용 구조를 만들기 쉬워요.

  • 반대로 상시 서비스와 트래픽 처리는 클라우드가 맡는 게 자연스러워요. 요청량 변화에 맞춰 자원을 조절해야 하고, GPU 연산보다 네트워크·서버 운영 안정성이 더 중요한 구간이기 때문이에요.

  • 이 방식은 ‘클라우드가 무조건 비싸다’거나 ‘직접 구축이 답이다’라는 얘기가 아니에요. 워크로드 단계마다 비용이 터지는 지점이 다르니, 학습과 운영을 분리해서 인프라를 조합하자는 접근에 가까워요.

AI 인프라 비용 문제는 이제 모델 성능만큼 현실적인 고민이 됨. 가비아의 메시지는 단순함. GPU를 계속 켜두지 말고, 비싼 연산이 필요한 구간과 상시 서비스 구간을 분리해서 돈 새는 구간을 줄이라는 얘기임.

댓글

댓글

댓글을 불러오는 중...

ai-ml

청주대, 충청권 클라우드·인공지능 실무 인재 양성 거점 맡는다

청주대가 과기정통부와 정보통신산업진흥원이 지원하는 클라우드 컴퓨팅 전문인력 양성기관으로 다시 선정됐어. 2028년까지 충북·충남·대전·세종 지역 재직자와 실무자를 대상으로 클라우드, 인공지능, 데브옵스, 엠엘옵스 중심의 실무 교육을 맡게 됨.

ai-ml

카카오 카나나 멀티모달, 허깅페이스 다운로드 160만 돌파

카카오의 멀티모달 언어모델 ‘카나나-v’가 누적 다운로드 160만 회를 기록하며 오픈소스 AI 생태계에서 존재감을 키우고 있어. 특히 ‘kanana-1.5-v-3b-instruct’는 최근 1개월 다운로드 38만 건을 넘겼고, vLLM 공식 지원과 3B급 경량 모델이라는 점을 앞세워 실제 서비스 적용성을 강조하고 있어.

ai-ml

엔비디아, 허깅페이스와 로봇용 오픈소스 AI 모델 만든다

엔비디아가 허깅페이스와 손잡고 로봇 분야에 특화된 오픈소스 AI 모델 개발을 추진한다. 엔비디아의 그래픽처리장치(GPU) 생태계와 허깅페이스의 개발자 커뮤니티를 결합해 로봇 AI 모델의 학습·배포 장벽을 낮추겠다는 구상이다.

ai-ml

울산, 제조업 인공지능 전환 거점으로 뛰겠다고 민관 협의체 띄움

울산시가 현대자동차, HD현대중공업, SK에너지, 네이버클라우드, SK텔레콤, 대학·연구기관 등 13개 기관과 함께 제조산업 인공지능 전환 협의체를 출범시켰다. 제조 데이터 기반 실증, 제조 특화 소형언어모형(sLLM), 실물 인공지능(피지컬 AI), 인공지능 데이터센터 인력 양성이 핵심 축이다. 한국 제조업 현장에서 인공지능을 어떻게 실제 공정과 일자리로 연결할지 보여주는 지역 단위 실험이라는 점에서 꽤 볼 만하다.

ai-ml

국방부, 군사비밀 데이터까지 쓰는 국방 AI 플랫폼 고도화 착수

국방부와 NIA가 약 214억원 규모로 국방 지능형 플랫폼 고도화 사업을 추진한다. 기존에는 일반 등급 행정 데이터 중심이었지만, 이번에는 C4I와 무기체계에서 나오는 군사비밀 등급 데이터까지 AI 학습·운영에 활용할 수 있는 구조를 만들려는 게 핵심이다.