퍼플렉시티, 중국 오픈소스 모델로 에이전트 추론비를 오푸스의 3분의 1 수준까지 낮춤
퍼플렉시티가 중국 Z.ai의 오픈소스 모델 GLM 5.2를 자사 에이전트 환경에 맞게 후속학습한 모델을 연구 프리뷰로 공개했다. 모든 작업을 비싼 클로드 오푸스4.8에 맡기지 않고, 대부분은 GLM 5.2가 처리한 뒤 어려운 작업만 오푸스로 넘기는 구조가 핵심이다.
- 1
GLM 5.2 기반 후속학습 모델이 클로드 오푸스4.8급에 가까운 성능을 오푸스 비용의 0.344배 수준으로 구현했다고 퍼플렉시티가 설명함
- 2
어드바이저 도구가 자체 처리할 작업과 외부 고성능 모델로 넘길 작업을 구분함
- 3
기본 GLM 5.2보다 운영비는 약 2배 들지만, 모든 작업을 오푸스4.8로 처리하는 방식보다 비용은 약 600% 낮음
- 4
GLM 5.2는 약 7,440억 개 매개변수 규모의 MIT 라이선스 오픈소스 모델임
요즘 AI 서비스의 진짜 싸움은 ‘제일 센 모델을 쓰느냐’보다 ‘언제 비싼 모델을 안 쓰느냐’에 가까워지고 있다. 퍼플렉시티 사례는 오픈소스 모델을 기본 엔진으로 깔고, 고비용 모델은 예외 처리용으로 쓰는 라우팅 전략이 실제 서비스 비용을 얼마나 바꿀 수 있는지 보여준다.
관련 기사
메가존클라우드, 몽골 후레대와 AI·클라우드 인재 양성 협력
메가존클라우드가 몽골 후레정보통신대학교와 AI·클라우드 인재 양성을 위한 업무협약을 맺음. 교육과정 공동 개발, 온라인 교육, 인턴십, 글로벌 채용 연계에 더해 소버린 AI와 피지컬 AI 협력까지 묶은 형태임.
저커버그, “컴퓨트 빌려주는 것도 합리적”이라며 메타 클라우드 가능성 열어둠
저커버그가 메타의 AI 컴퓨트 일부를 외부에 임대하거나 API 형태로 판매하는 방안을 검토할 수 있다고 말함. 다만 이게 인프라가 남아돈다는 뜻은 아니고, AI 학습과 서비스 운영에 필요한 컴퓨트가 워낙 비싸고 부족하다 보니 선택지를 넓히는 쪽에 가까움.
저커버그, 메타 AI 인프라 외부 임대 가능성 열어뒀다
마크 저커버그가 메타의 AI 컴퓨팅 인프라를 외부에 임대하거나 경쟁사 모델을 호스팅하는 방안을 검토할 만하다고 밝혔다. 다만 메타에 컴퓨팅 자원이 남아도는 건 아니며, 현재는 내부 AI 제품과 개발에 전량 활용 중이라고 선을 그었다.
포스페이스랩, 프랜차이즈 본사용 구글 클라우드 AI 운영 인프라 공급한다
포스페이스랩이 베스핀글로벌과 손잡고 프랜차이즈 본사에 특화된 구글 클라우드 기반 AI 운영 인프라를 공급한다. 첫 도입 사례는 얌샘김밥이고, POS·배달앱·발주·본사 데이터를 묶어 자연어로 매장 분석과 보고서 생성을 하는 구조다.
정부 AI 윤리지침 초안에 시민사회가 꽂은 핵심 질문, 왜 ‘인권’이 빠졌나
과기정통부와 정보통신정책연구원이 국가 차원의 인공지능 윤리원칙 초안을 공개했지만, 48개 시민사회단체는 초안 어디에도 ‘인권’이 명시되지 않았다고 비판했어. 특히 투명성을 영업비밀보다 뒤로 미룰 수 있는 단서, 차별 금지와 책임성의 부재가 핵심 쟁점으로 떠올랐어.
댓글
댓글
댓글을 불러오는 중...