본문으로 건너뛰기
피드

Poetiq, ARC-AGI-2 벤치마크 54% 달성 — 비용은 기존 최고 기록의 절반 이하

ai-ml 약 3분
vote
0
댓글
북마크

Poetiq이 ARC-AGI-2 벤치마크에서 54% 정확도로 최초 50% 돌파에 성공. 문제당 $30.57로 이전 최고 기록(45%, $77.16) 대비 정확도는 높이고 비용은 절반 넘게 줄임. 자체 모델 없이 Gemini 3 Pro 위에 메타 시스템을 얹는 방식.

  • 1

    ARC-AGI-2에서 54% 정확도로 최초 50% 벽 돌파

  • 2

    문제당 비용 $30.57로 이전 최고($77.16)의 절반 이하

  • 3

    Gemini 3 출시 후 몇 시간 만에 달성 — 자체 모델 구축이나 파인튜닝 불필요

  • 4

    메타 시스템이 문제를 풀수록 학습하며 점점 개선되는 구조

  • Poetiq이라는 팀이 ARC-AGI-2 벤치마크에서 54% 정확도를 달성하며 최초로 50% 벽을 뚫었음
  • 이전 최고 기록은 Gemini 3 Deep Think의 45%였는데, 문제당 비용이 $77.16이었음. Poetiq은 $30.57로 절반도 안 되는 비용에 이걸 해낸 거임
  • 핵심 접근법은 "learned test time reasoning"이라는 건데, 자체 대형 모델을 만들거나 파인튜닝할 필요 없이 기존 프론티어 모델을 활용하는 메타 시스템을 씀
  • Gemini 3 Pro 위에 Poetiq의 메타 시스템을 얹어서 솔루션의 모든 부분을 최적화하는 구조임
  • 미친 건 Gemini 3 출시 후 몇 시간 만에 이 결과를 냈다는 거임. 모델 자체를 건드리지 않으니까 가능한 일
  • 메타 시스템은 문제를 풀 때마다 그 풀이 방법을 학습해서 점점 나아지는 구조이고, 다양한 종류의 태스크가 많을수록 성능이 좋아짐
  • 기존 대형 시스템 안에 있는 AI 컴포넌트도 최적화할 수 있다고 함
  • 궁극적 비전은 모델 튜닝 없이도 프론티어 모델에 이미 들어 있는 지식을 더 잘 뽑아내는 것. 지식 추출 메커니즘 자체를 LLM 친화적으로 바꾸겠다는 거임

프론티어 모델을 직접 만들지 않고도 메타 시스템으로 SOTA를 찍을 수 있다는 건, AI 연구의 경쟁 구도가 '누가 더 큰 모델을 만드나'에서 '누가 기존 모델을 더 잘 쓰나'로 바뀔 수 있음을 보여줌.

댓글

댓글

댓글을 불러오는 중...

ai-ml

유튜브, AI 생성 영상에 자동 라벨 붙인다

유튜브가 사실적으로 보이거나 의미 있게 AI로 변경·생성된 콘텐츠에 더 눈에 띄는 라벨을 적용하고, 제작자가 AI 사용 여부를 밝히지 않아도 내부 신호로 감지되면 자동 라벨을 붙이겠다고 밝혔다. 다만 라벨만으로 추천 노출이나 수익화 자격이 바뀌지는 않으며, 제작자는 YouTube Studio에서 잘못된 판정을 수정할 수 있다.

ai-ml

테크 CEO들의 'AI 만능론', 숫자는 아직 그렇게 말하지 않는다

테크 업계에서 AI를 이유로 한 대규모 감원과 조직 재편이 이어지는 가운데, Box 창업자 애런 레비는 CEO들이 실제 업무의 마지막 1마일을 모른 채 AI 에이전트의 능력을 과대평가하고 있다고 지적했다. 2026년 첫 5개월 동안 이미 11만5430명이 해고됐고, 여러 연구는 AI 도입이 체감 생산성만큼 실제 생산성을 끌어올렸다는 근거가 아직 약하다고 말한다.

ai-ml

오픈AI와 앤트로픽, 코딩 에이전트로 드디어 돈 되는 시장을 찾은 듯

사이먼 윌리슨은 오픈AI와 앤트로픽이 코딩 에이전트와 기업용 과금으로 진짜 제품-시장 적합성을 찾았다고 봐. 개인 구독자에게는 월 100달러 플랜이 싸게 느껴지지만, 기업 고객은 이제 사용량 기준 토큰 가격을 그대로 내기 시작했고 이게 대형 고객 예산을 빠르게 흔들고 있다는 얘기야.

ai-ml

컴팔과 GMI 클라우드, 대규모 추론용 AI 인프라 구축 협력

컴팔이 실리콘밸리 기반 AI 인프라 기업 GMI 클라우드와 협력해 대규모 추론과 에이전틱 AI 워크로드에 맞춘 GPU 서버 인프라를 구축한다고 발표했어. COMPUTEX 2026에서는 NVIDIA HGX B300을 지원하는 Compal SGX30-2 같은 고성능 AI 서버 플랫폼도 선보일 예정이야.

ai-ml

AI 쓰면 편해진다더니, 직장인들은 ‘AI 과부하’에 지쳐가는 중

국내 직장인들이 AI 전환 압박, AI 답변 검증 부담, 대체 불안 때문에 피로감을 호소하고 있어. 중앙일보 설문에서는 5284명 중 31.6%가 ‘AI 답변 검증에 시간이 더 걸릴 때’를 가장 지치는 순간으로 꼽았고, 기업들은 무작정 AI 사용량을 밀어붙이는 방식에서 업무 방식 재설계로 넘어가야 한다는 지적이 나와.