본문으로 건너뛰기
0
r/jeffnews HN 약 3분

AI의 음악 취향 — 같은 노래, 완전히 다른 리뷰

ai-ml

요약

여러 AI 모델에게 동일한 곡을 리뷰시켰더니 같은 곡에 대해 극찬과 혹평이 공존하는 황당한 결과가 나왔다. 마이클 잭슨 Thriller을 '형편없는 프로덕션'이라 평가하는 모델이 있는가 하면, 모델별 긍정/부정 편향이 뚜렷하게 드러났다.

기사 전체 정리

  • AI 모델 4개에게 동일한 노래를 리뷰시켰더니, 같은 곡에 대해 완전히 상반된 평가가 나옴
  • 마이클 잭슨의 Thriller이 한 모델에서는 "poorly produced and lackluster(형편없는 프로덕션)"으로, 다른 모델에서는 "thrilling and atmospheric(스릴 넘치는 명곡)"으로 평가됨 — 역대급 명반을 두고 이런 의견 차이가 나온다는 게 황당함
  • Darude의 Sandstorm도 "lacks depth(깊이가 없다)"에서 "captivating blend(매혹적인 조합)"까지, Rebecca Black의 Friday는 "aggressively autotuned... exceptionally banal(극도로 진부함)"과 "catchy and upbeat pop song(캐치한 팝송)" 평가가 공존함
  • Rick Astley의 Never Gonna Give You Up은 한 모델이 "timeless classic... pop masterpiece(시대를 초월한 팝 명곡)"이라 극찬한 반면, 다른 모델은 "repetitive lyrics and slightly generic(반복적이고 평범함)"이라 혹평함
  • 일부 모델은 거의 모든 곡에 긍정적 리뷰를 남기는 반면, 다른 모델은 무조건 까는 경향이 있어서, AI의 "음악 취향"이라기보다 모델별 긍정/부정 편향에 가까운 것으로 보임
  • 특정 곡에 대해 "NA"로 리뷰를 거부한 모델도 있었는데, 어떤 기준으로 거부하는지는 불명확함
  • EDM, 힙합, 록, 팝, 메탈 등 수십 곡을 대상으로 테스트한 결과, 장르와 무관하게 AI 모델 간 평가 일관성이 전혀 없다는 점이 확인됨

핵심 포인트

  • AI 모델 4개가 동일 곡에 대해 완전히 상반된 음악 리뷰를 생성함
  • Thriller, Sandstorm, Friday 등 유명곡에서 극찬과 혹평이 동시에 나옴
  • 모델별로 긍정 편향 또는 부정 편향이 뚜렷하게 존재함
  • 일부 모델은 특정 곡의 리뷰를 아예 거부(NA)하기도 함

인사이트

AI 모델의 주관적 평가 능력은 아직 신뢰할 수 없으며, 리뷰 결과는 곡 자체보다 모델의 내재된 편향을 반영하는 것에 가까움

댓글

댓글

댓글을 불러오는 중...

ai-ml

ARC-AGI-3 등장: AI가 진짜 AGI인지 측정하는 새 벤치마크 나왔다

ARC Prize 팀이 ARC-AGI-3를 공개했는데, 기존 정적 퍼즐 풀기가 아니라 AI가 새로운 환경을 탐색하고 즉석에서 목표를 파악하는 '적응형 추론' 능력을 측정함. 인간 수준으로 게임을 클리어하면 100점인데, 아직 AI와 인간 사이에 격차가 있는 한 AGI가 아니라는 기준을 제시하는 거임.

ai-ml

구글 TurboQuant: AI 모델 압축의 판도를 바꾸는 기술 등장 (ICLR 2026)

구글 리서치가 AI 모델의 핵심 병목인 키-값 캐시(KV Cache) 문제를 해결하는 압축 알고리즘 TurboQuant를 공개했음. 학습 없이 KV 캐시를 3비트까지 줄이면서도 모델 정확도 손실 제로, H100 GPU에서 최대 8배 속도 향상이라는 미친 성능을 보여줌. PolarQuant, QJL과 함께 ICLR 2026에서 발표 예정.

ai-ml

Claude Code한테 내 옛날 연구 코드 맡겨봤는데 하루만에 54% 성능 향상시킴 ㄷㄷ

Karpathy의 Autoresearch 방법론에서 영감 받아서, 저자가 자기 옛날 연구 코드(eCLIP)를 Claude Code한테 던져주고 빨래/장보기 하러 갔음. 돌아왔더니 42번 실험 돌리고 Mean Rank를 344→157로 54% 줄여놨다는 레전드 썰. 근데 버그 하나 고친 게 모든 아키텍처 개선 합친 것보다 효과가 컸다는 게 포인트 ㅋㅋ

ai-ml

Claude Code 치트시트 레전드 정리본 떴다 - 이거 하나면 끝

Claude Code의 모든 슬래시 커맨드, 단축키, 고급 기능을 한 페이지에 때려박은 치트시트임. /btw 같은 숨겨진 꿀기능부터 Git Worktree, Voice Mode까지 ㄹㅇ 알차게 담겨있어서 북마크 필수각.

ai-ml

딥러닝용 미친 사양 컴퓨터 'Tinybox' - 최대 1 엑사플롭 지원에 가격은 100억?

tinygrad 팀이 만든 딥러닝 전용 컴퓨터 'Tinybox'가 이제 실제로 판매 중임. red($12,000)부터 green($65,000), 그리고 2027년 출시 예정인 초고사양 'exabox'(~$10M)까지 라인업 구성. 근데 exabox 스펙이 진짜 레전드 수준ㅋㅋ