본문으로 건너뛰기
피드

Sandia 국립연구소의 LAPIS: 희소 행렬 연산을 위한 MLIR 기반 컴파일러 프레임워크

backend 약 2분
vote
0
댓글
북마크

Sandia 국립연구소에서 MLIR 위에 구축한 LAPIS 컴파일러 프레임워크 발표. Kokkos 방언으로 다양한 아키텍처 지원하며 희소 선형대수 연산을 GPU에서 효율적으로 최적화

  • 1

    MLIR 기반 LAPIS 프레임워크로 희소 연산 최적화

  • 2

    Kokkos 방언으로 다양한 GPU 아키텍처 포터블 지원

  • 3

    분산 메모리용 partition 방언으로 통신 패턴 최적화

  • 4

    TenSQL, 서브그래프 동형 커널 등 실제 응용 시연

  • Sandia 국립연구소에서 MLIR 기반의 LAPIS 컴파일러 프레임워크를 개발함
  • 희소 선형대수 연산을 최적화하고 다양한 아키텍처에서 성능 이식성(performance portability)을 지원하는 게 목표임
  • 핵심 혁신은 Kokkos 방언(dialect): 고수준 언어에서 다양한 아키텍처로 코드를 내리는(lowering) 과정을 깔끔하게 처리함
  • 저수준 MLIR 코드를 C++ Kokkos 코드로 변환할 수 있어서 과학적 머신러닝(SciML) 모델을 기존 앱에 통합하기 쉬워짐
  • 분산 메모리 아키텍처용으로 partition 방언도 새로 만듦: 희소 텐서 분배와 통신 패턴을 관리하고, 통신 최소화를 위한 알고리즘 최적화 포함
  • 다양한 GPU에서 희소/밀집 선형대수 커널 모두에서 효과적인 최적화를 시연함
  • 실제 응용 사례: 희소 선형대수 및 그래프 커널, TenSQL(GraphBLAS 위에 구축한 RDBMS), 서브그래프 동형/단사 커널
  • 생산성, 성능, 이식성, 분산 메모리 실행을 모두 지원하면서 전통적 프로그래밍 언어에서는 어려운 선형대수 수준의 최적화를 가능하게 함

HPC 영역에서 MLIR이 점점 더 중요해지고 있음을 보여주는 프로젝트

댓글

댓글

댓글을 불러오는 중...

backend

잘못된 추상화보다 중복이 낫다는 샌디 메츠의 고전 조언

샌디 메츠는 중복을 없애려다 잘못된 추상화를 만들면 코드가 조건문과 파라미터로 부풀어 더 위험해진다고 말한다. 이미 틀어진 추상화는 억지로 보존하지 말고, 다시 호출부에 인라인해서 중복을 되살린 뒤 현재 요구사항에 맞는 새 구조를 찾는 편이 빠르다는 주장이다.

backend

리눅스 커널, 6년·360개 넘는 패치 끝에 strncpy 제거

리눅스 커널이 오랫동안 버그의 원인이던 strncpy API 사용을 Linux 7.2에서 제거했어. NUL 종료 동작이 직관적이지 않고 불필요한 zero-fill로 성능 문제도 있던 API를 6년 동안 약 362개 커밋으로 걷어낸 작업임.

backend

덕디비는 왜 빠를까: 서버 없는 분석 엔진의 내부 구조 뜯어보기

DuckDB가 단일 바이너리, 인프로세스 실행, 컬럼형 저장, 최적화 패스, Parquet 푸시다운으로 빠른 분석 쿼리를 처리하는 방식을 깊게 설명한 글이다. 6GB Parquet 파일을 노트북에서 바로 SQL로 읽는 경험 뒤에 어떤 설계가 깔려 있는지 따라간다.

backend

피지독, 포스트그레스를 수평 확장시키겠다고 550만 달러 투자 유치

피지독은 포스트그레스 앞단에 프록시를 두고 샤딩과 라우팅을 처리해 수평 확장을 가능하게 하겠다는 오픈소스 프로젝트다. 이미 프로덕션에서 초당 200만 건이 넘는 쿼리를 처리하고, 확인된 규모만 20테라바이트 이상을 샤딩했다고 밝히며 550만 달러 투자를 공개했다.

backend

펜타시스템, EDB 포스트그레SQL로 국내 엔터프라이즈 DB 전환 시장 공략

펜타시스템테크놀러지가 EDB와 파트너 계약을 맺고 국내에 EDB 포스트그레SQL 기반 데이터 플랫폼을 공급한다. 기존 상용 DBMS 정책 변화로 비용 부담이 커진 기업들을 겨냥해, 오픈소스 기반 엔터프라이즈 데이터 플랫폼 전환 수요를 잡겠다는 전략이다. 금융, 공공, 제조, 유통, 클라우드, AI 데이터 분석 환경까지 적용 범위를 넓히려는 움직임이다.