25대 컴퓨터로 했던 일 1대로 '뚝딱'...GPU 연산기술 개발

장다해 기자 / 기사승인 : 2025-05-27 15:37:06
  • -
  • +
  • 인쇄
▲연구를 진행한 윤희용 박사과정, 한동형 박사과정, 오세연 박사과정, 김민수 교수 (사진=KAIST)


국내 연구진이 25대 컴퓨터로 2000초가 걸리던 연산을 1대의 GPU 컴퓨터로 처리할 수 있는 연산 프레임워크와 그래프를 압축 저장하는 HGF 포맷을 개발했다.

한국과학기술원(KAIST) 전산학부 김민수 교수 연구팀은 자체 기술 개발을 통해 메모리 저장부터 처리, 관리까지 초대규모 그래프 연산을 고속으로 처리할 수 있는 전체 연산 프레임워크 '지플럭스(GFlux)'를 개발했다고 27일 밝혔다. 또 연구팀은 이번에 GPU메모리에 맞게 그래프를 대폭 압축하는 HGF 포맷을 개발했다.

인공지능(AI) 분야에서 지식체계나 데이터베이스를 그래프로 저장하고 활용하는 사례가 급증하지만, 일반적으로 복잡도가 높은 그래프 연산은 GPU 메모리의 제한으로 매우 작은 규모의 그래프 등 비교적 단순한 연산만 처리할 수 있다는 한계가 있다.

그러나 연구팀이 개발한 '지플럭스' 프레임워크는 그래프를 GPU 처리에 최적화된 자체 개발 압축 포맷인 HGF로 변환하면 저장용량을 2배까지 늘릴 수 있다. 기존 표준 포맷인 CSR로 저장할 경우, 1조 간선 규모의 그래프 크기가 9테라바이트(TB)에 이르지만, HGF 포맷을 활용하면 이 크기를 4.6TB로 절반 가까이 줄일 수 있다.

연구팀이 개발한 '지플럭스' 프레임워크는 그래프 연산을 GPU에 최적화된 단위 작업인 '지테스크(GTask)'로 나누고, 이를 스케줄링 기법으로 GPU에 배분 및 처리하는 기술이다. 연구진은 "지플럭스 프레임워크는 엔비디아 쿠다(CUDA)의 통합 메모리(Unified Memory)에 의존하지 않고도 메모리를 통합관리할 수 있다"면서 "이를 통해 메모리 부족으로 겪는 연산 실패를 방지할 수 있다"고 설명했다. 

연구팀은 삼각형 개수 세기와 같은 고난도 그래프 연산을 통해 지플럭스 성능을 검증했다. 약 700억 간선 규모의 그래프를 대상으로 한 실험에서 고속 네트워크로 연결된 컴퓨터 25대를 이용해 약 2000초가 걸리던 삼각형 개수 세기 연산을 GPU가 장착된 컴퓨터 1대로 1184초만에 처리하는 데 성공했다. 이는 단일 컴퓨터로 삼각형 개수 세기 연산을 성공적으로 처리한 현재까지 알려진 최대 규모의 그래프다.

삼각형 개수 세기는 그래프에서 서로 연결된 3개의 정점이 이루는 삼각형 형태의 관계를 모두 찾고 개수를 세는 연산으로 데이터 분석 및 인공지능에서 널리 활용된다.

'지플럭스' 프레임워크는 대규모 그래프에서의 다중 홉 질의 처리 성능을 획기적으로 향상시켜 대용량 그래프 데이터를 활용한 고속 분석이 필요한 다양한 산업 분야에서 폭넓게 활용될 수 있다. 검색, 추천, 이상 탐지, 경로 분석 등 그래프 기반의 서비스가 중요한 구글, 메타, 네이버, 카카오와 같은 대기업뿐 아니라 그래프 데이터를 적극적으로 활용하려는 스타트업과 연구기관에서도 적용 가능하다.

연구진은 "지플럭스 프레임워크는 GPU 메모리 크기와 무관하게 안정적인 처리 성능을 제공하며, 기존 기술로는 처리하기 어려웠던 조 단위 규모의 초대형 그래프도 단일 프레임워크로 고속 처리할 수 있다"며 "이로 인해 제한된 비용으로 인해 분석에 어려움을 겪는 기업들에게 합리적인 비용으로 효과적인 솔루션을 제공할 수 있게 됐다"고 말했다.

Copyright @ NEWSTREE All rights reserved.

뉴스트리 SNS

  • 뉴스트리 네이버 블로그
  • 뉴스트리 네이버 포스트
  • 뉴스트리 유튜브
  • 뉴스트리 페이스북
  • 뉴스트리 인스타그램
  • 뉴스트리 트위터

핫이슈

+

Video

+

ESG

+

수자원공사, SK하이닉스와 PPA 체결...6월부터 수력에너지 공급

한국수자원공사가 SK하이닉스에 수력발전으로 생산한 전력을 직접전력거래(PPA) 방식으로 공급한다. 이를 위해 한국수자원공사는 30일 SK하이닉스 이천

"현대차, 배출량 전과정평가(LCA) 시스템으로 95%까지 추적 가능"

"현대차는 전과정평가(LCA) 시스템을 통해 자동차 생산에서 폐기에 이르는 과정에서 발생하는 탄소배출량을 95%까지 추적할 수 있다."홍성준 현대자동차

이니스프리, 수거 공병으로 만든 '마키토이 그린티' 한정판 출시

이니스프리가 국내 작가 '마키토이'와의 협업한 '마키토이 그린티' 한정판을 출시했다고 30일 밝혔다.이번에 출시한 '마키토이 그린티 리미티드 에디션

대한항공, 폐항공기 업사이클링…네임택·볼마커 굿즈 출시

대한항공이 폐항공기 동체로 제작한 업사이클링 굿즈 시리즈에서 에어버스 A380 기종을 활용한 제품을 처음 선보인다.대한항공은 브랜드 굿즈 공식 판

전국 226개 시군구, 첫 탄소중립 계획 수립…감축사업 본격화

전국 226개 기초지자체가 모두 탄소중립 실천전략을 담은 '제1차 시군구 탄소중립 녹색성장 기본계획'을 수립해 5월 30일까지 환경부에 제출할 예정이다

SK이노베이션 신임 대표에 SK E&S 추형욱 대표 선임

SK이노베이션이 추형욱 SK이노베이션 E&S 사장을 신임 대표이사로 선임했다. SK이노베이션 총괄사장에는 장용호 SK(주) 대표이사가 신규 선임됐다.SK이

기후/환경

+

올여름 한반도 바다 1℃ 상승 전망…"생태계 파괴 가속화 우려

올여름 우리나라 연안 해역의 수온이 평년보다 약 1.0℃ 높아질 것으로 전망됐다. 수온 상승은 해양 생태계 파괴와 이상기후로 이어질 수 있다.해양수

한달치 3배의 비가 2시간에 내렸다...나이지리아 기후변화로 대참사

아프리카 나이지리아 중서부에서 기록적인 폭우가 쏟아져 도시 대부분이 물에 잠기는 참사가 벌어졌다.나이지리아의 수도 아부자에서 서쪽으로 약 380

日 훗카이도 해역에서 또?…사흘새 '불의고리'에서 두차례 지진

지난달 31일 지진이 발생했던 일본 홋카이도 인근 해역에서 2일 새벽 또다시 규모 5.9의 지진이 발생했다. 같은 지역에서 사흘 사이에 두번의 지진이 발

온난화로 미국과 캐나다 빙하 70~80% 사라질 위기

지구온난화로 전세계 빙하의 절반 가까이가 사라지고, 특히 미국 서부와 캐나다의 빙하는 최대 80%까지 없어질 수 있다는 경고가 나왔다.29일(현지시간)

[영상] 캐나다 134건 산불 동시다발...매니토바주는 '불바다'

캐나다 서부 매니토바주에 22건의 대형 산불이 동시 발생하는 국토 전역에서 134건의 산불이 발생했다.28일(현지시간) 영국 가디언 등에 따르면 매니토

美 청소년들 트럼프 反기후정책에 제동..."생명권 침해" 헌법소원 제기

친(親) 화석연료 정책을 추진하는 트럼프 미국 대통령이 미국 청소년들에게 '생명권 침해'를 이유로 헌법소원을 당했다.30일(현지시간) 비영리 법률단

에너지

+

순환경제

+

오피니언

+