NVIDIA RAPIDS 성능 분석 : kt NexR 기술블로그 ‘21 테크리포트

NVIDIA RAPIDS 성능 분석 kt넥스알 2021년 상반기 테크리포트 by 기술블로그 I. 서론 최근 인공지능(AI)의 연산, 특히 딥 러닝(Deep Learning) 분야에서 GPU를 사용하는것은 일반화 되었다.

수 천개의 코어로 구성된 GPU의 병렬 컴퓨팅은 CPU대비 병렬 작업에 더 특화되어 있어 동시에 병렬적으로 딥 러닝에 사용되는 수치 계산에 유리하다. 그리고 최근에 NVIDIA에서 딥 러닝 연산뿐만 아니라 Spark를 이용한 데이터 처리 연산 즉, ETL연산에서도 GPU를 사용하는것이 3.8배의 성능 향상과 50%의 비용절감이 가능하다고 발표하였다.

이에 우리는 실험을 통해 Spark의 데이터 처리에 있어 다음 사항을 고려해보려 한다. • CPU 대비 GPU 성능 향상..........