뉴스탭
뉴스컴퓨팅
엔비디아, 업계 최고의 AI 추론 플랫폼 공개
최인훈 기자  |  news@newstap.co.kr
폰트키우기 폰트줄이기 프린트하기 메일보내기 신고하기
승인 2018.09.14  19:12:38
트위터 페이스북 미투데이 요즘 네이버 구글 msn

엔비디아(www.nvidia.co.kr, CEO 젠슨 황)는 음성, 비디오, 이미지 및 추천 서비스를 위한 업계 최고수준의 추론 가속화 기능을 제공하는 인공지능(AI) 데이터센터 플랫폼을 출시했다.

   
▲ 엔비디아 테슬라 T4 GPU

엔비디아 텐서RT(TensorRT™) 하이퍼스케일 추론 플랫폼은 엔비디아 튜링(Turing) 아키텍처와 일련의 새로운 추론 소프트웨어를 기반으로 하는 엔비디아 테슬라(NVIDIA® Tesla®) T4 GPU로 구성된다. 엔드-투-엔드 애플리케이션 위한 낮은 레이턴시(지연시간)와 빠른 성능을 제공하는 이 플랫폼을 통해 하이퍼스케일 데이터센터 내에서 향상된 자연어 상호작용은 물론, 검색 시 관련 결과를 나열하기 보다는 직접 답변을 제공하는 등 새로운 서비스가 가능하다.

엔비디아의 가속 컴퓨팅 담당 부사장 겸 총괄인 이안 벅(Ian Buck)은 “우리 고객들은 모든 제품과 서비스가 AI를 통해 향상되고 진화될 미래를 마주하고 있다. 엔비디아 텐서RT 하이퍼스케일 플랫폼은 이를 보다 효율적이고 빠른 속도로 구현하기 위해 탄생한 것”이라고 설명했다.

대규모 데이터센터는 매일 수십억 건의 음성 쿼리, 번역, 이미지, 비디오, 추천 및 소셜 미디어 상호작용을 처리한다. 각 애플리케이션은 이러한 처리가 실행되는 서버에 위치한 서로 다른 유형의 신경 네트워크를 필요로 한다. 엔비디아 텐서RT 하이퍼스케일 플랫폼은 실시간 추론 소프트웨어와 CPU보다 최대 40배 빠른 속도로 쿼리를 처리하는 테슬라 T4 GPU를 통해 데이터 처리량(throughput)과 서버 활용도를 극대화한다.

엔비디아는 AI 추론 산업이 향후 5년 내에 200억 달러 규모로 성장할 것으로 예상하고 있다.

엔비디아 텐서RT 하이퍼스케일 플랫폼은 강력하며 효율적인 추론에 최적화된 하드웨어 및 소프트웨어의 조합으로, 주요 구성요소는 다음과 같다.

• 엔비디아 테슬라 T4 GPU: 320개의 튜링 텐서 코어와 2,560개의 쿠다(CUDA) 코어를 갖춘 이 새로운 GPU는 FP32부터 FP16까지의 연산성능 뿐 아니라, INT8 및 INT4의 다중 정밀도까지 지원해 혁신적인 성능을 제공한다. 대부분의 서버에 쉽게 장착되는 에너지 효율적인 75와트 소형 PCle 폼팩터로 제공되는 이 GPU는 FP16에서 65 테라플롭(teraflop) 피크성능을 내며, INT8에서 130 테라플롭, INT4에서 260 테라플롭의 성능을 구현한다.

• 엔비디아 텐서RT 5: 추론 옵티마이저 및 런타임 엔진으로, 튜링 텐서 코어를 지원하며 다중 정밀도 워크로드를 위해 신경 네트워크 최적화를 확장한다.

• 엔비디아 텐서RT 추론 서버: 컨테이너형 마이크로 서비스 소프트웨어로, 데이터센터 구성 시 애플리케이션이 AI 모델을 사용할 수 있도록 돕는다. 엔비디아 GPU 클라우드 컨테이너 레지스트리에서 자유롭게 사용 가능하며, 데이터센터 처리량 및 GPU 활용을 극대화한다. 또한, 널리 이용되고 있는 모든 AI 모델 및 프레임워크를 지원하며, 쿠버네티스(Kubernetes) 및 도커(Docker)와 통합된다.

최인훈 기자의 다른기사 보기  
폰트키우기 폰트줄이기 프린트하기 메일보내기 신고하기
트위터 페이스북 미투데이 요즘 네이버 구글 msn 뒤로가기 위로가기
가장 많이 본 기사
1
제이씨현시스템㈜, GIGABYTE PCI-E 3.0 X16 Riser Cable 출시
2
설빙, 떡볶이와 핫도그의 꿀조합 '핫도그퐁당치즈떡볶이' 출시
3
필립스, HDR 1000 공식인증 43형 퀀텀닷 4K 모니터 출시
4
에이수스(ASUS), 신개념 원거리 미팅 하드웨어 크롬박스3 HMH 국내 출시
5
탑파워, TOPOWER Single Rail 신제품 출시
6
에뜨와, 친환경 소재 사용한 유아 침구 '루이스드림이불세트' 출시
7
에이프릴스킨, 하루 종일 메이크업 무너짐 없이 무결점 피부 그대로 ‘퍼펙트 매직 커버 핏 쿠션 2.0’ 출시
8
가민, 다양한 위성 시스템이 탑재된 내구성 뛰어난 아웃도어용 스마트워치 '인스팅트' 출시
9
벤큐, 시력보호 기능 갖춘 LED 스탠드 '위트' 및 '위트지니' 특가 행사 진행
10
에스테덤, 11월 특별 프로모션 실시... 가을・겨울철 피부 보습에 탁월한 기획 세트 및 풍성한 사은품 마련
신문사소개기사제보광고문의불편신고개인정보취급방침청소년보호정책이메일무단수집거부
서울특별시 영등포구 영신로34길 10 영남빌딩 5층 504호  |  대표전화 : 070-7527-0410
등록번호 : 서울특별시 자00408  |  등록년월일 : 2013년 4월 15일
발행인 : (주)이노엠앤엠 이준문  |  편집인 : 이준문  |  청소년보호책임자 : 이준문
Copyright © 2013 뉴스탭. All rights reserved. mail to news@newstap.co.kr