欧美午夜精品-免费在线观看高清影视网站-999免费视频-韩国久久久-在线中文av-1024欧美-在线啪-成人影片在线-秋霞在线观看秋-国产精品国产三级国产专区52-国产在线高清视频-国产999在线-国产白拍-毛片在哪里看-日韩视频h-欧美日韩一区精品-在线只有精品-插插插色综合-成年人看的毛片-毛片av免费

NVIDIA新一代A100 GPU解析:AI訓練速度提升20倍的秘密是什么?

NVIDIA新一代A100 GPU解析:AI訓練速度提升20倍的秘密是什么?

宋華飛 / 2020-05-27 18:1873263

在前段時間的GPU技術大會(GTC 2020)上,NVIDIA正式發布了基于Ampere架構的新一代GPU——NVIDIA A100。這款產品作為通用型工作負載加速器,瞄準了如今最為熱門的AI領域。根據NVIDIA給出的數據,其性能相比于前代產品提升了高達20倍,可用于AI訓練和推理以及科學模擬、對話式AI、推薦系統、基因組學、高性能數據分析、地震建模和金融預測等場景。

image2.jpg

技術創新,NVIDIA A100 GPU性能突破的關鍵

NVIDIA A100擁有如此大幅度的提升,離不開Ampere架構的加持,該GPU基于7nm制造工藝,包含了超過540億個晶體管,擁有6912個CUDA核心,成為了目前全球最大的7納米處理器。不止如此,新品還搭載了40GB HBM2內存,具備1.6TB/s的內存帶寬,FP32性能達到19.5萬億次/秒,并引入了具有TF32的第三代Tensor Core核心、結構化稀疏 、多實例GPU( MIG)、第三代NVIDIA NVLink等眾多特性。

20200527173835.jpg

NVIDIA在此前的Volta架構中首次引入了Tensor Core(張量單元)這一計算單元,使得當時V100 GPU的浮點運算性能得到了大幅提升,能夠更好地用于AI及深度學習應用。在最新的Ampere架構中,NVIDIA對Tensor Core進行了再次升級,使其變得更加靈活、快速且易于使用,甚至稱得上是性能上的一次飛躍。

20200527174124.jpg

新架構引入了為AI開發的TF32,這是一種用于處理矩陣數學的新數值格式,而矩陣數學也被稱為張量運算,是AI和部分HPC應用主要使用的運算。簡單來說,TF32能加速AI訓練計算,結合結構稀疏性,就能使FP32精度下的AI性能顯著提高,可達到上代Volta架構的20倍左右。NVIDIA表示,甚至無需修改現有程序的代碼就能獲得性能提升。此外,目前的Tensor Core核心同時支持了FP64精度的浮點運算能力,相比于前代產品,可為HPC( 高性能計算)應用提供更多的算力,相比之前提高了多達2.5倍。

nvidia-tensor-cores-chart-2c50-d.jpg

至于上文提到的結構化稀疏,其實也是這次新架構的亮點所在,目前A100中的Tensor Core可為稀疏模型應用提供高達2倍的性能提升。該功能的加入讓GPU能夠更加高效地處理高維數據,相當于提高了AI學習性能。結構化稀疏是一種高維數據的有效分析方法,具備特征簡約、可解釋性強、計算方便等優勢,獲得了很多研發人員的關注,并在多個實際場景中得到了應用。

nvidia-sparsity-diagram-2c50-d.jpg

Ampere架構除了細節和算力方面的改進,新品還充分考慮到了應用場景,提供了多實例GPU(MIG) ,通俗來講每個A100可以劃分成七個獨立的GPU,擁有了更高的靈活性。眾所周知,在數據中心等領域,CPU虛擬化是非常多見的技術,可將內核同時分配給不同用戶獨立使用,而MIG也有異曲同工之妙,如此一來不僅為不同規模的工作提供不同的計算力,以此實現最佳利用率和投資回報率的最大化,而且能在硬件級別上實現隔離,實現更高的安全性。

nvidia-multi-instance-gpu-diagram-2c50-d.jpg

至于Ampere架構的第三代NVIDIA NVLink,可使GPU之間的連接速率增加至原來的兩倍,雙向帶寬提升至50GB/s,傳輸速率達到了600GB/s,是PCIe 4.0帶寬的10倍,并且每顆GPU可以實現對外12路連接。

nvidia-nvlink-nvswitch-2c50-d.jpg

A100助力,NVIDIA打造新一代AI系統

目前,基于Ampere GPU的NVIDIA DGX A100系統已經發布,它是全球首款算力達到5 petaFLOPS AI系統,內置8個由NVIDIA NVLink互聯的A100 GPU、兩塊64核AMD CPU和1TB系統內存,六個第二代NVSWITCH則提供了高達 4.8 TB/s雙向帶寬。網絡方面,系統內置Mellanox ConnectX-6 VPI HDR InfiniBand和以太網適配器,其雙向帶寬峰值為 450Gb/s。

20200527173929-1.jpg

利用Mellanox HDR 200Gbps InfiniBand互連技術,NVIDIA將140臺DGX A100系統結合在一起,成功構建了DGX SuperPOD AI超級計算機, AI計算能力高達700 Petaflops,用于公司內部對話式AI、基因組學和自動駕駛等領域的研究。值得一提的是,不只是AI、科研領域的用途,如今DGX A100組成的超級計算機還被用來對抗COVID-19,對抗疫做出了貢獻。

image3-1.jpg

不光是大規模的AI計算系統,NVIDIA甚至將Ampere架構帶到了如今熱點之一的邊緣計算,NVIDIA EGX A100 AI 處理引擎搭載全新GPU的同時,集成有Mellanox ConnectX-6 Dx SmartNIC,不僅帶來優秀的拓展性,而且更有出色的安全性。Mellanox SmartNIC具有安全分流功能,能以高達 200 Gb/s 的線速進行解密,配合GPUDirect技術可將視頻幀直接傳輸到GPU顯存以進行AI處理。

1111.jpg

相輔相成,大量軟件為A100 GPU優化

當然,除了硬件層面的優勢,實際應用時也離不開軟件的支持。目前,NVIDIA對GPU加速應用領域的軟件開發平臺CUDA進行了更新,推出了CUDA 11,為Ampere架構進行了優化,并更新了包括了50多個新版本CUDA-X庫。新版本可以完整支持基于Ampere架構的GPU硬件以及第三代Tensor Core的眾多特性,并加入了多實例GPU虛擬化和GPU分區等功能。

20200527174053.jpg

與此同時,NVIDIA還發布了HPC SDK、多模態對話式AI服務框架NVIDIA Jarvis、深度推薦應用框架 NVIDIA Merlin等軟件。其中,HPC SDK包含編譯器和庫的全套綜合套件,是目前唯一可用于編程加速計算系統的全套集成SDK,開發者可通過它來編程整個HPC平臺,從GPU基礎到CPU以及整體互聯,同樣該套件也對Ampere架構進行了相應優化。

寫在最后:正如NVIDIA所說的那樣,如今由于云計算、AI等技術的出現,正在推動數據中心設計的結構性轉變,純CPU服務器被搭載GPU加速計算的平臺所取代,未來隨著這些新技術的不斷普及,越來越多的行業、企業將會產生類似需求。NVIDIA早在3年之前就已經意識到了這一趨勢,推出了Volta架構,并將專為深度學習的Tensor Core帶入到了GPU之中,大幅提升了AI訓練和推理性能,而到了目前Ampere架構的第三代Tensor Core,更是帶來了巨大的性能飛躍,可將AI訓練時間從數周縮短到幾小時,顯著加快了推理速度,無疑助力推動了整個AI行業的發展。

nvidia-a100-hero-bb460_420-d-0000.jpg

另一方面,此次推出的Ampere架構、A100 GPU不只是提供了大幅度的性能增長,而且NVIDIA更是考慮到了各個方面,甚至兼顧了數據中心的成本問題。根據NVIDIA給出的數據,一個由5臺DGX A100系統組成的機架,可代替一個包括了AI訓練和推理基礎設施的數據中心,而且功耗僅是1/20,所占用的空間是1/25,成本只有1/10。因此,我們完全有理由相信,未來NVIDIA GPU以及AI技術一定會進入到各行各業,滲透到大家日常生活的方方面面。


發表評論注冊|


欧美视频导航 | 久久国产色av | 免费看a的网站 | 久青草影院 | 成人视屏在线观看 | 伊人影院视频 | 日本道在线观看 | 亚欧洲精品在线视频免费观看 | 老地方在线观看免费动漫 | 中文字幕日韩有码 | 色88久久久久高潮综合影院 | 亚洲精品中文字幕成人片 | 精品国产av无码一区二区三区 | 亚洲不卡电影 | 一级片黑人 | 奇米精品一区二区三区在线观看一 | 少妇捆绑紧缚av | 久久久天堂 | 亚洲91精品| 亚洲第一成人在线 | 一级少妇精品久久久久久久 | 欧美视频免费看欧美视频 | 日韩精品视频在线观看网站 | 最新三级网站 | 天天爱天天操 | 韩国电影大尺度在线观看 | 欧美人妻少妇一区二区三区 | 麻豆一区产品精品蜜桃的特点 | 亚洲精选一区 | 精品无码一区二区三区爱欲 | www.欧美色| 激情黄色小视频 | 国产精品一区二区黑人巨大 | 日韩久久一区二区 | 国产精品久久久久久久久久久久久久久 | 亚欧乱色 | 亚洲国产精品毛片av不卡在线 | 91欧美一区二区 | 91精品国产欧美一区二区成人 | 一二三区不卡 | 日韩网站在线观看 | 日韩在线视频网址 | 亚洲成人av免费观看 | 久久偷拍免费视频 | 好吊色一区二区三区 | 小泽玛利亚一区二区三区 | 美女露出让男生揉的视频 | 青青在线精品 | 91精品久久久久久综合五月天 | 日日cao| 亚洲成熟丰满熟妇高潮xxxxx | 2021国产在线视频 | 国产91免费看 | 精品日韩一区二区 | 91刺激| 亚洲性综合网 | 国产97自拍| 色网站视频| 一级女人毛片 | 国产视频一区在线观看 | 无码免费一区二区三区免费播放 | 2020av视频 | 国产一级爱c视频 | 亚洲av永久纯肉无码精品动漫 | 男男做爰猛烈叫床爽爽小说 | 欧美在线视频观看 | 天干夜夜爽爽日日日日 | 麻豆视 | 亚洲熟妇av日韩熟妇在线 | 欧美激情视频在线观看 | 国产免费中文字幕 | 亚洲成人网在线播放 | 波多野结衣一区二区三区 | 中文字幕精品一区二区三区视频 | 97高清国语自产拍 | 日韩中文在线一区 | 人妻久久一区二区 | av资源新版在线天堂 | 国产野外作爱视频播放 | 日本www网站 | 欧美丰满艳妇bbwbbw | 久久久午夜 | 欧美成人黄色小视频 | 成人av专区 | 性做久久久| 日韩美女爱爱 | 青青草自拍偷拍 | 日韩蜜桃视频 | 精品动漫3d一区二区三区免费版 | 国产地址| 被灌满精子的波多野结衣 | 欧美特黄色片 | 国产午夜啪啪 | 狠狠操免费视频 | 欧美在线另类 | 亚洲日本在线观看视频 | 美脚の诱脚舐め脚 | 日韩免费av一区二区 | 99re在线视频精品 | 国产美女被遭强高潮免费网站 | 国产无遮挡又黄又爽免费网站 | 亚洲午夜无码久久久久 | 欧美激情在线观看一区 | 久久成人精品 | av久草 | 亚洲欧美日韩在线一区 | 香蕉成视频人app下载安装 | 激情网色 | 国产乱国产乱老熟300部视频 | 阿v天堂在线 | 久久特黄视频 | 精品丰满人妻无套内射 | 成人另类小说 | 一道本在线观看 | 中文在线字幕免费观 | 国产又粗又猛又爽69xx | 久久亚洲AV无码精品 | 性无码专区无码 | www.97色| 永久免费网站直接看 | 国产黄色特级片 | 中文字幕久久久 | av爱爱 | 国产精品xxx| 日韩在线免费观看av | 国产明星换脸xxxx色视频 | 成人午夜在线 | 亚洲精品乱码久久久久久9色 | 中文字幕免费在线看线人 | 熟睡人妻被讨厌的公侵犯 | 综合天天色 | 日日狠狠久久 | 国产亚洲精品久久久久久打不开 | 熟女少妇内射日韩亚洲 | 美女被啪羞羞粉色视频 | 自拍欧美亚洲 | 69色| 日韩精品一区二区在线视频 | 久久国产精品一区二区 | 手机av在线免费观看 | 诱夫1v1高h | 欧美一二区视频 | jizz一区二区 | 国产精品视频一二三 | 黄色片毛片 | 天堂av网站 | 日产精品久久久久久久蜜臀 | 欧美一区二区三区成人精品 | www.xxx亚洲 | 日韩欧美一区在线观看 | 中文字幕88 | 91久色视频| 中文字幕免费看 | 亚洲视频在线观看免费视频 | 蜜桃视频欧美 | 国产99久久九九精品无码免费 | 又紧又大又爽精品一区二区 | 国产一区二区视频在线观看 | 69热在线观看 | 中文字幕一区二区人妻 | 国产伊人网 | 久久99精品久久久久久三级 | 美女福利视频在线观看 | 成人日批视频 | 999视频在线 | 精品国产一区二区三区在线 | 色射影院 | 日本激情在线 | 韩国一区二区三区在线观看 | 亚洲九九在线 | 最新天堂中文在线 | 性色视频 | 国产一区福利 | 在线观看免费高清在线观看 | 日韩不卡高清 | 日本在线观看网站 | 欧美亚洲第一页 | 国产成人免费看一级大黄 | 狠狠操狠狠操狠狠操 | 成人一级大片 | 国产偷国产偷av亚洲清高 | 玖玖玖精品 | 无码人妻精品一区二区三区蜜桃91 | 青青在线视频观看 | 香蕉视频官网在线观看 | 91丝袜一区二区三区 | 性色av一区二区三区在线观看 | av老司机在线 | 在线观看免费国产 | 成人自拍网 | japanese在线 | 岛国一区 | 少妇毛片一区二区三区粉嫩av | 久久久久亚洲AV成人无码国产 | 青青草一区 | 美脚の诱脚舐め脚 | 亚洲国产成人91porn | 91宅男 | 毛片麻豆| 桃色一区| 国产精品久久久久久人妻精品动漫 | 岛国av噜噜噜久久久狠狠av | 在线免费观看黄网站 | 久久精品激情 | 国产中文字幕三区 | 久久视频免费观看 | 二级毛片 | 夜夜撸 | 久久99久 | 99热中文| 成人欧美一区二区三区在线播放 | 精品国产av色一区二区深夜久久 | 姑娘第5集高清在线观看 | 一个色综合网 | 91夜色| 一级毛片黄片 | 久久久久久穴 | 国产97免费视频 | av在线成人 | 亚洲久久综合 | 午夜小电影 | 国产激情片| 探花国产精品一区二区 | 欧美综合一区二区 | 久久人人爽爽人人爽人人片av | 成人黄色在线网站 | 999国产精品 | 日韩aa视频 | 成人午夜视频免费在线观看 | 久久亚洲AV成人无码国产野外 | av日韩av | 水果派解说av | 午夜福利三级理论电影 | 成人在线免费视频观看 | 激情午夜婷婷 | 色偷偷欧美 | 国产一区二区在线观看视频 | 日本在线观看 | 粉色视频免费观看 | www.成人免费视频 | 丰满少妇一区二区三区 | 欧美日a | 免费欧美一级片 | 亚洲免费在线观看视频 | 欧美激情h | 综合网视频 | 国产欧美一区二区精品性色超碰 | 亚洲自拍偷拍区 | 手机在线亚洲 | 日一日射一射 | 色婷婷国产精品 | 国产制服丝袜在线 | 日韩美女视频在线观看 | 99成人免费视频 | 亚洲国产精品视频在线 | 免费日本黄色网址 | 亚洲二区精品 | 99精品福利视频 | 亚洲综合一 | 男生舔女生的屁股 | 国产精品污www一区二区三区 | 日本裸体xx少妇18在线 | 国产一级在线 | 天天看天天摸天天操 | 日韩精品人妻中文字幕有码 | 成人国产视频在线观看 | 在线观看www. | 欧美日韩成人一区二区在线观看 | 久久av无码精品人妻系列试探 | 午夜日韩av | 欧美bbbbb性bbbbb视频 | 色中文字幕在线观看 | 午夜婷婷在线观看 | 免费av手机在线观看 | 精品99久久久久成人网站免费 | 18+视频在线观看 | 北条麻妃av在线 | 欧美日韩精品久久久 | 亚洲成人一区二区在线观看 | 波多野结衣在线电影 | 超碰888| 日韩中文字幕网址 | 毛片视频免费 | 中文字幕在线看高清电影 | 亚洲狠狠婷婷综合久久久久图片 | 日韩精品1区 | 激情内射亚洲一区二区三区爱妻 | 国产精品久久久久久久久 | 久久久久久久久久一级 | 精品国产18久久久久久 | 久久美利坚 | 男生和女生靠逼视频 | 久久另类ts人妖一区二区 | 少妇精品久久久一区二区三区 | 精品人伦一区二区三区蜜桃免费 | 乱lun合集小可的奶水 | 春草 | 中文字幕被公侵犯的漂亮人妻 | 熟妇人妻精品一区二区三区视频 | 国产精品福利网站 | 午夜片在线观看 | 欧美 日韩 国产 成人 在线 91 | 污黄视频在线观看 | 黄色大片日本 | 超碰国产在线观看 | 91美女在线 | 色哟哟欧美精品 | 大桥未久视频在线观看 | 欧美日韩一区二区综合 | 国产精品主播一区二区 | 亚洲国产中文字幕在线 | www日本黄色 | 四虎成人永久免费视频 | 美女十八毛片 | 国产在线毛片 | 黄色一级大片在线免费看国产一 | 免费在线一区二区 | av伦理在线 | 青草超碰 | 国产精品久久久午夜夜伦鲁鲁 | 北条麻妃av在线 | 一本色道综合久久欧美日韩精品 | 五月天久久 | 亚洲一区二区免费看 | 黄色片在线视频 | 高跟鞋调教—视频|vk | 香蕉视频成人在线观看 | 亚洲熟妇无码久久精品 | 视频一区二区在线 | 国产精品熟女久久久久久 | 久久久久久黄色片 | 日韩精品视频中文字幕 | 日本女人一区二区三区 | 亚洲欧美另类中文字幕 | 老牛影视av牛牛影视av | 久久久.www| 欧美极品少妇×xxxbbb | 久久人人精 | 免费黄色网址在线 | 高清欧美性猛交xxxx黑人猛交 | 亚洲a v网站 | 古风h啪肉h文 | 精品国产一区二 | 欧美aa一级 |