周边城市设为首页收藏本站 关注微博 关注微信

舟山信息网

为什么跑AI往往用GPU而不是CPU?

2024-12-13 23:59:08 2123 2

[复制链接]
小欧 发表于 2024-12-13 23:56:31 |阅读模式

小欧 楼主

2024-12-13 23:56:31

8718367adab44aedbfa9d42885ba6e0ca38bfb4f.jpg

今天,人工智能(AI)已经在各个领域遍地开花,无论身处哪个行业,使用AI来帮助获取业务洞察,并建立竞争优势,已经非常常见。


不过一个有趣的现象是,在用户采购AI基础设施时,几乎所有厂商都会强调其支持GPU的能力,并且支持的GPU数量越多,就代表其AI性能越强大。


例如,在介绍今年新推出的戴尔易安信PowerEdge XE8545服务器时,会特别强调这款4U服务器支持4个NVIDIA A100GP,专门面向人工智能、分析和高级计算等工作负载。


那么问题来了,为什么是GPU而不是CPU?


GPU难道不是我们日常使用的电脑里的,用于提高游戏性能或设计图形所需的图形处理单元吗,为什么在AI方面,我们计算机里的“大脑”(CPU)反而很少提及呢?


一、为什么AI需要GPU


要了解为什么GPU更适合AI,我们就要从GPU的诞生说起。


图形处理单元 (GPU) 最初开发用于生成计算机图形,是具有专用内存的专用处理器,通常执行渲染图形所需的浮点运算。


从GPU的诞生我们可以看到,GPU是专为计算机开发的,旨在提高它们处理3D图形的能力。这种特性决定了GPU仅用于参与任务或应用程序代码的某些部分,而不是整个过程。因此,GPU通常有较多的内核,用于处理频繁且彼此独立的简单计算。


而CPU又被称为通用处理器,因为它几乎可以运行任何类型的计算。不过CPU通常只有几个内核,即使是服务器专用的CPU也不过几十个内核,与GPU动辄成百上千个内核相比完全不是一个数量级。
562c11dfa9ec8a1350337c68f36a4482a1ecc087.jpg

CPU和GPU内核对比

但这并不意味着CPU不够好,CPU内核虽然更少,但比数千个GPU内核更强大。例如同时处理操作系统、处理电子表格、播放高清视频、提取大型zip文件,这些是GPU根本无法完成的。


说到这里,你该明白GPU和CPU的区别了吧。总结一下,CPU最擅长按顺序处理单个更复杂的计算,而GPU更擅长并行处理多个但更简单的计算。


至于为什么AI需要的GPU,答案也很明显了,因为训练AI模型的过程需要同时对所有数据样本执行几乎相同的操作,而GPU的架构设计具有快速同时处理多个任务所需的并行处理能力。


不过要注意的是,尽管GPU非常适合于AI模型算法,但并不意味着GPU在所有情况下都适用:


1、规模较小的训练


CPU完全可以执行训练AI模型所需的算法,特别是如果数据集规模相对较小,可以使用CPU避免高昂的前期成本。


2、非并行算法


本质上,GPU是为图形处理而设计的,因此当某个AI模型算法并不是并行算法时,CPU就是更好的选择。某些涉及逻辑或密集内存要求的AI算法也是CPU的强项。


二、GPU与AI计算


在的AI计算,都在抢购GPU。英伟达也因此赚得盆满钵满。为什么会这样呢?


原因很简单,因为AI计算和图形计算一样,也包含了大量的高强度并行计算任务。
深度学习是目前最主流的人工智能算法。从过程来看,包括训练(training)和推理(inference)两个环节。
359b033b5bb5c9ea816cdfe7d050630d3bf3b38a.jpg

添加图片注释,不超过 140 字(可选)

在训练环节,通过投喂大量的数据,训练出一个复杂的神经网络模型。在推理环节,利用训练好的模型,使用大量数据推理出各种结论。


训练环节由于涉及海量的训练数据,以及复杂的深度神经网络结构,所以需要的计算规模非常庞大,对芯片的算力性能要求比较高。而推理环节,对简单指定的重复计算和低延迟的要求很高。


它们所采用的具体算法,包括矩阵相乘、卷积、循环层、梯度运算等,分解为大量并行任务,可以有效缩短任务完成的时间。


GPU凭借自身强悍的并行计算能力以及内存带宽,可以很好地应对训练和推理任务,已经成为业界在深度学习领域的首选解决方案。


目前,大部分企业的AI训练,采用的是英伟达的GPU集群。如果进行合理优化,一块GPU卡,可以提供相当于数十其至上百台CPU服务器的算力。


三、AI与算力


AI与算力是当今社会科技进步的两大驱动力,它们的融合与创新正推动着各个行业的发展,引领我们进入一个全新的智能时代。


算力,作为AI技术的基石,为AI提供了强大的计算能力和数据处理能力。随着技术的不断进步,算力的提升使得AI模型能够处理更大规模的数据,实现更复杂的算法,从而提升AI的性能和准确度。


算力的发展,使得AI在图像识别、语音识别、自然语言处理等领域取得了巨大的突破,为我们的生活带来了诸多便利。


而AI的崛起,也反过来促进了算力的发展。随着AI应用领域的不断拓展,对于算力的需求也日益增长。为了满足这种需求,人们不断研发新的芯片、算法和架构,推动算力的不断提升。


同时,AI技术的发展也催生了一系列新的应用场景,如自动驾驶、智能家居、智能医疗等,这些应用都需要强大的算力支持,从而推动了算力技术的不断突破和创新。

AI与算力的结合,正在推动各行各业的发展。


在制造业中,AI与算力技术可以帮助企业实现智能制造、智能供应链等,提高生产效率和产品质量。


在医疗领域,AI与算力技术可以帮助医生实现精准诊断、个性化治疗等,提高医疗水平和患者满意度。


在金融领域,AI与算力技术可以帮助银行、保险等机构实现风险评估、智能投顾等,提高金融服务的智能化水平。


总之,AI与算力是当今科技进步的重要驱动力,它们的融合与创新正推动着我们进入一个全新的智能时代。在未来的发展中,我们需要不断关注技术趋势、加强人才培养、加强监管和规范,推动AI与算力技术的健康发展,为人类创造更加美好的未来。
回复

使用道具 举报

全部回复2

小欧 发表于 2024-12-13 23:57:32

小欧 沙发

2024-12-13 23:57:32

为什么AI计算一定要用GPU?
随着人工智能技术的飞速发展,特别是像ChatGPT这样的自然语言处理模型的大热,GPU(图形处理器)成为了市场上的抢手货。顶级GPU的价格飙升,甚至可以达到数万美元,而GPU制造商英伟达的市场估值也因此飙升至惊人的2万亿美元以上。那么,为什么AI计算一定要用GPU呢?GPU与CPU又有什么不同呢?

首先,我们来了解一下GPU是什么。GPU,全称为图形处理器,最初的设计目的是为了加速图形渲染任务,例如在游戏中创建复杂的图像和动画效果。GPU的并行处理能力使其可以同时处理多个计算任务,而这一点在AI计算中显得尤为重要。


与CPU(中央处理器)相比,GPU的架构更适合处理大规模并行计算任务。CPU是一种通用处理器,设计用来顺序执行一系列的指令,适合处理复杂的逻辑运算和串行计算任务。而GPU则拥有大量的核心,可以同时处理多个简单的计算任务,这种并行计算的能力使得GPU在处理大规模数据集和复杂算法时具有显著优势。


在AI领域,尤其是在深度学习中,模型训练和数据推理往往涉及到大量的矩阵运算和浮点数计算。这些计算任务具有高度的并行性,可以通过GPU进行加速。通过使用GPU,AI研究人员可以大大缩短模型训练的时间,提高计算效率,从而加速研究和应用的进展。


72f082025aafa40f789664339dc2ea4279f0193b.jpg

此外,GPU在硬件层面也进行了针对AI计算的优化。例如,GPU配备了高速的内存接口和专门的计算单元,可以更有效地处理AI算法中的大规模数据。这些硬件优化使得GPU在AI计算中表现出色,成为AI领域不可或缺的计算工具。


当然,这并不意味着CPU会被GPU完全取代。CPU仍然在处理逻辑运算、系统控制和串行计算任务等方面发挥着重要作用。在AI计算中,CPU和GPU往往协同工作,共同构成一个强大的计算系统。


综上所述,GPU之所以在AI计算中占据重要地位,主要是因为其强大的并行计算能力和针对AI计算的硬件优化。尽管CPU仍然是计算系统的核心组件,但GPU的出现大大提高了AI计算的效率,为人工智能的快速发展提供了强有力的支持。因此,对于需要大规模并行计算任务的AI应用来说,使用GPU进行加速已经成为了一种必要的选择。


d1160924ab18972b559d0af9d16b92849f510a95.jpg

好了,今天的文章分享到这就结束了,要是喜欢的朋友,请点个关注哦!--我是简搭(jabdp),我为自己“带盐”,感谢大家关注。



回复

使用道具 举报

小欧 发表于 2024-12-13 23:59:08

小欧 板凳

2024-12-13 23:59:08

Gpu核心多适合大量独立而简单的计算,Cpu运算能力强大,但是核心数目远远不足。一个是几十个核心,一个是几千个核心。
回复

使用道具 举报

发表回复

您需要登录后才可以回帖 登录 | 立即注册

返回列表 本版积分规则

:
:
gfdnfgn@163.com
:
未填写
:
未填写
:
未填写

主题176

帖子286

积分1063

图文推荐

  • 《论语》《道德经》《易经》三者是啥关系?

    随着中华民族文化自信心的不断提高,国学成为了现

  • 老子《道德经》与《易经》有何关联?圣人揭

    本文内容来源于经书记载与传统典籍,旨在人文科

  • 老子著《道德经》为何频观《周易》?道生一

    老子是道家学派的创始人,他的《道德经》被誉为

  • 《道德经》源自《易经》吗?荒谬,老子厉害

    《道德经》和《易经》作为我国最古老的两部传统经

  • 《道德经》其实是《易经》的翻版,但是圣心

    一直以来,多少人在《道德经》五千余言上搓手琢磨

  • 淘米水浇花藏大坑,3个步骤没做对,花草全

    淘米水浇花藏大坑,3个步骤没做对,花草全蔫你后

  • 君子七慎:慎言,慎行,慎微,慎独,慎欲,

    君子“七慎”:慎言,慎行,慎微,慎独,慎欲,慎

  • “换装主席”王莉霞坍塌,她的情人是谁?为

     来源:商道秘闻   8月22日晚,内蒙古自治区党

  • 全员恶人,人性的丑陋阴暗《狗镇》

    人性经不起推敲。当他有利可图时,再大的恩德也可

  • 《狗镇》一个充满道德困境与人性挣扎的虚构

    《狗镇》以寓言叙事揭示人性深渊:当善良的格蕾丝

  • 试论电影《狗镇》中的人性善恶

    【前言】 电影《Dogville》是由丹麦的拉斯·冯

  • 《狗镇》:不懂拒绝别人,就是在伤害自己

    《狗镇》:不懂拒绝别人,就是在伤害自己,被善良

  • 《狗镇》,一部非常特别的电影,深刻揭露人

    《狗镇》,一部非常特别的电影,深刻揭露人性,美

  • 网传杨兰兰是某官私生女,其母戏剧演员,接

    评:杨兰兰的身材还是不错的,估计遗传了其母的基

  • 卧室门被反锁了怎么从外面打开

    卧室门反锁是常见的问题,出现这种情况会让人头疼

  • 迟浩田回忆录:淮海战役,攻入7兵团司令部

    迟浩田回忆录:淮海战役,攻入7兵团司令部,缴获

  • 江油14岁少女被霸凌,聋哑母晕倒,父跪求公

    江油14岁少女被霸凌,聋哑母亲当场晕倒,父亲跪求

  • 四川江油霸凌事件:“扇耳光、暴力踢踹、脱

    "你以为我们怕你吗?又不是没进去过,每次20分钟

  • 《巴斯特·斯克鲁格斯的歌谣》科恩兄弟的西

    科恩兄弟这次带来的新作《巴斯特·斯克鲁格斯的歌

  • 道教服饰的多样性与文化深意

    道教头巾与佩饰不仅是信仰象征,更蕴含深厚文化。

  • 道教常识:道士戴的帽子叫什么?你知道都有

    道教常识:道士戴的帽子叫什么?你知道都有哪几种

  • 古代女人犯了通奸罪,是怎样惩罚她们的?

    导读:通奸,指有配偶的男性或女性违背各自夫妻忠

  • 全国人大代表、中佛协副会长少林寺三十代方

    原标题:少林寺通报释永信被调查!涉嫌刑事违法,

  • 第一次登台授课,沈从文在讲堂上呆站了10分

    辜鸿铭上课对学生有何要求?鲁迅在讲台上如何评价

  • 竹子叶子发黄什么原因,怎样解决

    竹子叶子发黄的原因及全面解决方案 竹子叶子发黄

  • 绣球种子从种植下去到发芽需要多久开花

    绣球种子从种植到发芽开花的时间及影响因素如下:

  • 绣球种子怎么播种才可以发芽?绣球种子发芽

    让绣球种子顺利发芽,前期准备工作至关重要。 首

  • 绣球花种子一般多久发芽

    绣球花种子一般10到15天左右发芽。 播种前,应选

  • 绣球花的种子怎么种

    1、播种时间绣球种子一般是在3月份下旬到4月份中

  • 楚霸王项羽乌江自刎地中的乌江到底在哪?

    司马迁笔下的乌江,在项羽“天之亡我,我何渡为!

  • 《疾速追杀》系列作品大盘点+观看顺序,一

    基努·里维斯重出江湖!《疾速追杀5》携甄子丹执

  • 俄朝携手对抗美日韩,半岛局势剑拔弩张美日

    俄朝携手对抗美日韩,半岛局势剑拔弩张美日韩欲意

  • 你不知道茉莉花茶还有这些功效

    茉莉花茶是一种非常受欢迎的茶饮,它不仅口感清

  • 女校长涉嫌诈骗五千多万,三千多万用于网易

    原标题:女校长涉嫌诈骗数千万后跳江身亡,29人起

  • 电瓶车锁了怎么解锁

    当你的电动车无法启动时,或许是因为车辆被锁定了

  • 山西惊现 “1 岁入职 22 岁退休”,为官还

    当 “1 岁工作,22 岁退休” 的消息在山西某县城

  • 美国或将陷入战争泥潭,经济崩溃危机四伏,

    俄罗斯一位专家甩出一句话,说美国就差一场战争,

  • 特朗普:伊朗核设施已被彻底摧毁,若反击将

    当地时间6月21日,美国完成对伊朗福尔多、纳坦兹

  • 欧洲“四大半岛”三个经济发达,只有一个比

    欧洲位于东半球西北部,总面积约1016平方公里。和

  • 历史上的波斯有多强?那可是中东三个统一大

    波斯就是伊朗,伊朗主要是由波斯人组成的。 许多

  • 七年战争:近代欧洲首次真正意义上的全球性

    1756年至1763年的七年战争,是近代欧洲首次真正意

  • 以色列空袭伊朗,德黑兰爆炸声不断!中东又

    凌晨被一条爆炸性新闻惊醒——以色列对伊朗发动了

  • 栀子花能扦插吗,怎样扦插能成活?

    本文中的栀子花指的是栀子苗木,是栀子这个树种,

  • 什么叫“东家”? 为什么中国人“以东为大

    文 | 读书君网上有个问题问,什么叫“东家”?这

  • 美国洛杉矶市长宣布10日晚开始宵禁

    6月10日,在美国加利福尼亚州洛杉矶市中心,警察

  • 解放洛杉矶!催泪瓦斯、震爆弹和橡皮子弹齐

    当地时间6月7日,美国移民与海关执法局等联邦机构

  • 华为P40 Pro上手动安装谷歌服务的详细指南

    导读 •AI导读带你速览精华 华为P40 Pro用户福音

  • 风波不断!娃哈哈被指国资股东权益“悬空”

    娃哈哈商标申请转让、多地加工厂被停产、找同行业

  • 蓝雪花是“喜阴”还是“喜阳”,很多人都搞

    “一袭罗裙海底蓝,风华绝代美而憨。清纯色胜枝头

  • 西子电梯科技有限公司总裁刘文超据称坠楼离

    近日有消息称,6月2日,西子电梯科技有限公司总裁