Bendi新闻
>
算力专题:GPU芯片解析

算力专题:GPU芯片解析

6月前

虽然Al芯片目前看有SPU、ASIC、CPU、FPSA等几大类,但是基于几点原因我们判断GPU仍将是训练模型的主流硬件:
1、Transformer架构是最近几年的主流,该架构最大的特点之一就是能够利用分布式BPU进行并行训练,提升模型训练效率;
2、ASIC的算力与功耗虽然看似有优势,但考虑到AI算法还是处于一个不断发展演进的过程,用专用芯片部署会面临着未来算法更迭导致芯片不适配的巨大风险;
3、英伟达强大的芯片支撑、生态、算法开源支持。
模型小型化技术逐步成熟,从训练走向推理。云、边、端全维度发展。
1、GPU方面, 在英伟达的推动下,其从最初的显卡发展到如今的高性能并行计算,海外大厂已经具备了超过20年的技术、资本、生态、人才等储备,形成了大量的核心技术专利,而且也能充分享有全球半导体产业链的支撑,这都或是目前国内厂商所缺失的。
近几年在资本的推动下,国内涌现出数十家GPU厂商,各自或都具备一定的发展基础,但整体经营时间较短,无论从技术积淀、产品料号布局、高端料号件能夹说,与国外大厂仍具备较大差距。但国产化势在必行,国内相关产业链重点环节也积极对上游芯片原厂进行扶持,国产算力芯片需要不断迭代以实现性能的向上提升,后续持续关注相关厂商料号升级、生态建设和客户突破:
2、 Al在端侧设备应用普及是大势所趋,目前,知识蒸馏、剪枝、量化等模型小型化技术在逐步成熟,Al在云、边、端全方位发展的时代已至。除了更加广泛的应用带来需求量的提升外,更复杂算法带来更大算力的需求也将从另一个维度推动市场扩容;
3、数据的高吞吐量需要大带宽的传输支持,光通信技术作为算力产业发展的支撑底座,具备长期投资价值;
4、 Chiplet技术可以突破单一芯片的性能和良率等瓶颈,降低芯片设计的复杂度和成本。
来源:走进芯时代:AI算力GPU芯片系列下载

算力专题:GPU芯片完全解析

GPU技术篇:

更新提醒:“存储系统基础知识全解(终极版)”和“服务器基础知识全解(终极版)”已经更新发布,还没有获取的读者,请在点击“原文链接”在微店留言获取PDF阅读版本)。



转载申明:转载本号文章请注明作者来源,本号发布文章若存在版权等问题,请留言联系处理,谢谢。

推荐阅读
更多架构相关技术知识总结请参考“架构师全店铺技术资料打包(全)”相关电子书(41本技术资料打包汇总详情可通过“阅读原文”获取)。

全店内容持续更新,现下单“架构师技术全店资料打包汇总(全)”一起发送“服务器基础知识全解(终极版)和“存储系统基础知识全解(终极版)pdf及ppt版本,后续可享全店内容更新“免费”赠阅,价格仅收249元(原总价439元)。


温馨提示:

扫描二维码关注公众号,点击阅读原文链接获取架构师技术全店资料打包汇总(全)电子书资料详情


微信扫码关注该文公众号作者

来源:架构师技术联盟

相关新闻

反击美国之战!七部门:加快突破GPU芯片等技术,建设超大规模智算中心!SpaceX将于1月31日向国际空间站发射天鹅号货运飞船;七部门:加快突破GPU芯片等技术,建设超大规模智算中心丨智能制造日报苏妈杀疯了:移动端最强NPU算力达50TOPS,最强AI芯片挑战英伟达黑芝麻智能芯片和架构副总裁何铁军:舱驾一体的算力挑战和时代机遇|演讲预告国产AI算力芯片厂商全景图特供中国的英伟达算力芯片,为什么卖不动?探析异构算力芯片出路在何方?OpenAI陷巨大算力荒,国内大厂抢先破局!打破单芯片限制,算力效率提升33%英伟达大秀AI肌肉!最强AI芯片Blackwell问世,算力提升1000倍,地球竟被完整复制…应对算力焦虑的Chiplet芯片架构探索与多物理场仿真|智猩猩Chiplet技术公开课第9期预告苹果发M4芯片,疯狂加了AI算力!对中国AI是好是坏?EDA巨头拥抱GPU,用超算助力芯片设计聚焦端侧计算技术,这家“独角兽”量产模拟存内计算芯片,2年间让算力提升500倍美国“芯片战争”阳谋:解析其商务部部长雷蒙多讲话算力理性背景下智能驾驶芯片的设计挑战和发展|为旌科技运营副总裁赵敏俊演讲预告无问芯穹夏立雪:破解算力焦虑,我做了大模型算力领域的「淘宝」丨36氪专访硅光计算芯片,后摩尔时代人工智能算力基座AI Infra 现状:一边追求 10 万卡 GPU 集群,一边用网络榨取算力英伟达又涨了!“中国特供”B20芯片被曝,马斯克豪掷10万块H100训Grok,算力是GPT-4的四倍!4家国产芯片领衔,商汤亿咖通在列!智能汽车算力峰会嘉宾阵容大更新,全面拆解算力变局有钱买卡还不够,10万卡H100集群有多难搭?一文解析算力集群技术要点AI研究的主要推动力会是什么?ChatGPT团队研究科学家:算力成本下降终于不用为GPU算力发愁了,请低调使用!深入了解浮点运算——CPU和GPU算力是如何计算的
logo
联系我们隐私协议©2024 bendi.news
Bendi新闻
Bendi.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Bendi.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。