AI大模型从训练到推理,对应的硬件也将从HBM转向SSD

发布时间:2026/7/10 17:21:44

AI大模型从训练到推理,对应的硬件也将从HBM转向SSD
大模型分为3个大块1大模型本身GPT系列OpenAI[Claude系列GoogleMAI系列微软DeepSeek深度求索Qwen通义千问[MiniMax]GLM智谱AI[ERNIE]百度文心Kimi月之暗面[MiMo]小米2大模型训练GPUHBM3大模型推理GPUHBM VS CPUSSD第一阶段通用的大模型 大模型训练别看有这么多的大模型类型真正能活下来的国外前3名国内前3名其它的会慢慢变成配角。所以投资大模型公司的就要非常小心了路太窄了。上周的Meta实际就是开始要放弃自家大模型了但不是说放弃大模型使用与应用开发可以用GPT或Gemini系统。后续应该会投资某家合作转向应用开发。而很多人的理解就有误以为是硬件投资要到顶了。这个理解是有问题的应该这样理解第一阶段的通用的大模型快到顶了给后来者的时间已经不多了。这意义着第一阶段的大模型训练也在趋于稳定。就目前的观察来看2027年底基本上通用的大模型就固化了而大模型训练的常规训练也结束从2028年起将转向细分领域的训练。从这个时间上来理解也就是HBM的高速增长到2027年底就要走向平稳了比如从现在的几倍的增长变成50%的增长或更少一些。但依旧会增长而各个细分领域的训练的全量升级。但因更大的通用模型趋于稳定它们用到的算力GPUHBM可以租赁。所以增长速度会下降但增长会一直发生。第二阶段大模型推理现在正在这个阶段另提醒一下不是说第一阶段与第二阶段是分开的他们是重叠的。大模型推理实际就是我们在真正的使用AI这个阶段的特征就是要拼命的读取大模型的参数以及个人的上下文那这个就要用到SSD了从目前公开的调研来看第2阶段的GPUHBM VS CPUSSD正从4:1转向1:1特别是在Agent智能体中更是如此。更简单来看目前长鑫科技与长江存储对应的一个是内存一个是存储他们后续的地位是一样的。而国际上也可以看出闪迪的市值升的是最快的。目前国际投行大摩与高盛都在讲AI其实会继续增加支出2026年之前的3年是训练2026年之后开始将重心转向推理。这个与我们从工作中的观察也是一样的我是完全认可这个说法的。而最加让人兴奋的是AI科技的基建投资增长将持续到2030年。从资本的角度看这个问题就更有意思一些训练就像是开店的第一波装修属于一次性资本支出没有收益。推理就像是开店要卖的货要进货才能卖货所以关键的指标是性价比只要能挣钱贵不是问题。而对于消费者也一样只要能真的提高效率token的价格能被效率抵消就没问题。那推理就会有日常消耗服务器也是有服务年限的平均来说企业是按6年的折算来计算成本的。当然一般企业会使用更久些比如8到10年。后续的维护费用也是很高的还有就是硬件升级可能也淘汰了。所以说永远缺存储最缺的是SSD这类永久性存储而内存的使用寿命是要高于SSD的。常规性企业的日常也可以看出来随着数据的增长存储会最先打满。从经营的角度来看推理是AI能服务多少人的问题而训练只是让AI变的有多聪明的问题。那能服务多少人就很关键这个是能否盈利的关键企业会想尽一切办法来提升这部分。所以从更长时间的纬度来看企业会更愿意花钱买SSD、CPU这类增加服务人数的硬件投资。总结一句话第一阶段的通用的大模型 大模型训练是决定AI有多聪明的关键而第二阶段大模型推理是决定服务于多少人能否盈利的关键。而最加让人兴奋的是AI科技的基建投资增长将持续到2030年而从现在开始增长最多是将是大模型推理。AI大模型学习福利文末获取作为一名热心肠的互联网老兵我决定把宝贵的AI知识分享给大家。 至于能学习到多少就看你的学习毅力和能力了 。我已将重要的AI大模型资料包括AI大模型入门学习思维导图、精品AI大模型学习书籍手册、视频教程、实战学习等录播视频免费分享出来。求大家的点赞和收藏我花2万买的大模型学习资料免费共享给你们来看看有哪些东西。1.学习路线图第一阶段从大模型系统设计入手讲解大模型的主要方法第二阶段在通过大模型提示词工程从Prompts角度入手更好发挥模型的作用第三阶段大模型平台应用开发借助阿里云PAI平台构建电商领域虚拟试衣系统第四阶段 大模型知识库应用开发以LangChain框架为例构建物流行业咨询智能问答系统第五阶段大模型微调开发借助以大健康、新零售、新媒体领域构建适合当前领域大模型第六阶段以SD多模态大模型为主搭建了文生图小程序案例第七阶段以大模型平台应用与开发为主通过星火大模型文心大模型等成熟大模型构建大模型行业应用。2.视频教程网上虽然也有很多的学习资源但基本上都残缺不全的这是我自己整理的大模型视频教程上面路线图的每一个知识点我都有配套的视频讲解。都打包成一块的了不能一一展开总共300多集因篇幅有限仅展示部分资料需要点击下方图片前往获取3.技术文档和电子书这里主要整理了大模型相关PDF书籍、行业报告、文档有几百本都是目前行业最新的。4.LLM面试题和面经合集这里主要整理了行业目前最新的大模型面试题和各种大厂offer面经合集。学会后的收获• 基于大模型全栈工程实现前端、后端、产品经理、设计、数据分析等通过这门课可获得不同能力• 能够利用大模型解决相关实际项目需求 大数据时代越来越多的企业和机构需要处理海量数据利用大模型技术可以更好地处理这些数据提高数据分析和决策的准确性。因此掌握大模型应用开发技能可以让程序员更好地应对实际项目需求• 基于大模型和企业数据AI应用开发实现大模型理论、掌握GPU算力、硬件、LangChain开发框架和项目实战技能 学会Fine-tuning垂直训练大模型数据准备、数据蒸馏、大模型部署一站式掌握• 能够完成时下热门大模型垂直领域模型训练能力提高程序员的编码能力 大模型应用开发需要掌握机器学习算法、深度学习框架等技术这些技术的掌握可以提高程序员的编码能力和分析能力让程序员更加熟练地编写高质量的代码。1.AI大模型学习路线图2.100套AI大模型商业化落地方案3.100集大模型视频教程4.200本大模型PDF书籍5.LLM面试题合集6.AI产品经理资源合集领取方式我会放在下面希望领取了的朋友不要忘了下方名片放心添加

相关新闻

TMC7300与PIC32MX675F256L在直流电机控制中的高效应用

TMC7300与PIC32MX675F256L在直流电机控制中的高效应用

2026/7/10 17:21:44

1. TMC7300与PIC32MX675F256L的黄金组合解析 在小型有刷直流电机控制领域,TMC7300驱动芯片与PIC32MX675F256L微控制器的组合堪称性价比之王。这套方案特别适合需要精确控制且对功耗敏感的应用场景,比如便携式医疗设备、智能家居执行器或小型机器人关节驱…

iir1社区贡献指南:如何参与这个开源DSP项目开发

iir1社区贡献指南:如何参与这个开源DSP项目开发

2026/7/10 17:21:44

iir1社区贡献指南:如何参与这个开源DSP项目开发 【免费下载链接】iir1 DSP IIR realtime filter library written in C 项目地址: https://gitcode.com/gh_mirrors/ii/iir1 iir1是一个专业的DSP IIR实时滤波器库,采用C编写,支持高性能…

抖音批量下载器:去水印下载与自动化内容管理解决方案

抖音批量下载器:去水印下载与自动化内容管理解决方案

2026/7/10 17:21:44

抖音批量下载器:去水印下载与自动化内容管理解决方案 【免费下载链接】douyin-downloader A practical Douyin downloader for both single-item and profile batch downloads, with progress display, retries, SQLite deduplication, and browser fallback suppor…

LKY Office Tools:一键自动化安装Office的终极解决方案

LKY Office Tools:一键自动化安装Office的终极解决方案

2026/7/10 18:51:47

LKY Office Tools:一键自动化安装Office的终极解决方案 【免费下载链接】LKY_OfficeTools 一键自动化 下载、安装、激活 Office 的利器。 项目地址: https://gitcode.com/GitHub_Trending/lk/LKY_OfficeTools 还在为繁琐的Office安装过程烦恼吗?面…

TW-Elements模态框组件架构深度解析:从事件驱动到性能优化

TW-Elements模态框组件架构深度解析:从事件驱动到性能优化

2026/7/10 18:51:47

TW-Elements模态框组件架构深度解析:从事件驱动到性能优化 【免费下载链接】TW-Elements 𝙃𝙪𝙜𝙚 collection of Tailwind MIT licensed (free) components, sections and templates 😎 项目地址: https…

深度解析PHPExcel:专业Excel处理库的技术架构与实战指南

深度解析PHPExcel:专业Excel处理库的技术架构与实战指南

2026/7/10 18:51:47

深度解析PHPExcel:专业Excel处理库的技术架构与实战指南 【免费下载链接】PHPExcel ARCHIVED 项目地址: https://gitcode.com/gh_mirrors/ph/PHPExcel PHPExcel作为PHP生态中最为成熟的Excel文档处理库,为开发者提供了完整的电子表格读写、格式设…

Android Studio中文界面终极指南:告别英文困扰,提升开发效率

Android Studio中文界面终极指南:告别英文困扰,提升开发效率

2026/7/10 18:51:47

Android Studio中文界面终极指南:告别英文困扰,提升开发效率 【免费下载链接】AndroidStudioChineseLanguagePack AndroidStudio中文插件(官方修改版本) 项目地址: https://gitcode.com/gh_mirrors/an/AndroidStudioChineseLanguagePack …

ExifToolGUI:照片元数据批量编辑的终极免费图形化工具

ExifToolGUI:照片元数据批量编辑的终极免费图形化工具

2026/7/10 18:51:47

ExifToolGUI:照片元数据批量编辑的终极免费图形化工具 【免费下载链接】ExifToolGui A GUI for ExifTool 项目地址: https://gitcode.com/gh_mirrors/ex/ExifToolGui 还在为数百张照片的元数据管理而头疼吗?ExifToolGUI 作为 ExifTool 的免费图形…

高精度信号采集系统设计与ADC芯片选型指南

高精度信号采集系统设计与ADC芯片选型指南

2026/7/10 18:41:47

1. 从零构建高精度信号采集系统在工业测量和自动化控制领域,信号采集的精度和效率直接影响整个系统的性能表现。最近我在一个环境监测项目中,需要同时采集4-20mA电流环和0-10V电压信号,经过多款ADC芯片的对比测试,最终选择了TI的A…

解锁AMD Ryzen处理器深层性能:SMU Debug Tool完全指南

解锁AMD Ryzen处理器深层性能:SMU Debug Tool完全指南

2026/7/9 19:40:56

解锁AMD Ryzen处理器深层性能:SMU Debug Tool完全指南 【免费下载链接】SMUDebugTool A dedicated tool to help write/read various parameters of Ryzen-based systems, such as manual overclock, SMU, PCI, CPUID, MSR and Power Table. 项目地址: https://gi…

6个月转型AI工程师:实战路径与核心技能

6个月转型AI工程师:实战路径与核心技能

2026/7/9 18:28:30

1. 项目概述:6个月转型AI工程师的可行性路径在2023年大模型技术爆发的背景下,AI工程师岗位需求同比增长217%(LinkedIn数据)。不同于传统算法工程师需要3-5年培养周期,现代AI工程师更侧重工程化落地能力。我在硅谷科技公…

YOLOv5模型剪枝与量化实战:边缘设备部署优化

YOLOv5模型剪枝与量化实战:边缘设备部署优化

2026/7/10 6:57:56

1. 项目背景与核心价值在计算机视觉领域,YOLOv5因其出色的实时检测性能成为工业界宠儿。但当我们尝试将其部署到边缘设备(如树莓派、Jetson Nano或手机终端)时,立刻会遇到两个致命问题:模型体积庞大(原始YO…

终极原神FPS解锁器完整指南:轻松突破60帧限制

终极原神FPS解锁器完整指南:轻松突破60帧限制

2026/7/10 0:00:42

终极原神FPS解锁器完整指南:轻松突破60帧限制 【免费下载链接】genshin-fps-unlock unlocks the 60 fps cap 项目地址: https://gitcode.com/gh_mirrors/ge/genshin-fps-unlock 原神FPS解锁器是一款专为《原神》玩家设计的开源工具,通过先进的Wri…

YesPlayMusic:如何用高颜值播放器重塑你的网易云音乐体验?[特殊字符]

YesPlayMusic:如何用高颜值播放器重塑你的网易云音乐体验?[特殊字符]

2026/7/10 0:00:42

YesPlayMusic:如何用高颜值播放器重塑你的网易云音乐体验?🎵 【免费下载链接】YesPlayMusic 高颜值的第三方网易云播放器,支持 Windows / macOS / Linux :electron: 项目地址: https://gitcode.com/gh_mirrors/ye/YesPlayMusic…

从零实现红黑树:手写C++的set与map容器

从零实现红黑树:手写C++的set与map容器

2026/7/10 0:00:42

1. 项目概述:从STL容器到自研轮子在C的日常开发中,std::set和std::map是我们再熟悉不过的伙伴了。它们一个负责管理不重复的集合,一个负责维护键值对映射,底层都依赖一颗高效的红黑树来保证数据的有序性和操作的性能。但你是否曾想…