AI大模型从训练到推理,对应的硬件也将从HBM转向SSD

发布时间:2026/9/8 19:34:28

AI大模型从训练到推理,对应的硬件也将从HBM转向SSD
大模型分为3个大块1大模型本身GPT系列OpenAI[Claude系列GoogleMAI系列微软DeepSeek深度求索Qwen通义千问[MiniMax]GLM智谱AI[ERNIE]百度文心Kimi月之暗面[MiMo]小米2大模型训练GPUHBM3大模型推理GPUHBM VS CPUSSD第一阶段通用的大模型 大模型训练别看有这么多的大模型类型真正能活下来的国外前3名国内前3名其它的会慢慢变成配角。所以投资大模型公司的就要非常小心了路太窄了。上周的Meta实际就是开始要放弃自家大模型了但不是说放弃大模型使用与应用开发可以用GPT或Gemini系统。后续应该会投资某家合作转向应用开发。而很多人的理解就有误以为是硬件投资要到顶了。这个理解是有问题的应该这样理解第一阶段的通用的大模型快到顶了给后来者的时间已经不多了。这意义着第一阶段的大模型训练也在趋于稳定。就目前的观察来看2027年底基本上通用的大模型就固化了而大模型训练的常规训练也结束从2028年起将转向细分领域的训练。从这个时间上来理解也就是HBM的高速增长到2027年底就要走向平稳了比如从现在的几倍的增长变成50%的增长或更少一些。但依旧会增长而各个细分领域的训练的全量升级。但因更大的通用模型趋于稳定它们用到的算力GPUHBM可以租赁。所以增长速度会下降但增长会一直发生。第二阶段大模型推理现在正在这个阶段另提醒一下不是说第一阶段与第二阶段是分开的他们是重叠的。大模型推理实际就是我们在真正的使用AI这个阶段的特征就是要拼命的读取大模型的参数以及个人的上下文那这个就要用到SSD了从目前公开的调研来看第2阶段的GPUHBM VS CPUSSD正从4:1转向1:1特别是在Agent智能体中更是如此。更简单来看目前长鑫科技与长江存储对应的一个是内存一个是存储他们后续的地位是一样的。而国际上也可以看出闪迪的市值升的是最快的。目前国际投行大摩与高盛都在讲AI其实会继续增加支出2026年之前的3年是训练2026年之后开始将重心转向推理。这个与我们从工作中的观察也是一样的我是完全认可这个说法的。而最加让人兴奋的是AI科技的基建投资增长将持续到2030年。从资本的角度看这个问题就更有意思一些训练就像是开店的第一波装修属于一次性资本支出没有收益。推理就像是开店要卖的货要进货才能卖货所以关键的指标是性价比只要能挣钱贵不是问题。而对于消费者也一样只要能真的提高效率token的价格能被效率抵消就没问题。那推理就会有日常消耗服务器也是有服务年限的平均来说企业是按6年的折算来计算成本的。当然一般企业会使用更久些比如8到10年。后续的维护费用也是很高的还有就是硬件升级可能也淘汰了。所以说永远缺存储最缺的是SSD这类永久性存储而内存的使用寿命是要高于SSD的。常规性企业的日常也可以看出来随着数据的增长存储会最先打满。从经营的角度来看推理是AI能服务多少人的问题而训练只是让AI变的有多聪明的问题。那能服务多少人就很关键这个是能否盈利的关键企业会想尽一切办法来提升这部分。所以从更长时间的纬度来看企业会更愿意花钱买SSD、CPU这类增加服务人数的硬件投资。总结一句话第一阶段的通用的大模型 大模型训练是决定AI有多聪明的关键而第二阶段大模型推理是决定服务于多少人能否盈利的关键。而最加让人兴奋的是AI科技的基建投资增长将持续到2030年而从现在开始增长最多是将是大模型推理。AI大模型学习福利文末获取作为一名热心肠的互联网老兵我决定把宝贵的AI知识分享给大家。 至于能学习到多少就看你的学习毅力和能力了 。我已将重要的AI大模型资料包括AI大模型入门学习思维导图、精品AI大模型学习书籍手册、视频教程、实战学习等录播视频免费分享出来。求大家的点赞和收藏我花2万买的大模型学习资料免费共享给你们来看看有哪些东西。1.学习路线图第一阶段从大模型系统设计入手讲解大模型的主要方法第二阶段在通过大模型提示词工程从Prompts角度入手更好发挥模型的作用第三阶段大模型平台应用开发借助阿里云PAI平台构建电商领域虚拟试衣系统第四阶段 大模型知识库应用开发以LangChain框架为例构建物流行业咨询智能问答系统第五阶段大模型微调开发借助以大健康、新零售、新媒体领域构建适合当前领域大模型第六阶段以SD多模态大模型为主搭建了文生图小程序案例第七阶段以大模型平台应用与开发为主通过星火大模型文心大模型等成熟大模型构建大模型行业应用。2.视频教程网上虽然也有很多的学习资源但基本上都残缺不全的这是我自己整理的大模型视频教程上面路线图的每一个知识点我都有配套的视频讲解。都打包成一块的了不能一一展开总共300多集因篇幅有限仅展示部分资料需要点击下方图片前往获取3.技术文档和电子书这里主要整理了大模型相关PDF书籍、行业报告、文档有几百本都是目前行业最新的。4.LLM面试题和面经合集这里主要整理了行业目前最新的大模型面试题和各种大厂offer面经合集。学会后的收获• 基于大模型全栈工程实现前端、后端、产品经理、设计、数据分析等通过这门课可获得不同能力• 能够利用大模型解决相关实际项目需求 大数据时代越来越多的企业和机构需要处理海量数据利用大模型技术可以更好地处理这些数据提高数据分析和决策的准确性。因此掌握大模型应用开发技能可以让程序员更好地应对实际项目需求• 基于大模型和企业数据AI应用开发实现大模型理论、掌握GPU算力、硬件、LangChain开发框架和项目实战技能 学会Fine-tuning垂直训练大模型数据准备、数据蒸馏、大模型部署一站式掌握• 能够完成时下热门大模型垂直领域模型训练能力提高程序员的编码能力 大模型应用开发需要掌握机器学习算法、深度学习框架等技术这些技术的掌握可以提高程序员的编码能力和分析能力让程序员更加熟练地编写高质量的代码。1.AI大模型学习路线图2.100套AI大模型商业化落地方案3.100集大模型视频教程4.200本大模型PDF书籍5.LLM面试题合集6.AI产品经理资源合集领取方式我会放在下面希望领取了的朋友不要忘了下方名片放心添加

相关新闻

TMC7300与PIC32MX675F256L在直流电机控制中的高效应用

TMC7300与PIC32MX675F256L在直流电机控制中的高效应用

2026/8/28 20:11:22

1. TMC7300与PIC32MX675F256L的黄金组合解析 在小型有刷直流电机控制领域,TMC7300驱动芯片与PIC32MX675F256L微控制器的组合堪称性价比之王。这套方案特别适合需要精确控制且对功耗敏感的应用场景,比如便携式医疗设备、智能家居执行器或小型机器人关节驱…

iir1社区贡献指南:如何参与这个开源DSP项目开发

iir1社区贡献指南:如何参与这个开源DSP项目开发

2026/9/5 22:26:05

iir1社区贡献指南:如何参与这个开源DSP项目开发 【免费下载链接】iir1 DSP IIR realtime filter library written in C 项目地址: https://gitcode.com/gh_mirrors/ii/iir1 iir1是一个专业的DSP IIR实时滤波器库,采用C编写,支持高性能…

抖音批量下载器:去水印下载与自动化内容管理解决方案

抖音批量下载器:去水印下载与自动化内容管理解决方案

2026/9/3 19:45:40

抖音批量下载器:去水印下载与自动化内容管理解决方案 【免费下载链接】douyin-downloader A practical Douyin downloader for both single-item and profile batch downloads, with progress display, retries, SQLite deduplication, and browser fallback suppor…

前端html2canvas结合print-js打印页面,并解决多余空白页问题

前端html2canvas结合print-js打印页面,并解决多余空白页问题

2026/9/8 19:33:24

一、功能 前端html2canvas打印 HTML页面局部打印 二、代码 结合print-js打印页面 import html2canvas from html2canvas; import printJS from print-js;/** 打印*/const handleDownload async () > {console.log(inputRef.current.scrollWidth,inputRef.current.scrollWid…

基于Django的StockMing股票预测系统:从ORM建模到ECharts可视化全解析

基于Django的StockMing股票预测系统:从ORM建模到ECharts可视化全解析

2026/9/8 19:33:24

简介:StockMing股票预测系统是基于Django框架的完整设计源码,面向Python Web开发者、金融数据分析人员以及机器学习实践者,解决从股票数据获取、预处理到价格预测、可视化展示的一站式落地问题。资源共计646个文件,包含334个JavaS…

Puppeteer 请求拦截完全指南:从基础拦截到 Cooperative Intercept Mode 协作式拦截

Puppeteer 请求拦截完全指南:从基础拦截到 Cooperative Intercept Mode 协作式拦截

2026/9/8 19:33:24

Puppeteer 请求拦截完全指南&#xff1a;从基础拦截到 Cooperative Intercept Mode 协作式拦截 【免费下载链接】puppeteer JavaScript API for Chrome and Firefox 项目地址: https://gitcode.com/GitHub_Trending/puppeteer1/puppeteer </&#xff5c;&#xff5c;…

从JSON数据清洗到数据库导入:背单词词库建设的实战记录

从JSON数据清洗到数据库导入:背单词词库建设的实战记录

2026/9/8 19:33:24

我原本以为&#xff0c;把几千个单词塞进数据库&#xff0c;最折磨人的环节是写 INSERT 语句&#xff0c;直到 danci 3 这个项目做到一半&#xff0c;我才发现自己幼稚得可爱。danci 是一个背单词工具&#xff0c;第三版的目标很简单&#xff1a;把散落在多个 JSON 文件里的几千…

并发编程(二)—synchronized和volatile

并发编程(二)—synchronized和volatile

2026/9/8 19:33:24

synchronized保证读和写的安全&#xff0c;volatile保证读的安全&#xff0c;但不保证写的安全&#xff0c;在多处理器开发中保证了共享变量的“可见性”。可见性&#xff1a;当一个线程 修改一个共享变量时&#xff0c;另外一个线程能读到这个修改的值。一、高速缓存 1.1 高速…

Remotion 图片处理完全指南:从 `<Img>` 布局定位到 `getImageDimensions` 动态取图

Remotion 图片处理完全指南:从 `<Img>` 布局定位到 `getImageDimensions` 动态取图

2026/9/8 19:23:24

Remotion 图片处理完全指南&#xff1a;从 <Img> 布局定位到 getImageDimensions 动态取图 【免费下载链接】remotion &#x1f3a5; Make videos programmatically with React 项目地址: https://gitcode.com/GitHub_Trending/re/remotion 本文围绕 Remotion 技能…

中国人民大学杨琳团队《Nature Communications》 | 全球潮汐湿地土壤有机碳时空格局与环境驱动:一项2009-2020年的全球评估

中国人民大学杨琳团队《Nature Communications》 | 全球潮汐湿地土壤有机碳时空格局与环境驱动:一项2009-2020年的全球评估

2026/9/7 20:21:46

本文首发于“生态学者”&#xff01;从“湿地面积”到“土壤碳密度”&#xff1a;为什么需要重新认识潮汐湿地蓝碳变化&#xff1f;潮汐湿地位于陆地与海洋的交汇地带&#xff0c;包括红树林、盐沼和潮滩&#xff0c;是全球重要的蓝碳生态系统。其土壤能够长期储存大量有机碳&a…

adb抓包

adb抓包

2026/9/8 4:55:53

前言 本文介绍如何通过 tcpdump 在 Android 手机上抓取网络数据包&#xff0c;并在电脑端使用 Wireshark 进行分析。适用于需要排查 App 网络请求、分析接口调用或调试网络问题的开发与测试场景。1. 手机要有 root 权限2. 下载 tcpdump3. adb push C:\Users\zhangkuixun\Downlo…

大模型推理镜像极简瘦身:从 25GB 巨无霸到 3GB 精简镜像实战

大模型推理镜像极简瘦身:从 25GB 巨无霸到 3GB 精简镜像实战

2026/9/7 8:03:37

大模型推理镜像极简瘦身&#xff1a;从 25GB 巨无霸到 3GB 精简镜像实战 在云原生基础设施中&#xff0c;容器镜像体积直接决定了服务的部署速度与弹性扩容敏捷度。对于传统的 Go / Java 微服务&#xff0c;镜像体积通常被严格控制在 50MB 到 200MB 以内&#xff0c;拉取镜像只…

芯片良率波动可视化:动画拆解工艺因果,重建客户信任

芯片良率波动可视化:动画拆解工艺因果,重建客户信任

2026/9/8 0:02:30

芯片这个行业有个不太被人摆到台面上、但几乎每天都在发生的场景&#xff1a;客户拿着一条良率曲线截图问你&#xff0c;这批货的良率怎么掉了三个点&#xff0c;是不是工艺出问题了&#xff0c;产生的不良会不会流到他们产线上去。你解释了半天&#xff0c;客户似懂非懂&#…

PyTorch DataLoader参数冲突:sampler与shuffle互斥的根源与正确写法

PyTorch DataLoader参数冲突:sampler与shuffle互斥的根源与正确写法

2026/9/8 0:02:30

ValueError: sampler option is mutually exclusive with shuffle&#xff0c;这个报错我在 PyTorch 的 DataLoader 上至少见过几十次了&#xff0c;而且很有意思的是&#xff0c;它经常不是新手专属——很多写了好几年模型的老手&#xff0c;在从单机改成自定义采样器&#xf…

中国车企再破谣言,GAC吉利零跑获欧盟安全五星

中国车企再破谣言,GAC吉利零跑获欧盟安全五星

2026/9/8 0:02:30

有人可能在网上开着皮卡拍视频&#xff0c;声称中国电动车不仅性能不如美国大排量车型&#xff0c;安全性也堪忧。然而事实恰恰相反&#xff0c;GAC、吉利和零跑最新推出的电动车型在极为严苛的欧盟新车安全评鉴&#xff08;Euro NCAP&#xff09;测试中全部斩获满分。就在特斯…

远程协作的工作台整理

远程协作的工作台整理

2026/9/8 4:23:39

远程协作的工作台整理远程协作的核心不是再加一个工具&#xff0c;而是让交接信息足够完整。异步任务要写明目标、输入位置、完成标准和需要决策的人。 工作台的最小配置 将日程、待办、代码和沟通入口收拢到少数固定位置&#xff1b;通知按紧急程度分层。工作台不需要模仿办公…

持续集成 流水线自动化与 声明式交付 实践:原型怎样变成可用功能

持续集成 流水线自动化与 声明式交付 实践:原型怎样变成可用功能

2026/9/8 3:19:39

持续集成 流水线自动化与 声明式交付 实践&#xff1a;原型怎样变成可用功能分类&#xff1a;[AI/大模型]细分主题&#xff1a;AI 增强型 CI/CD 流水线自动化与 GitOps 实践&#xff1a;Agent 工作流、工具调用与任务拆解&#xff1a;从原型到生产的验收清单很多团队在尝试用大…

容器编排 生产环境运维与排障实战:复盘记录怎样真正派上用场

容器编排 生产环境运维与排障实战:复盘记录怎样真正派上用场

2026/9/8 4:00:23

容器编排 生产环境运维与排障实战&#xff1a;复盘记录怎样真正派上用场分类&#xff1a;[工程技术]细分主题&#xff1a;Kubernetes 生产环境运维与排障实战&#xff1a;可复制的项目复盘模板与决策记录大部分团队的事故复盘报告&#xff0c;最后都变成了躺在 Confluence 或钉…