GPT-5是OpenAI的语言模型GPT(Generative Pre-trained Transformer)的第五个版本。GPT-4是GPT-3的后继者,预计会在性能和功能上有所提升。虽然目前GPT-5尚未发布,但有消息表示,最早今年7月就会有GPT-5的功能陆续公布,而来到第四季度,GPT-5的正式发布将会颠覆整个世界。

8月1日,OpenAI已经为GPT-5申请了商标。

GPT-5的训练,需要5万张H100加持。英伟达GPU已成为各大AI公司开发大模型的首选利器。然而,OpenAI首席执行官Sam Altaman自曝GPU很缺,竟不希望太多人用ChatGPT。

当前,生成式AI爆发仍旧没有放缓,对算力提出了更高的要求。一些初创公司都在使用英伟达昂贵、且性能极高的H100来训练模型。马斯克说,GPU在这一点上,比药物更难获得。Sam Altman说,OpenAI受到GPU的限制,这推迟了他们的短期计划(微调、专用容量、32k上下文窗口、多模态)。

GPU芯片行业发展分析

在1984年之前,GPU原本只是用于图形和图像的相关运算,受CPU的调配,但随着云计算、AI等技术的发展,GPU并行计算的优势被发掘,在高性能计算领域逐渐取代CPU成为主角。1999年,NVIDIA公司在发布其标志性产品GeForce256时,首次提出了GPU的概念。2006年,NVIDIA发布了第一款采用统一渲染架构的桌面GPU和CUDA通用计算平台,使开发者能够使用NVIDIAGPU的运算能力进行并行计算,拓展了GPU的应用领域。2011年,NVIDIA发布TESLAGPU计算卡,正式将用于计算的GPU产品线独立出来,标志着GPU芯片正式进入高性能计算时代。

全球GPU芯片出货量超过4.6亿片/年

近些年,全球GPU技术快速发展,已经大大超出了其传统功能的范畴,除了满足目前大多数图形应用需求,在科学计算、人工智能及新型的图形渲染技术方面的技术应用日益成熟,进而推动全球GPU芯片市场的持续高速发展。

从全球GPU芯片出货量来看,根据全球知名调研机构JPR数据,从2021年各个季度来看,全球GPU芯片的季度出货量维持在1-1.3万片之间,2021年全年出货总量超过4.6亿片。

预计2027年全球市场规模超过320亿美元

根据IC Insights数据,2015-2021年全球GPU芯片市场规模增速超过20%,2021年,全球GPU芯片市场规模超过220亿美元。

对于 GPT-4 下一代版本是什么样子外界多有猜测,其中呼声较高的一个观点是认为 OpenAI 的下一代大模型产品可能会实现通用人工智能。

OpenAI 在最近的博客文章中提到,它正在组建一个由熟练的机器学习研究人员和工程师组成的团队,以应对调整超级人工智能的基础技术挑战,并在未来四年为此分配 20% 的计算资源。

“虽然超级智能系统现在看起来还很遥远,但我们相信它可能在十年内实现,”OpenAI方表示。