苹果在谷歌芯片上训练AI,打响抛弃英伟达GPU第一枪?
时间:2024-07-30 14:42:43来源:观察者网

美东时间7月29日,苹果公司发布iPhone AI的首个预览版,随后发布论文,称其人工智能模型是在谷歌的TPU(张量处理单元)上训练的。论文中介绍了为支持Apple Intelligence功能而开发的基础语言模型,包括一个设计用于在设备上高效运行的约30亿参数模型和一个基于私有云计算的云侧大模型。

苹果基础模型的建模概述苹果官方发布论文

苹果发布的论文称,他们在8192块TPU v4芯片上训练云侧AFM(Apple Foundation Model),使用4096的序列长度和4096个序列的批量大小,进行了6.3万亿token训练。端侧AFM在2048块TPU v5p芯片上进行训练。

苹果的决定表明,一些大型科技公司在人工智能训练方面可能正在寻找英伟达图形处理单元的替代品。

一些芯片行业媒体称,这是苹果打响了抛弃英伟达GPU的第一枪。

今年6月初,日本证券公司瑞穗证券估计,英伟达控制着用于训练和部署OpenAI的GPT等模型的AI芯片市场的70%至95%。一些专家将英伟达在AI芯片市场的地位描述为护城河,其旗舰AI图形处理单元GPU(例如H100)与该公司的CUDA软件相结合,使其在竞争中占据了先机。

包括谷歌、Meta、甲骨文和特斯拉在内的科技公司一直在努力构建自己的人工智能系统和产品。

心智观察所研究员潘攻愚指出,苹果宣布其Apple Foundation Model(AFM)在谷歌自主开发的Tensor处理单元(TPU)进行训练,而且还租用了谷歌的云服务。苹果在AI训练方面的权衡折射出了英伟达通用型AI加速器和谷歌的ASIC定制化AI服务体系的竞争升级。

谷歌自2015年以来一直在使用自主设计的TPU来训练和部署AI模型。不是设计通用处理器,而是将其设计为专门用于神经网络工作负载的矩阵处理器,在整个大量计算和数据传递过程中,根本不需要访问内存。

今年5月,谷歌宣布推出了人工智能(AI)数据中心芯片Trillium,据称该芯片的速度相比之前的版本提升了几乎5倍。该公司表示,这款芯片将用于开发自己的模型,包括Gemini和Imagen。

谷歌称,如果提前三年预订,最新的TPU每小时使用成本不到2美元。谷歌于2015年首次推出TPU用于内部工作负载,并于2017年向公众开放。它们现在是专为人工智能设计的最成熟的定制芯片之一。

尽管如此,谷歌仍是英伟达最大的客户之一。它使用英伟达 的GPU和自己的TPU来训练AI系统,并且还在其云端出售英伟达技术的访问权限。

“虽然英伟达目前控制着高达80%份额的高端AI芯片市场,但剩余市场份额大多被大型云服务供应商如谷歌、微软、亚马逊占据。这一次苹果采用的谷歌TPUv5虽然在通用性上较英伟达同生态位芯片逊色,但主打一个性价比,综合总成本(TCO)要低英伟达四倍,而且拿货周期短。目前谷歌TPUv5所在的市场大约有300亿美元,英伟达一直觊觎这块‘肥肉’,但考虑到和谷歌微妙的竞合关系,英伟达目前还不会贸然大举进入ASIC领域。”潘攻愚分析称。

Meta首席执行官马克·扎克伯格和Alphabet首席执行官桑达尔·皮查伊上周均发表评论称,他们的公司和业内其他公司可能在AI基础设施上投资过度,但他们也承认,不这样做的商业风险太高。一旦落后,将无法掌握未来10到15年最重要的技术。

标签: 苹果 在谷歌芯片上 训练AI 抛弃英伟

最新
  • 苹果在谷歌芯片上训练AI,打响抛弃英伟达GPU第一枪?

    美东时间7月29日,苹果公司发布iPhoneAI的首个预览版,随后发布论文,

  • 加快未来产业合理布局 科学制定发展路径 焦点热文

    今年初,工业和信息化部、科学技术部和国务院国资委等七部门联合印

  • ​商城县召开民政领域不正之风和腐败问题集中整治工作推进会|焦点关注

    为深入贯彻落实中央、省、市、县关于集中整治群众身边不正之风和腐败问

  • 九九重阳节 浓浓敬老情——驻马店市第九中学开展重阳节慰问退休教师活动 天天热文

    菊花香,桂子香,岁岁重阳,今又重阳。在九九重阳节到来之际,10月22日

  • “典”清婚恋中的法律关系

    导读无论是处在热恋期的情侣,还是结婚多年的夫妻,无论是同在屋檐

  • *ST正邦8月23日打开跌停

    以下是*ST正邦在北京时间8月23日14:30分盘口异动快照:8月23日14点30分

  • 26.69万售价欲大杀四方!岚图FREE改款如换代!

    在中国车市,各类型车型的竞争可谓是异常激烈,如果随意拿起某款稍微有

  • 对方暂不支持接收文件 对方暂不支持接收文件夹

    0471房产来为大家解答以上的问题。对方暂不支持接收文件,对方暂不支持

  • 2023年8月22日二正丁胺价格最新行情预测

    中国报告大厅2023年8月22日二正丁胺价格最新走势监测显示:常州市傲华

  • “全国残疾预防日”来临,武昌五项关爱行动启动

    “全国残疾预防日”来临,武昌五项关爱行动启动极目新闻记者陈倩通讯员

  • 探秘“小众”科室丨中心实验室:练就“火眼金睛” ,助力中毒精准救治

    当前,生活性中毒的发生概率呈上升趋势,加之引起中毒的物质种类及成分

  • 港股异动 | 融创中国(01918)跌幅扩大逾13% 股价跌破1港元 预计上半年净亏损超150亿元

    融创中国(01918)尾盘跌幅扩大逾13%,低见0 96港元,或首次收于1港元下

  • ​北京大学人民医院、信阳市中心医院基层党组织互联共建揭牌暨惠民义诊正式启动

    8月20日上午,北京大学人民医院、信阳市中心医院“党建引领促发展互联

  • 一群女的绑架一个男的(几个女生绑住一个男生)

    大家好,小乐来为大家解答以上的问题。一群女的绑架一个男的,几个女生

  • rk launcher(rk launcher)

    很多人对rklauncher,rklauncher不是很了解那具体是什么情况呢,现在让

  • 远大医药:创新核药TLX591-CDx国内III期临床完成首例患者入组给药

    今日晚间,远大医药(0512 HK)发布公告称,公司用于诊断前列腺癌的全球

  • 旅游
    • 提升室外展示体验 2023年服贸会将设置低碳科技出行展区、老字号展示区

    • 淘宝在哪撤销投诉 淘宝撤销投诉方法 淘宝上如何撤销投诉??? 精选大众点评网

    • 《财富》世界500强出炉 沃尔玛蝉联榜首 中国142家公司上榜

    • 一线直击丨河北涿州:救援力量不断增强 群众陆续获救 水位下降明显