《彭博社》:在裁员和削减成本的一年中,Meta投资于人工智能
Alex Barinka
在Meta平台公司削减成本和裁员的一年中,有一个领域的支出创下了纪录:更新这家社交媒体巨头的基础设施,以在人工智能竞赛中保持竞争力。
周四,Facebook所有者发布了一系列新技术,包括一款内部开发的新芯片,可帮助更快地训练人工智能,以及一款帮助编码人员获取产品构建建议的工具。该公司还正在重新设计其数据中心,以便更容易部署人工智能技术。
“这项工作反映了长期努力,将使我们在所有工作中更好地利用这项技术的进展,”首席执行官马克·扎克伯格在一封电子邮件声明中说。
这款定制加速器芯片将帮助加快推动Facebook和Instagram上用户看到内容的推荐算法。一个新的数据中心设计专门用于最适合人工智能的硬件。Meta表示,它还完成了建造人工智能超级计算机的第二阶段,用于训练大型语言模型,这些技术类似于ChatGPT所使用的技术。
Meta的下一代数据中心。来源:Meta平台公司。Meta去年的资本支出达到创纪录的314亿美元,是2017年的四倍多。在扎克伯格称之为Meta“效率之年”的今年,分析师们预计2022年的支出水平将重复,其中许多资金将用于改善和扩展人工智能基础设施。
“效率要求存在一些紧张”,“但投资于人工智能和投资于效率并不直接竞争,”Meta的人工智能研究总监Kim Hazelwood说。
一些人工智能更新显然是Meta内部效率的推动因素,该公司最近几个月裁减了数千名员工。
CodeCompose是一款面向开发人员的新型生成式人工智能工具,可以自动完成或建议代码更改。该公司表示,迄今已有5,200名编码人员在内部使用该工具,接受了22%的代码完成建议。
该公司越来越多地寻求人工智能来解决其最大的业务问题。对于那些因为苹果公司的隐私变更而感到沮丧,导致他们的数字广告难以定位目标受众的广告客户,Meta计划利用人工智能更好地猜测用户的兴趣。为了与TikTok竞争,Facebook和Instagram开始展示用户未关注的人的内容 —— 这需要算法猜测他们可能感兴趣的内容。
投资者将寻求直接证据来证明这些改进,以证明这种大规模支出的正当性,CFRA Research的分析师Angelo Zino在一次采访中表示。
“显然,一些事情需要一段时间才能真正展现出来,”Zino谈到了Meta整体资本支出的增加。“他们将受到很多审查,确保他们能够开始看到一些收入方面的加速。”
当AI模型被查询时,它们会输出称为推理的答案,这需要一种特定类型的处理。Meta决定开发新的芯片,称为Meta培训和推理加速器(MTIA),以帮助在内部进行特定工作,补充其来自Nvidia的大量图形处理单元。
Meta希望其MTIA芯片将帮助公司快速生成更准确和有趣的预测,预测用户看到的原始内容和广告类型,希望能够导致人们在应用程序上花费更多时间并点击更多广告。
Meta培训和推理加速器芯片来源:Meta平台公司该公司还推出了其首款内部构建的特定应用集成电路 - 或ASIC - 旨在处理视频和直播流。目前,Facebook和Instagram上的用户每天分享超过20亿个短视频,这款新处理器可以帮助这些视频在任何设备上更快地显示,使用更少的数据。
“我们已经能够为我们的推荐模型优化、平衡和定位我们的第一批芯片,”硬件工程副总裁Alexis Bjorlin说道。“我们还可以清楚地看到,对于生成式AI工作负载或任何下游元素的不同需求是什么。”
虽然Meta社交媒体应用程序上使用的推荐引擎是其当前版本的AI技术,但未来生成式AI工作的关键是公司的AI超级计算机,称为研究超级集群,公司将使用它来训练大量的人工智能程序,称为模型。
周四,该公司表示已完成了其建设的第二阶段,该阶段培训了其名为LLaMA的大型语言模型,这将是其建设元宇宙的努力的关键部分 —— 一个虚拟现实平台,为此公司从Facebook更名。
Meta长期致力于向外部社区提供其一些复杂技术。虽然其堆栈中的许多硬件并非如此,但它所支持的一些工作将是开源的。LLaMA与研究人员共享,还有一个在其超级计算机上训练的AI模型,可以解决十个国际数学奥林匹克问题。CodeCompose是基于Meta的AI研究团队分享的公开信息构建的。其新的推理芯片将帮助公司继续支持PyTorch,这是Meta创建的开源AI框架,然后转移到Linux基金会以赋予其更多独立性。
尽管Meta多年来一直在研发AI工具,但扎克伯格选择围绕一个更加模糊的虚拟现实愿景来构想公司的未来。这种转变受到了投资者的严格审查,因此对AI基础设施的深度投资可能有助于重建扎克伯格整体战略的信心,投资研究机构Third Bridge的分析师斯科特·凯斯勒(Scott Kessler)表示。
“他们不想成为行业范围内将AI融入业务的竞争中的一个平庸者”,凯斯勒说。“现在比六到九个月前更多的人可能会相信这种叙事。”