至顶网软件频道消息: 今天AWS推出了一款专为机器学习设计的新处理器芯片,这也是Amazon在云计算领域雄心勃勃的另一个标志。
这款名为Inferentia的芯片将通过AWS EC2计算服务、SageMaker AI服务和(今天公布的新服务)Amazon Elastic Inference提供,旨在加速由机器学习模型执行的推理或预测过程,为Amazon Alexa和自动驾驶汽车等服务提供动力。
Inferentia芯片是由Amazon几年前成立的芯片设计公司Annapurna Labs设计,据称它与GPU(主要来自于Nvidia公司,一直是机器学习的首选芯片)相比具有低延迟和低成本等优点。
预计Inferentia芯片将于明年上市。AWS首席执行官Andy Jassy在今天上午的re:Invent大会主题演讲中简要介绍了Inferentia芯片,但他给出的设计或者规格细节很少,只是说Inferentia芯片支持多种数据类型和所有主流框架,如PyTorch和TensorFlow和MXNet。此外它还将提供数百的TOPS性能,聚合起来可以实现上千的TOPS性能。
Inferentia芯片是本周以来AWS宣布推出第二款芯片。周一晚上,AWS宣布推出名为Graviton的处理器,该处理器可通过AWS EC2云计算服务提供给云客户。Graviton是基于智能手机、网络路由器和各种其他设备中使用的Arm架构,并将逐渐用于计算机服务器中,例如AWS设计用于海量数据中心的计算机服务器。
Moor Insights&Strategy总裁兼首席分析师Patrick Moorhead表示:“AWS宣布将自开自己的支持多种框架的机器学习推理芯片是一个重大的消息。与Google Cloud不同,这项AWS服务将广泛应用并具有弹性。目前AWS针对推理提供CPU、GPU、FPGA、以及现在自己的ASIC。”
在过去几年中我们看到,市场中出现了大量新芯片用于特定应用的优化,特别是机器学习和人工智能。例如,Google提供对自定义Tensor处理单元芯片的云访问。芯片设计兴起的一个原因是,所谓的超大规模数据中心企业需要对他们的硬件进行尽可能多的效率优化。
所有这些都让数据中心领导者英特尔处于了守势。英特尔收购了Altera和Movidius等多家公司,为其核心X86产品线增加了新的芯片设计和专业技术。此外英特尔还调整了X86芯片(如目前的至强产品线),以更好地应对机器学习和其他任务。
Amazon还发布了Elastic Inference,这是一项由GPU提供支持的深度学习推理加速服务。Jassy表示,这项服务仅根据需要提供尽可能多的AWS计算实例,可以节省高达75%的推理成本。
此外,AWS推出了一系列与人工智能相关的服务和产品,包括自主模型汽车Deep Racer,开发者可用来研究强化学习,预订价为249美元。
好文章,需要你的鼓励
Birk Jernstrom在Shopify收购其上一家初创公司后,创立了货币化平台Polar,专注帮助开发者构建单人独角兽企业。该平台为开发者提供支付基础设施服务,处理全球计费和税务问题,让企业从第一天起就能销售在线产品和SaaS订阅服务。Polar获得了Accel领投的1000万美元种子轮融资,自2024年9月推出以来已吸引1.8万名客户。
Anthropic和Open Philanthropy研究人员发现,之前声称AI推理模型存在"准确率崩溃"的研究实际上混淆了推理能力和物理限制。通过重新分析发现,AI模型在遇到输出长度限制时会主动停止,而非推理失败;部分测试题目本身无解却被当作失败案例;改用程序生成方式后,模型在复杂问题上表现出色,揭示了AI评估方法的重要缺陷。
OpenAI首席执行官奥特曼证实,Meta为挖角OpenAI和谷歌DeepMind的顶尖AI研究人员,开出了超过1亿美元的薪酬包。然而,这些挖角努力基本失败。奥特曼表示,员工们认为OpenAI在实现AGI方面机会更大,公司文化更注重创新使命而非高薪。Meta正在组建超级智能团队,但面临OpenAI、Anthropic等竞争对手的激烈竞争。
华为联合多所高校发布TeleMath数据集,这是首个专门评估大型语言模型在通信数学问题求解能力的基准测试。研究团队设计创新的合成数据生成框架,从50个专家问题扩展至500个测试样本,涵盖信号处理、网络优化等七大领域。评估结果显示,专门的推理模型明显优于通用模型,为通信AI应用指明方向。