亚马逊网络服务公司(Amazon Web Services Inc.)近日宣布,计划通过旗下Amazon Bedrock服务提供来自知名机器学习初创公司Mistral AI的两个人工智能模型。
Bedrock于去年4月推出,通过应用程序编程接口提供对托管基础模型的访问。开发人员可以使用API来测试可用的神经网络中有哪一个最适合给定项目,然后将其集成到自己的软件之中。
总部位于巴黎的Mistral获得了超过5亿美元的资金支持。它通过Bedrock提供的两种AI算法——Mistral 7B和Mixtral 8x7B,两者都是开源的大型语言模型。它们针对的是相似的用例,但设计和功能却大相径庭。
Mixtral 8x7B是Mistral最先进的LLM,于12月首次亮相,不久后该公司宣布了最新一轮4.15亿美元的融资。它可以支持聊天机器人,总结文档并生成代码。在内部比对期间,该模型在所评估的大多数基准测试中都优于OpenAI的ChatGPT 3.5。
Mixtral 8x7B采用了被称为专家混合架构的LLM设计。该模型由八个不同的神经网络或“专家”组成,每个神经网络都针对一组不同的任务进行了优化。当Mixtral 8x7B收到用户提问时,它会识别出最适合生成答案的两个神经网络并激活它们。
基于混合专家设计的LLM运行需要的硬件数量相对有限。由于Mixtral 8x7B在回答用户提问时仅激活其八个神经网络中的两个,因此其余六个神经网络不使用任何处理能力。其结果是与传统的LLM相比,降低了基础设施成本,后者在处理提问时激活了所有软件组件。
Mixtral 8x7B的八个神经网络具有467亿个参数。Mistral 7B是该公司通过Bedrock向AWS客户提供的第二个LLM,其设计更简单,只有70亿个参数。它面向特别强调硬件效率的应用程序。
AWS的首席开发人员倡导者Donnie Prakoso在一篇博客文章中详细介绍道,“Mistral 7B是Mistral AI 的第一个基础模型,自然编码功能支持英文文本生成任务。”“它针对低延迟进行了优化,内存要求低,吞吐量高。”
Mistral的两个开源LLM加入了Bedrock已经上架的至少六个基础模型的行列,已经上市。这些已经上架的模型有部分是AWS开发的——即Amazon Titan系列。Bedrock还提供了Meta Platforms Inc.、Anthropic PBC 和其他市场主流玩家托管的神经网络。
好文章,需要你的鼓励
DeepSeek 的 AI 模型在处理效率方面取得重大突破,可能对数据中心产生深远影响。尽管引发了科技股抛售,但业内专家认为,这项创新将推动 AI 应用普及,促进大规模和分布式数据中心基础设施需求增长。更高效的 AI 算法有望降低成本、扩大应用范围,从而加速数据中心行业发展。
Rivian 正全面推进 AI 技术整合,开发下一代电动车平台,以挑战特斯拉的市场地位。公司计划于 2025 年实现免手驾驶,2026 年达到 L3 级自动驾驶。Rivian 还将在车载系统中广泛应用 AI 技术,提供语音交互等功能,并计划推出更实惠的车型,扩大市场份额。
Postman 发布了 AI 代理构建器,这是一款创新的生成式 AI 工具。它允许开发者通过整合大语言模型、API 和工作流程来设计、构建、测试和部署智能代理。这一工具旨在简化 API 交互、优化工作流程,并支持创建能执行复杂任务的智能代理,标志着 API 优先的 AI 开发迈出了重要一步。
微软第二财季利润同比增长10%,人工智能年化收入达130亿美元。然而,云计算业务未达预期,下季度指引不及预期,导致盘后股价下跌。公司资本支出创新高,以满足AI和云需求。尽管Azure增长放缓,但微软对下半年增速加快持乐观态度。同时,中国AI初创公司DeepSeek的崛起引发业界对AI基础设施投资的重新审视。