至顶网软件频道消息:Hortonworks将转售IBM Data Science Experience with HDP(主要Hadoop发行版),采用该平台作为战略数据科学平台,让开发者可以快速获得数据科学能力,包括机器学习、高级分析和统计。此外,Hortonworks和IBM将打造新的解决方案捆绑包,将HDP与IBM Big SQL(用于Hadoop的IBM SQL引擎)进行集成,给Hortonworks的客户和用户提供一种熟悉的数据管理方法。
IBM正在Hadoop分发版中采用HDP,并将其与Data Science Experiece和机器学习全面集成。因此,这个解决方案将为客户提供HDP丰富的数据安全性、监管和操作功能,以及Data Science Experience的高级分析和管理功能。IBM将把现有的IBM BigInsights用户迁移到HDP。
“IBM正在HDP上实现标准化,这一点都不奇怪,因为这些发行版都是基于Open Data Platform Initiative标准,而且BigSQL对于IBM来说是一个重要的差异点,”Constellation研究副总裁、首席分析师Doug Henschen表示。
“这对Hortonworks来说是一个重要的机会,因为IBM在BigInsights上有数百家客户,不管是本地部署还是在云中。如果Hortonworks能够得到哪怕其中半数客户——因为IBM开始提供HPE用于本地部署——作为自己云产品的基础,那么Hortonworks就会在大数据平台市场获得重要的份额。”
除了获得IBM现有客户之外,Hortonworks还将从IBM更庞大的销售团队以及与大型企业客户的长期关系中受益。
值得注意的是,BigSQL和DSX不会是Hortonworks开源HDP的一部分,相反是作为可选的捆绑包,提供了针对HDP的重要新功能。“BigSQL为Hortonworks提供了一个兼容ANSI-SQL的SQL-on-Hadoop选项,类似Cloudera Impala产品,不过它还处理关系源和对象存储,而DSX与Cloudera最近发布的Data Science Workbench相当。”
“在高速发展的开源大数据市场,Hortonworks和IBM找到了彼此,他们的数据库和数据科学平台相互补充,”Constellation Research副总裁、首席分析师Holger Mueller表示。这对双方的共同客户来说也许是个好事,但是对于其他Hadoop发行版的客户来说,有一个值得关注的问题:他们要把数据迁移到HDP还是保留原状?
有人可能还想知道微软将对这个消息做出怎样的反应,因为它自己针对Azure的HDInsight服务是基于Hortonworks的。
尽管如此,这对Hortonworks和IBM都是发展的必然一步,考虑到他们现有的合作伙伴关系以及都是ODPi的创始成员。Mueller还指出IBM与Hortonworks的另一个关键合作伙伴关系,是关于在IBM Power Systems上支持Hortonworks的Data Flow流式引擎。
“流数据是一个性能关键的用例,可能流数据厂商——这种情况下就是Hortonworks HDF——可以通过与IBM这样的硬件厂商合作获得性能和TCO方面的优势。”
好文章,需要你的鼓励
CoreWeave发布AI对象存储服务,采用本地对象传输加速器(LOTA)技术,可在全球范围内高速传输对象数据,无出口费用或请求交易分层费用。该技术通过智能代理在每个GPU节点上加速数据传输,提供高达每GPU 7 GBps的吞吐量,可扩展至数十万个GPU。服务采用三层自动定价模式,为客户的AI工作负载降低超过75%的存储成本。
IDEA研究院等机构联合开发了ToG-3智能推理系统,通过多智能体协作和双重进化机制,让AI能像人类专家团队一样动态思考和学习。该系统在复杂推理任务上表现优异,能用较小模型达到卓越性能,为AI技术的普及应用开辟了新路径,在教育、医疗、商业决策等领域具有广阔应用前景。
谷歌DeepMind与核聚变初创公司CFS合作,运用先进AI模型帮助管理和改进即将发布的Sparc反应堆。DeepMind开发了名为Torax的专用软件来模拟等离子体,结合强化学习等AI技术寻找最佳核聚变控制方式。核聚变被视为清洁能源的圣杯,可提供几乎无限的零碳排放能源。谷歌已投资CFS并承诺购买其200兆瓦电力。
上海人工智能实验室提出SPARK框架,创新性地让AI模型在学习推理的同时学会自我评判,通过回收训练数据建立策略与奖励的协同进化机制。实验显示,该方法在数学推理、奖励评判和通用能力上分别提升9.7%、12.1%和1.5%,且训练成本仅为传统方法的一半,展现出强大的泛化能力和自我反思能力。