至顶网软件频道消息:Hortonworks将转售IBM Data Science Experience with HDP(主要Hadoop发行版),采用该平台作为战略数据科学平台,让开发者可以快速获得数据科学能力,包括机器学习、高级分析和统计。此外,Hortonworks和IBM将打造新的解决方案捆绑包,将HDP与IBM Big SQL(用于Hadoop的IBM SQL引擎)进行集成,给Hortonworks的客户和用户提供一种熟悉的数据管理方法。
IBM正在Hadoop分发版中采用HDP,并将其与Data Science Experiece和机器学习全面集成。因此,这个解决方案将为客户提供HDP丰富的数据安全性、监管和操作功能,以及Data Science Experience的高级分析和管理功能。IBM将把现有的IBM BigInsights用户迁移到HDP。
“IBM正在HDP上实现标准化,这一点都不奇怪,因为这些发行版都是基于Open Data Platform Initiative标准,而且BigSQL对于IBM来说是一个重要的差异点,”Constellation研究副总裁、首席分析师Doug Henschen表示。
“这对Hortonworks来说是一个重要的机会,因为IBM在BigInsights上有数百家客户,不管是本地部署还是在云中。如果Hortonworks能够得到哪怕其中半数客户——因为IBM开始提供HPE用于本地部署——作为自己云产品的基础,那么Hortonworks就会在大数据平台市场获得重要的份额。”
除了获得IBM现有客户之外,Hortonworks还将从IBM更庞大的销售团队以及与大型企业客户的长期关系中受益。
值得注意的是,BigSQL和DSX不会是Hortonworks开源HDP的一部分,相反是作为可选的捆绑包,提供了针对HDP的重要新功能。“BigSQL为Hortonworks提供了一个兼容ANSI-SQL的SQL-on-Hadoop选项,类似Cloudera Impala产品,不过它还处理关系源和对象存储,而DSX与Cloudera最近发布的Data Science Workbench相当。”
“在高速发展的开源大数据市场,Hortonworks和IBM找到了彼此,他们的数据库和数据科学平台相互补充,”Constellation Research副总裁、首席分析师Holger Mueller表示。这对双方的共同客户来说也许是个好事,但是对于其他Hadoop发行版的客户来说,有一个值得关注的问题:他们要把数据迁移到HDP还是保留原状?
有人可能还想知道微软将对这个消息做出怎样的反应,因为它自己针对Azure的HDInsight服务是基于Hortonworks的。
尽管如此,这对Hortonworks和IBM都是发展的必然一步,考虑到他们现有的合作伙伴关系以及都是ODPi的创始成员。Mueller还指出IBM与Hortonworks的另一个关键合作伙伴关系,是关于在IBM Power Systems上支持Hortonworks的Data Flow流式引擎。
“流数据是一个性能关键的用例,可能流数据厂商——这种情况下就是Hortonworks HDF——可以通过与IBM这样的硬件厂商合作获得性能和TCO方面的优势。”
好文章,需要你的鼓励
随着数字化时代的到来,网络安全威胁呈指数级增长。勒索软件、AI驱动的网络攻击和物联网设备漏洞成为主要威胁。企业需要建立全面的风险管理策略,包括风险评估、安全措施实施和持续监控。新兴技术如人工智能、区块链和量子计算为网络安全带来新机遇。组织应重视员工培训、供应链安全、数据治理和事件响应能力建设。
滑铁卢大学研究团队开发出ScholarCopilot,一个革命性的AI学术写作助手。该系统突破传统"先检索后生成"模式,实现写作过程中的动态文献检索和精确引用。基于50万篇arXiv论文训练,引用准确率达40.1%,大幅超越现有方法。在人类专家评估中,引用质量获100%好评,整体表现优于ChatGPT。这项创新为AI辅助学术写作开辟新道路。
AWS Amazon Bedrock负责人Atul Deo正致力于让人工智能软件变得更便宜和更智能。他在12月re:Invent大会前只有六个月时间来证明这一目标的可行性。Deo表示AI领域发展速度前所未有,模型每几周就会改进,但客户只有在经济效益合理时才会部署。为此,AWS推出了提示缓存、智能路由、批处理模式等功能来降低推理成本,同时开发能执行多步骤任务的自主代理软件,将AI应用从聊天机器人转向实际业务流程自动化。
哥伦比亚大学研究团队发布NodeRAG技术,通过异构图结构革新智能问答系统。该方法将文档信息分解为7种节点类型,采用双重搜索机制,在多个权威测试中准确率达89.5%,检索效率提升50%以上,为智能信息检索技术带来重大突破。