ZD至顶网软件频道消息:作为用于对Apache Hadoop应用程序加以标准规范的行业倡议,目前已经有一大批重量级企业供应商承诺加入其互操作性体系当中。
开放数据平台倡议(简称ODPi)日前宣布,DataTorrent、IBM、Pivotal、SAS、Syncsort、WanDisco以及Xavient已经正式承诺只提供能够实现彼此互操作性的应用与平台。
ODPi吸引到一大批重量级厂商加盟
ODPi于今年5月公布了其第一套运行时规范,旨在建立互操作性目标的技术性基础。
尽管该项倡议受到了来自Hortonworks的热情支持,但其它两大Hadoop企业MapR与Cloudera则都对其持怀疑态度。
Hadoop缔造者兼Cloudera公司成员Doug Cutting在接受采访时表示,他觉得ODPi倡议并不值得称道。ODPi“实际并不属于开源社区的组成部分; 事实上,它是独立于之外的基金会组织,”Cutting指出。
在此次公告之前的采访当中,ODPi的John Mertic表示,无论倡议刚刚发布起出现哪些问题,该组织都会通过治理与发展方向的调整将其转化为可能,从而逐步改变Cloudera与MapR拒绝参与的态度。
截至今天,已经有十余款ODPi互操作应用程序完成了测试,且能够成功运行在多套运行时兼容平台之上。另外,目前Altiscale、ArenaData、Hortonworks、IBM以及Infosys Apache Hadoop平台皆可相互兼容。
另外,ODPi还于今天公布,其运行时规范的2.0版本将添加对Apache Hive及Hadoop兼容文件系统的支持能力。
在规范版本1.0中包含Yarn、MapReduce与HDFS的情况下,ODPi希望能够在2.0版本内纳入Hive——用于经由分布式存储实现大规模数据集的读取、写入与管理——从而减少SQL查询在各类Hadoop平台之上的不一致性。
IBM公司产品管理、数据与分析副总裁Ritika Gunnar表示:“ODPi提供了一套用于开发大数据应用的通用型平台,从而实现不同发行版与应用方案之间的互操作能力。末着这种精神,IBM公司将确保我们旗下的大部分Apache Hadoop相关产品具备这种互操作性,其中包括IBM Big SQL、IBM SPSS分析服务器以及IBM Big Replicate等等。”
“通过支持互操作应用程序,ODPi标准将帮助客户从起步阶段即实现可观收益,”Gunnar补充称。
好文章,需要你的鼓励
Allen AI研究所联合多家顶尖机构推出SAGE智能视频分析系统,首次实现类人化的"任意时长推理"能力。该系统能根据问题复杂程度灵活调整分析策略,配备六种智能工具进行协同分析,在处理10分钟以上视频时准确率提升8.2%。研究团队创建了包含1744个真实娱乐视频问题的SAGE-Bench评估平台,并采用创新的AI生成训练数据方法,为视频AI技术的实际应用开辟了新路径。
联想推出新一代NVMe存储解决方案DE6600系列,包含全闪存DE6600F和混合存储DE6600H两款型号。该系列产品延迟低于100微秒,支持多种连接协议,2U机架可容纳24块NVMe驱动器。容量可从367TB扩展至1.798PiB全闪存或7.741PiB混合配置,适用于AI、高性能计算、实时分析等场景,并配备双活控制器和XClarity统一管理平台。
中科院团队首次系统评估了AI视觉模型在文本压缩环境下的理解能力,发现虽然AI能准确识别压缩图像中的文字,但在理解深层含义、建立关联推理方面表现不佳。研究通过VTCBench测试系统揭示了AI存在"位置偏差"等问题,为视觉文本压缩技术的改进指明方向。