作者: Denodo 产品营销高级总监Saptarshi Sengupta
现在,随着新冠疫情逐渐离我们远去,数据的数量和复杂性继续增长,其速度比新冠疫情之前更快。因此,首席采购官 (CPO) 和其他供应链专业人员发现他们需要有效的端到端数据管理功能,以跨众多不同类型的来源无缝实时提供数据视图。事实上,2018 年德勤 (Deloitte) 开展的一项调查发现,超过 3/5 的 CPO (65%) 对于一级供应商之外的了解有限,甚至完全没有了解。一年后,德勤发现 CPO 将数据质量列为采购的主要障碍之一。
多年以来,各组织一直在努力解决其供应链中的数据管理问题,并为企业寻找正确解决方案,与此同时,一个强大的替代方案一直在幕后渗透,这就是逻辑数据仓库 (LDW),它是转换和交付数据的基础,具有较高敏捷性。Gartner 的 Mark Breyer 早在 2008 年就首次提出了这个术语,来指称数据仓库的下一次演化,因为它“专注于信息的逻辑而不是机制”。从那时起,逻辑数据仓库在数千家公司得到成功部署和应用,其复杂性和可靠性也在不断提高。与传统的数据仓库不同,逻辑数据仓库支持跨多个不同系统(包括基于云的存储库和流数据源)提供实时数据视图。
逻辑数据仓库和当今的供应链
最近,Gartner 阐述了如何将逻辑数据仓库用于供应链。他们绘制了一个架构,相对于数据基础设施的其他关键组件(包括操作数据存储、数据仓库、数据集市和数据湖),逻辑数据仓库构成该架构中的核心角色,以满足从事一系列分析工作的不同用户(如业务分析师、数据工程师和数据科学家)的特定需求,这些分析工作涉及操作智能、业务报告和情报、高级分析和数据科学。
Gartner 建议供应链主管围绕 Gartner 的数据和分析基础设施模型 (DAIM) 构建自己的分析和情报方法,DAIM 是一个四象限模型,涵盖数据和分析的大多数应用场景,并且基于以下两个维度:
Gartner 的报告显示了数据基础设施的五个关键组成部分(逻辑数据仓库、运营智能组件、数据仓库、数据湖和数据科学组件)与 DAIM 的对应关系,以及每种场景中倾向于应用的角色和技能。
有两点观察非常明确:首先,除了逻辑数据仓库之外,其他四个基础设施组成部分及其相关的角色和技能,大致按以下方式与四类 DAIM 数据和分析应用场景对应:
其次,逻辑数据仓库包含 DAIM 中的所有四个类别。这是因为它可以在公司现有的基础设施之上实施,包括运营智能组件、数据仓库、数据湖和数据科学组件,从而实现对存储在不同组件中的所有不同类型数据的无缝、实时访问。
由Denodo数据虚拟化提供支持的供应链数据管理
数据虚拟化使现代数据管理成为可能,因其用于数据集成和管理的逻辑方法支持跨不同数据源提供实时视图,用户无需首先将数据以物理方式复制到整合存储库中。Denodo数据虚拟化可以在所有不同底层数据源之上建立抽象和语义层,这些底层数据源包括本地和云端数据源、结构化和非结构化数据源、静态和流式处理数据源,以及旧式和新式数据源,它们构成了逻辑数据仓库。
很多公司正在利用数据虚拟化建立逻辑数据仓库,以解决其供应链问题。此类示例之一是 Hastings Deering Pty Ltd(Sime Darby Industrial 旗下的一家公司),它是最大的 Cat® 经销商之一,为全球的采矿、建筑、电力系统和海洋行业提供服务。截至 2022 年,Hastings Deering 已经进入为期五年的数字化转型的第二年,这项转型包括机器人自动化、纸质表格数字化、数字应用程序开发以及数据和分析,旨在为改善员工和客户体验提供支持。利用数据虚拟化,Hastings Deering 得以迅速追踪其分析能力,扩展其自助服务分析能力,并简化其零件流的数据交付。随着经济和市场条件的不断变化,数据方面的难题不断出现,尽管如此,Hastings Deering 仍然通过采用逻辑数据仓库并使用适当方法,迈出了奠定正确基础的第一步。逻辑数据仓库提供了所需架构,因此 Hastings Deering 可以通过其新的数据市场提供报告、情报、数据共享和数字程序,搭建建立持续数据素养和数据治理程序所需的平台。
下一代供应链分析
由Denodo数据虚拟化提供支持的逻辑数据仓库对供应链至关重要,因为它们在多种应用场景中为组织提供帮助,让组织能够获得实时可见性并具备强大的分析能力。如上例所示,通过公司的新技术和方法举措,Hastings Deering 已经能够加速获取重要数据集,创造更多价值,并进一步增强预测能力,满足业务需求。正如 Gartner 建议的那样,逻辑数据仓库使组织能够从企业数据中获取最大价值,并且可能弥补现有方案的不足,让供应和制造公司能够产生推动数据制作所需的洞察。
好文章,需要你的鼓励
Allen AI研究所联合多家顶尖机构推出SAGE智能视频分析系统,首次实现类人化的"任意时长推理"能力。该系统能根据问题复杂程度灵活调整分析策略,配备六种智能工具进行协同分析,在处理10分钟以上视频时准确率提升8.2%。研究团队创建了包含1744个真实娱乐视频问题的SAGE-Bench评估平台,并采用创新的AI生成训练数据方法,为视频AI技术的实际应用开辟了新路径。
联想推出新一代NVMe存储解决方案DE6600系列,包含全闪存DE6600F和混合存储DE6600H两款型号。该系列产品延迟低于100微秒,支持多种连接协议,2U机架可容纳24块NVMe驱动器。容量可从367TB扩展至1.798PiB全闪存或7.741PiB混合配置,适用于AI、高性能计算、实时分析等场景,并配备双活控制器和XClarity统一管理平台。
中科院团队首次系统评估了AI视觉模型在文本压缩环境下的理解能力,发现虽然AI能准确识别压缩图像中的文字,但在理解深层含义、建立关联推理方面表现不佳。研究通过VTCBench测试系统揭示了AI存在"位置偏差"等问题,为视觉文本压缩技术的改进指明方向。