微软王枫：数据是下一代IT趋势的核心

ZDNet至顶网软件频道消息 （文/张琎） 近日，在北京召开的2012云计算架构师峰会上，微软亚太研发集团中国云计算创新中心总监王枫做主题为“大数据的新世界”的演讲。王枫认为，现在IT进入一个云计算、物联网和大数据的新阶段，而数据是下一代IT趋势的核心。

王枫表示，云计算带给IT业有三个主要的优势：经济性、快捷性和带给企业的创新性。云计算通过资源池把所有的资源数据通过云计算技术、云计算理念整合起来，其中数据起了关键作用。IT基础设施、平台和应用，没有了数据，就是一个空架子。从物联网角度来说，它实际上主要是对目标的所有属性进行采集，对这些属性进行跟踪、管理和分析，这些属性就是数据。

大数据成为IT趋势里很重要的一个环节的原因是，要做到对于数据的处理能够更有效，还需要硬件在计算、存储、各个方面有足够的就绪，同时成本能够降低。无论是云计算还是大数据，其实最主要的是给企业和政府带来的利益就是它经济上的价值。

大数据的产生

王枫认为，所谓的大数据，主要的原因是随着IT的发展、互联网的成熟以及各种各样数据源的成熟，在这个世界上现在产生了各种各样的数据， 这些数据不光是它的数量的大小，同时是它的种类的繁多，不再像传统那样，很多结构化的数据，现在有各种各样非结构化的数据，这些数据可以是视频、可以是音乐、可以是文件、可以是各种版本的文件。这些东西随着这些现有的技术，滋生出来各种各样的数据，它就形成了一个大数据的“大”的概念，所以这个大不简简单单是尺寸的大小，表示了这个数据的复杂性。

在互联网之前，主要的数据来源是企业内部的数据源，每一个企业有自己的IT中心，有面向企业的应用，通过ERP等各种各样的数据。互联网带来IT创新，通过互联网实际上对应用和数据提供了一个庞大的平台，在互联网上就滋生出各种各样的数据，大数据主要的核心是大数据带给IT和企业什么样的价值。根据IDC报告， 未来10年，大数据还会继续扩展。大数据作为一个产业链，需要利用这些数据去发掘它的潜能，从数据的产生到数据的采集、数据的存储、数据的发送、数据的处理和数据的分析，最后，通过把这些数据产生出来的分析结果，用它去指导企业，并制定企业更好的方针和政策，所以它是一个产业链的概念，在每一个环节都是不可缺少的。

大数据给企业提供了机遇，也给企业带来挑战和创新。如何通过更好的工具去分析，通过采集、存储、处理、分析各个方面把这些数据可视化，是企业决策者需要考虑的事情。

大数据的生命周期

微软认为大数据最主要的三个阶段，这三个生命周期，第一， 数据采集,以及通过什么样的方式采集。第二，数据存储，以什么样的存储技术，能够保证它的安全性，它的不间断性、可持续性、扩展性。在这个基础上，如何把这些数据做处理，去丰富、去满足企业所想要的要求。最后，通过已经处理好的、整合的、清理干净的数据做分析，并做格式化的呈现,这三个方面对于实现大数据的价值是非常重要的环节。
　　
大数据对存储的要求非常高，从简单的技术层面来说，能够存多大的数据量，数据的安全性、不可间断性、可持久性、扩展性，是这些数据存储的基本技术。从另一点来说，又会面临一个问题，也就是说现在大家说到云计算， 一般来说，在一个IT的应用里，在数据存储这块无非有几种方式，一种是传统IT的方式，也就是说每一个企业有自己的数据中心，这个数据中心既可以是传统的物理机的模式，没有采用云计算的技术，也可以是私有云，也可以通过公有云来存储管理数据。

对于公有云模式，实际上安全包括网络上的速度可能是一个比起私有云和公司内部的数据中心来讲，是一个需要考虑的因素。放在公有云上，虽然能够帮企业节省管理和运营的成本，不需要自己管理运营数据中心，但是也有它的弊病。从另一点来说，如果是企业自己内部的一个内网监控下的私有云，或者传统的数据中心来说，可以通过企业自己的控制， 来保证它的安全，提高效率，特别是数据中心的效率。

从这个角度来说，混合云，在一种混合的模式下可能是一种最好的方式。也就是说对于大数据的处理，可以根据企业的业务特性，来制定哪些应用、哪些数据需要通过私有云的方式，哪些需要放在公有云上，来利用公有云的优势，这样对于企业来说，最后是以私有云的方式来管理存储大数据。
　　
从存储的角度，核心技术主要有两点，第一，关系型的数据中心，第二，非关系型数据中心。比如说微软SQLServer已经不简简单单针对结构化的数据，各种各样的数据类型，SQLServer都有这个能力去处理存储，甚至可以自定义自己的数据类型，有些数据类型可以通过它提供的技术自定义，同时因为它是关系型数据库，对于大数据、复杂的数据，可以利用各种各样的技术进行查询、索引，比如刚才讲的全文本的查询、非结构化的属性的查询，都可以通过它提供的各种各样的技术来管理、存储，来更好的利用这些数据。
　　
非关系型数据存储技术与关系型的差别是只专注于数据的读取，关系型的数据存储非常复杂，对于非关系型的数据，比如说大的视频、大的音频，其实我们更关心的是数据怎么存储、怎么把它拿出来,做一些简单的属性上的查询，不需要太复杂的关系型的操作。 SQL Server的好处，从性能、效率和操作的简单性上，相应来说比关系型数据库有优势。但是从这点来说，这是两个不同的技术。从微软来说，SQL Server是微软大数据平台，特别是在存储的角度。

SQL Server大数据平台集成HADOOP
　
HADOOP最主要的特性就是它提供了一种世界IT领先技术，去如何通过这种并行的技术处理各种各样的数据，通过 HADOOP自己存储的空间，或者说跟微软的存储集成，HADOOP作为世界领先的数据处理技术，利用现有的硬件资源做并行处理，达到智能性的处理。微软利用大数据平台和HADOOP集成，更好地为用户提供灵活和方便的技术。
　　
微软活动目录与HADOOP的集成，能够更好的提高HADOOP对数据的安全性，通过云计算主要的管理工具与HADOOP的集成，能够和HADOOP为主的大数据的处理提供一套最先进、最灵活的管理方式。通过SQL Server，存储、商业智能与HADOOP的集成，能够把HADOOP处理完的数据更好的展现给用户。所以，微软与HADOOP的集成做到了淋漓尽致的地步，同时也提供了一个开源、开放的平台，和世界IT领先技术进行了很好的结合。
　　
5月份新发布的SQL Server 2012版本，在存储平台、BI平台、HADOOP集成方面，为世界上的用户提供了一些好的案例和特性，最主要的就是保证数据的不间断性，这是一个大数据存储必需的条件。　　

大数据的处理、分析、利用　　

数据的处理无非是几个方面，如何发现、如何组合、如何转换、如何分类数据，都是下一步要进行的主要工作。首先要了解这些数据的来源，它到底是什么样的数据，是个人的、企业的还是互联网的？最后通过数据的整合和分析，可以从数据里面提出精炼的想要得到的价值数据。

在应用商店里，不光是用户和企业都可以通过软硬件的模式享受应用，同时也可以把自己的应用放在这个商店里共享，提供商业价值。在应用基础上，由于大数据又带来一个新的概念，就是数据商店，从大数据的产业上来说，需要一个数据商店的平台，这个平台能够把数据，不管是数据的供应商、集成商、采集商、开发商，都可以通过这个平台去把数据放到这个平台上，去和所有的企业、所有的伙伴共享。同时，也可以享受在这个平台上所拥有的各种各样的资源。微软在Windows Azure平台上，除了微软自己的应用商店以外，通过SQL Server的技术和Azure的集成，和HADOOP的集成，微软也创建了应用商店，它是一个非常好的模式，同时也是基于公有云上的数据商店这么一个平台。
　　
当对数据进行很好的处理和丰富以后，接下来要对大数据所做的事情，就是如何根据企业的需要好好地进行分析，提供可视化的数据，来为企业服务。 大数据带来了整个IT产业链的发展，同时也带来了对新的人才的需要。数据科学家是随着大数据而产生的新的职位，他不一定是一个IT专业人士，但是他要对这个企业有特殊的专业知识，他能够知道哪些是企业需要的。需要通过对商业智能各种各样的工具、各种各样产品的熟悉，来产生商业智能分析的模式，然后通过技术，把这些分析的模式，怎么把它通过可视化的方式展现给最终的用户。
　　
微软SQL Server通过简单的拉拽过程，产生各种各样类型的展现模式，这些模式是通过Windows、Office等等来展现的，可以在数据间根据需求来自动展现想要达到的数据模式。这也是大数据的一个非常重要的技术。
　　
大数据成功案例　　

微软云计算、大数据的成功案例是成都食品监控案例，它集成了云计算、物联网和大数据三个最主要的IT趋势的核心。所用到的技术，云计算、虚拟化、高性能计算、管理、数据库、大数据平台、BI商业智能分析，包括云加端的概念，这是一个很典型的已经在实用，已经落地，已经被政府正式采用，为市民提供服务的一个很好的案例。