|
浪潮信息系统软件总监兼信息安全事业部总经理张东:大数据开启行业应用兼信息安全的新浪潮2015年1月22日-23日畅享网第十届信息化领袖峰会暨上海CIO年会如期举行,大数据成为大家关注的焦点。那大数据时代的思维变革商业变革以及管理上的变革是如何在行业应用的呢?本次年会就由浪潮信息系统软件总监兼信息安全事业部总经理张东,为大家带来了“大数据开启行业应用兼信息安全的新浪潮”主题分享。 2015年1月22日-23日畅享网第十届信息化领袖峰会暨上海CIO年会如期举行,大数据成为大家关注的焦点。大数据目前为我们的生活、思维、工作所带来的改变,大数据时代的开启是一个时代的重要转型。那大数据时代的思维变革商业变革以及管理上的变革是如何在行业应用的呢?本次年会就由浪潮信息系统软件总监兼信息安全事业部总经理张东,为大家带来了“大数据开启行业应用兼信息安全的新浪潮”主题分享。 浪潮信息系统软件总监兼信息安全事业部总经理 张东 以下为浪潮信息系统软件总监兼信息安全事业部总经理张东的演讲实录: 其实大数据这个概念已经讲了很久,我今天要讲一下浪潮在过去这几年对于大数据不同的探索和行业应用,或者我们认为怎样才能把大数据做好。 今天讲的内容包括三部分。第一部分是从行业云到行业大数据,讲从云计算到大数据的过程,是怎样一步步往前走的。第二部分浪潮对大数据的整体解决方案,会讲到我们已经有的技术产品和我们在做的新技术。 云计算、大数据都是从互联网时代开始而被提出来,并且把技术运用到互联网行业中去的。实际上中国市场正在变得越来越大,中国人口基数大,美国的公司可能给全球服务,中国公司只给中国人服务,但做出来的规模却不比国外小很多。除了互联网行业,在传统行业内中国也会慢慢变成全球最大市场。 支撑这样庞大的系统,我们以后所面对的中国市场的问题是在美国和欧洲市场看不到的。例如我们正在做的一个最新的信贷架构,之前使用的架构是IBM在美国某些银行用过,而现在的架构是以前在全球从未有过的。以后这种事情会越来越多,中国的市场会遇到很多可能在别的地方遇不到的问题,这也可能给国内的企业带来一些新的机会。 浪潮2011年左右提出了这样一个概念,就是企业如何一步步从传统的IT架构,转到云计算架构。大数据的概念后,大家又开始向大数据靠拢。实际上当时我们给大家规划的路径就是从一开始传统的系统,一步步把数据集中起来,让数据能够在企业中发挥更多的价值。实际上就是,传统行业走向云计算、走向集中、走向大数据的过程。 这个过程我们分了三个阶段。 开始是业务驱动阶段。所有的系统按照大数据的用途开始设置。这个系统按照自上至下自己买硬件、买数据库,逐步树立信息疏导。 第二阶段是从传统架构走向数据融合,再到最后整个系统走向数据驱动的模式。所有业务在设立之初不是业务驱动,而是在系统中有哪些数据要进行处理、哪些数据要收集,收集之后基于这些数据可以想出哪些业务、产生哪些价值,重新构建这样的系统。进入数据融合的时代,把数据融合在一起,首先要想我有哪些数据?怎么可以把数据发挥作用?在这个阶段,最主要的挑战是原来那么多复杂的数据如何融合在一起。可能数据的表现形式不一样,也可能有的数据是会放在数据库中,数据的安全性怎么保证?以前每个人的数据存在自己的记忆卡中比较简单,但现在需要共享之后事情可能就会复杂。这隐私性和可靠性都是挑战。 最后一个阶段,真正进入数据系统,一切围绕数据。我们做的行当叫IT,信息时代,信息就是给其赋予一定意义的数据。在过去这么多年中,大家很少真正围绕数据为核心,但进入大数据时代后,真正可以以数据为核心,让数据驱动业务发展。 其中其实还是有很多问题,第一个问题就是数据的格式和数据分享的壁垒。数据收集过程,用了不同的手段,收集出来的数据就会完全不一样,现在要放在同一个系统中,虽然有利于我们的数据处理,但是这种数据有些是用摄像头、传感器输入,有的是人为输入,所以在数据收集的第一个阶段,格式就变得非常重要。 第二个挑战是在共享方面。我们前两年给很多用户设置过这样的系统,原来分散的数据现在放在一起,这样从中挖掘信息确实很方便。但是数据拥有者就会担心,因为数据还是有一定保密性的。以前数据分管在各自部门时,一旦出现泄密,可以很快找出泄密者。但现在所有的数据放在一起,出现泄漏后到底是谁泄露出去的?是自有者泄露的还是接触这些数据的人泄露出去的?是很难确定的。实际上用户并不是不愿意把数据放在一起,而是担心放在一起后所带来的问题怎么解决。从政策、法律及一些技术方面支持,可以让大家可以把数据放在一起。从技术的角度来讲,数据共享后怎样保持数据的安全、隐私很重要。 大数据系统的应用经常被和传统处理数据系统进行比较。现在很多大数据技术都是从软件出发的,这样技术上可能很好,但有一个很大的问题,就是二次开发会很麻烦。互联网公司可以投很多人学习新的技术,去开发应用,但如果把这些技术拿到传统行业中,传统行业很多的软件不是自己开发而是找第三方的开发商。他们已经习惯了在有标准接口的标准情况下开发,此时在应用很新的系统,要重新学习是非常痛苦的事情。这一点是目前妨碍新技术在传统行业应用的一个非常大的问题,后面还会讲到从浪潮角度来讲,我们致力于不同的大数据平台上开发一套统一的系统,给不同的CIO使用,使新的技术可以利用起来。 角色缺失中所讲的角色,是在数据分析方面的专家。大家觉得云计算就是怎么把IT资源转化为服务,但关心这个的还是原来做IT,但大数据的概念被提出来之后,我们发现大数据和各行各业的人都有关系。 现在大数据的行业中,推动这些事情的很多可能都是从事计算机的人,但严格上说计算机和数学不一样。大数据是希望有人把你在业务里面遇到的问题转化为数学问题,再转化为计算机模型。现在中国业务做的非常好,也不缺人才,我发现从事经济数学的在国内找不到好工作都到国外去了。到了大数据分析的时代,我们发现这个对我们来说很痛苦。我们去推广我们的系统,但是怎么把业务逻辑转化成现在的业务模型,这个确实是不容易干好。需要很老的侦察员把经验转化。在分析过程中还需要经济方面的专家,我觉得这是现在大数据推广所遇到一个很大的问题,我也希望能够和客户一起来合作,把这个事情做好。大数据展现方面的问题,是目前在整个大数据产业链里面很大的一块。 前面讲的是一些对于现在大数据的推广和应用方面的认识,下面讲一下浪潮在这方面做的一些工作。我们致力于给用户提供一个能够把数据存好、管好、提供一些通用的接口做分析的平台,业务创新需要一起把这个事情做好。这一点可能分为三层。 最下面是基础设施。浪潮是做基础硬件的,我们在这方面比较强硬,在数据分析方面提供一些数据。 中间一层是大数据平台。会融合不同的技术,有结构化有半结构化的数据,非结构化的数据,可能有流式处理技术。在此之上会有一个统一平台来支撑用户更好的部署应用,就是一些应用创新。 在基础设施方面,我们认为未来一些比较好的趋势,第一是硬件上的重构。前几年讲云计算,更多讲标准硬件,传统硬件怎么通过软件的方法切分出想要的资源。未来的硬件发展,我们慢慢的会走向硬件也具有一定的重构能力的时代。硬件不可能无限的拆分下去,部分配合我们的软件可以实现云计算中的动态调配。这一代可能在3到5年内逐步实现,今年可能先把IO的模式做出来,CPO的内存可能还需要时间。 另外还有异构计算。在大数据中并不是一个平台就可以满足所有需要,有的计算量大,有的存储量大,就有要不同的平台满足这样的需要。可能有比较强的处理器来满足更大的库存量,或者低能耗的处理器满足更大的存储量。这个是我们正在做的大容量内存机器,现在很多系统都在大量使用内存计算,传统的内存想做的更大比较困难,因为比较贵,但现在一个机器可以做到一个T,要想做到10个、20个T,就要有非意识的存储,也可以只保留一种意识,一种非意识的。 最后一个是高速互联,在机器和机器之间实现互联。在软件方面也有一些支持,首先是混合处理。讲到结构化数据、非结构化数据、内存计算融合在一起,通过一个接口进行调对,安全问题是发展的大问题。我们把很多传统平台上的安全技术引入到大数据平台中实现。 最后是产品的服务化。给大家举一个例子,税务平台。数据一类是自己有的,另外一类是可以从互联网上抓取的。这是比较经典的例子,自己的数据和淘宝的公司对比,发现这家公司可能在某一段时间内,数据报数和网上销售的数据有差异,从中可以找到哪些问题,同时也可以为我们提供一些服务。 今天我就给大家简单介绍了一下浪潮对于大数据平台的理解和我们在大数据方面做的一些工作,谢谢大家。 责编:李玉琴 微信扫一扫实时了解行业动态 微信扫一扫分享本文给好友 著作权声明:畅享网文章著作权分属畅享网、网友和合作伙伴,部分非原创文章作者信息可能有所缺失,如需补充或修改请与我们联系,工作人员会在1个工作日内配合处理。 |
热门博文 |
|