企业数据量不断攀升的今天,成就了大数据的发展。随着企业数据量的攀升,大数据时代已经全面爆发,而企业用户对大数据的认识日渐成熟,由被动承受转向主动“掘金”。企业该如何接受大数据的洗礼呢?大数据发展何去何从,企业用户如何掘金?在日前英特尔主办的“芯动大数据 智领大机遇”英特尔大数据论坛中,IDC中国企业级系统与软件研究部高级研究经理周震刚先生发表主题演讲,展望大数据未来。
IDC将大数据、云和移动以及社交这四个主题当做未来IT的主要方向。IDC中国从去年开始对大数据市场做了深入研究。IDC的大数据定义是四个“V”,大数据不仅仅指数据量的庞大,主要包括四个方面,高容量的数据,数据类型多样化,持续性不断刷新的数据,以及为用户带来最终的价值。相应的,大数据之于整个IT市场包括了四个层面: IT基础架构层面,包括服务器、存储、网络、I/O等等方面的硬件的设施以及相关的基础架构软件,还有上层数据的组织和管理,更上层对数据的组织,以及更上层的分析和挖掘的市场,包括对最终用户提供的最上层的决策的支持,数据展现的市场。
2010年全球大数据以及相关的硬件、软件和服务市场,大概是30亿美元以上的市场,IDC对大数据市场未来的预测是到 2015年整个市场将超过170亿美元,平均增长速度每年超过50%。同时,IDC对大数据有如下十大预测:
1、在未来两三年当中,大数据的平台Hadoop会有一个很明显的商业化的过程。
2、在2006、2007年的时候,很早期的Hadoop项目也面临着种种挑战,也就是说这头大象在跑的过程中也遇到一些障碍,值得我们在未来关注。
3、Hadoop是完全开源的市场,开源的市场很可能只是一个完全免费的市场,和免费竞争并不是不可能的,另外在免费的市场带来的机会,绝不仅仅是免费的一小块市场。
4、大数据会带来更多的软件公司之间的收购。大数据软件市场的生态系统有很多类型的软件厂商,包括传统的关联数据库厂商,以及多维展现做分析的软件厂商,对Hadoop分析包括管理,包括Hadoop应有的厂商,我们不太熟悉的公司很可能在未来被大公司所并购。
5、在Appliance的市场,包括传统的DataWareHouse的时候,还有NoSQLAppliance,未来有两个方向,一是更为开放的架构,通过开放的架构减低自己的成本,另外也有很多企业级的厂商会采购很多打包的产品,实现它的功能,这种Appliance Server实际上就是未来的趋势之一。
6、大数据将在未来一两年从我们看到的传统的互联网和电信方面的应用,现在看到大数据都集中在互联网,现在看到联通、电信也在着手做很多大数据的开发,未来几年我们将会看到这个大象逐渐向更多行业发展。
7、大数据创造新的细分市场。在数据未来多种多样的情况下,可能有些统一的信息访问平台的细分市场,这个细分市场用来把大数据做统一管理和分析组件。
8、打包的大数据行业分析应用出现。从传统概念来讲,大数据太复杂了,无法形成打包好的分析应用,但是在未来几年中,某一个行业的应用会形成一定的共性,将会有厂商根据行业的分析应用,打包好一些分析的应用,基于大数据的分析应用推广到行业方面,这不仅是做数据分析的专长,也需要很多行业方面的专业专长,将会有很多行业的ISV加入到大数据行列中,基于大数据平台开展他们的开发应用。
9、大数据推动基础架构向Scale-out发展。结构化和非结构化数据的存储方式不一样,更多的大数据采用分析存储的方式更有效率。在对数据进行处理的时候,因为大数据的类型比较复杂,数据量比较大,可以通过分布式的处理方式把应用复杂分散到分布式系统的各个节点上,而传统的数据处理将是运算能力非常强、CPU主频非常高的一台机器来处理,而不是大数据这种多个节点、多个CPU核数来处理,这代表了大数据时代发展方向从Scale-up转向Scale-out。
10、中国成为全球最重要的大数据市场之一。服务器的出货量,去年中国126万台,全球第二。而存储方面两EB大概两千个PB的规模,只是服务器端存储出货量也是全球第二,所有数据都说明,无论是客户端还是企业级,中国都是非常重要的市场,这势必诞生新的模式来让全球认识中国的重要性。
随着物联网、云计算等技术的发展,未来数据量将可能比预测的更大。这些数据量仅仅是数据,并不能解决问题,它要从数据变成信息、变成智能、变成商业价值,这才能够体现出真正的大数据的价值。大数据给市场带来的将是更广泛的机会,对于中国来说这个市场是非常有前景的。各行业的客户和各行业的开发商也应该在大数据市场抓住机会,借助自己的优势创造更多的价值。