互联网 qkzz.net
全刊杂志网:首页 > 电脑网络 > 文章正文
刊社推荐

大数据没有唯一的银弹


  Hadoop可实现海量扩展和基础查询,却不能完成企业级高性能分析;内存计算只适合一部分高性能并发的热点数据;MPP(大规模并行处理)数据库有很好的扩展性,但在OLTP和成本上却没有优势……没有一种技术可以涵盖大数据所有的数据需求。

  ■ 本报记者 霍娜

  “大数据没有唯一的银弹,没有单一的大数据产品能够满足互联网时代的传统企业的大数据需求。”7月18日,Pivotal大中国区总经理刘伟光在接受记者采访时如是说。Pivotal公司致力于提供企业级云平台和大数据平台,由EMC、VMware、GE在2013年4月共同投资成立。

  第三平台

  企业为了提高业务弹性,快速响应业务需求,同时更灵活、高效地管理IT系统,降低成本,需要一个高度自动化的基础平台,对下打通资源池、集群、虚机等管理,对上嫁接各种中间件、数据库、开发工具,同时为上层的应用软件提供支持。这正是Pivotal的努力方向——第三平台。所谓“第三平台”是指建立在移动设备、云服务、社交网络和大数据分析的基础之上,实现云计算、大数据、社交移动化的统一管理的平台。第三平台已经成为EMC公司的发展战略,而Pivotal在EMC第三平台战略中扮演着重要的角色。

  “第三平台说起来陌生,但是其实大家每天都在使用第三平台。微信就是第三平台一个重要的典范,它集成了客户群、数据、很多新开发的应用,从最早只有通话功能,到现在的商店、卖彩票、钱包等多种应用叠加,在一个整体架构下微信不断增加新应用,并且实现数据共享和管理,是互联网级别的第三平台的典范。企业应用中也有很多第三平台。很多传统企业会把原有的业务从线下搬到线上,很多应用不再只供企业内部使用,而是要将数据、应用开放,使更多外部客户和内部员工参与这个平台数据的交互。”刘伟光进一步向记者解释说。

  “建立一个在云上的基于IaaS和PaaS的数据解决方案来简化用户的应用程序开发、维护和管理的平台是未来Pivotal的使命。”刘伟光介绍,Pivotal One是Pivotal引领下一代计算的主要平台产品,包含三条重要产品线——主要由Greenplum数据库、Hadoop和HAWQ(利用SQL语句实现Hadoop操作)组成的大数据产品线,由GemFire、SQLFire产品组合的内存数据库产品线,以及以Clound Foundry为主,支持各种应用开发平台和中间件的PaaS平台。

  Clound Foundry承上启下,对下可进行所有资源的管理,能够跟硬件资源、公有云平台、虚拟化、OpenStack、VMware进行非常有效的集成,它提供了很多对外的接口,如数据库服务、Hadoop、快速数据处理、内存计算、数据分析等。该PaaS平台同时可以支持各种应用开发平台、中间件,如Spring、MySQL、消费中间件等,提供开发技术的接口,让基于这些平台开发的软件,可以很容易实现信息和资源的共享,打通各种业务应用。它也可以支持多种数据支撑平台,如GreenPlum、Hadoop、SQL Fire、HAWQ和GemFire等,这些开发工具或者平台,或者提供分布式数据库支持,或者提供内存集群技术,可以有效集成各种数据管理和分析工具及其应用。

  数据需求多种多样

  据悉,12306是Pivotal在国内的重要客户。其GemFire内存集群技术帮助12306将数据访问速度大幅提升。借助x86技术,Pivotal将订票和查询计算任务平均分配到每一台x86服务器,替代了原有几台大型Unix 服务器,通过并行处理技术应对12306网站的业务压力,从而提升了订票的满意度。

  “过去大多是互联网公司在谈大数据,但现在不仅是银行、电信,还有很多制造企业、科研机构、公安系统都在谈大数据。数据处理需求多种多样,可能是海量数据的存储、查询,也可能需要的是实时的查询、计算,或者是高并发的计算处理,还可能是大量的数据分析,不同企业在不同阶段对应不同业务都有不同的数据处理需求。没有一种技术可以涵盖大数据真正需求的所有数据。”刘伟光告诉记者。

  Hadoop可以实现海量扩展和基础的查询,但却实现不了企业级高性能的分析和查询,这是Hadoop的局限性。MPP(大规模并行处理)数据库有很好的扩展性,但在OLTP(联机事务处理)上有一定劣势,也没有Hadoop成本上的优势。内存计算方式很快也有很多好处,但是它只适合一部分高性能并发的热点数据。NoSQL数据、非结构化数据处理也都有各自的优劣势。没有一种技术可以涵盖大数据真正需求的所有数据,只有把这些数据集合在一起才是真正的大数据。

分享:
 

了解更多资讯,请关注“木兰百花园”
更多关于“大数据没有唯一的银弹”的相关文章
    分享:
     
    精彩图文
    关键字
    支持中国杂志产业发展,请购买、订阅纸质杂志,欢迎杂志社提供过刊、样刊及电子版。
    关于我们 | 网站声明 | 刊社管理 | 网站地图 | 联系方式 | 中图分类法 | RSS 2.0订阅 | EMS快递查询
    全刊杂志赏析网 2016