MapReduce成为2009年度10大技术之一

hadoopor 发布于 2009/12/31 09:20
阅读 1K+
收藏 0

国内越来越多的公司开始关注和使用Hadoop,包括各大互联网公司和传统电信设备商等,还有很多小公司,各大高校也均在研究。http://bbs.hadoopor.com/thread-130-1-1.html

 

Hadoop技术论坛:

http://bbs.hadoopor.com
http://www.hadoopor.com

加载中
0
JavaGG
JavaGG

帮你转贴过来吧

InfoWorld最近推出了2009年十大新兴企业级技术排名,跨平台移动应用开发、NoSQL数据库、重复数据删除以及桌面虚拟化位列其中,而分布式处理编程框架MapReduce位列第一位。
MapReduce是Google提出的一个软件架构,主要用于大规模数据集的并行运算,它通过把对数据集的大规模操作,将其分发给网路上的每个节点实现可靠性。在Google内部,MapReduce得到广泛的应用,比如分布排序、Web连接图反转和Web访问日志分析等。提到为什么将MapReduce放在第一位,InfoWorld解释说:

某种程度上来说,这是考虑到MapReduce的独特创新,它使得从前只能在大型商业硬件上所做的事情,在普通的PC机上即可操作——处理千兆级别的数据。在亚马逊的Amazon Elastic MapReduce产品中,以Web服务的方式很好地应用了MapReduce的实现——Apache Hadoop。而且,MapReduce还被集成进一些来自IBM、Oracle等公司的主流解决方案,现在它们云计算所用的服务器中可能就跑着MapReduce。


近几年来,移动设备上的企业应用一直没有得到很好地普及,主要有两个原因,一个是因为开发者需要耗费大量的时间去学习如何为智能设备编程,另外是因为不同设备间的应用移植性不好。这也是为什么InfoWorld认为“跨平台移动应用开发”是2009年新兴企业技术的主要原因:

跨平台移动应用开发环境,比如Rhomobile的Rhodes框架,可以让开发者写一次应用,但能在多个不同的设备上运行,如iPhone、Windows Mobile和BlackBerry等,提供了很多很炫的功能。移动企业级开发的时代快要来临了!


在数据处理方面,十大新兴技术中包含了两个,一个是NoSQL数据库,一个是重复数据删除。对于NoSQL数据库这个概念,在刚提出时就遇到了很大的挑战,因为目前几乎所有的大型应用采用的都是关系型数据库,或者说SQL数据库。NoSQL的推出,无异于一场革命。InfoWorld给出的解释是,NoSQL数据库对于那些如安全日志或者系统日志等结构化不强的数据而言,使用起来很顺手。另外,因为缺少对数据的控制,NoSQL数据库处理数据的速度也很快。而对于重复数据删除这个问题,虽然目前还没有很好的应对方案,但是未来它会在数据存储领域扮演越来越重要的角色。
其他新兴技术还包括桌面虚拟化、I/O虚拟化、固态硬盘(Solid-state Drive)、多核芯片、硬件电力管理、白名单(Whitelisting)等。

返回顶部
顶部