Hadoop技术内幕——深入解析MapReduce架构设计与实现原理
突然之间,大数据一下子就“火”了,开源软件Hadoop也因此水涨船高。得益于一些国际领先厂商,尤其是FaceBook、Yahoo!以及阿里巴巴等互联网巨头的现身说法,Hadoop被看成大数据分析的“神器”。IDC在对中国未来几年的预测中就专门提到了大数据,其认为未来几年,会有越来越多的企业级用户试水大数据平台和应用,而这之中,Hadoop将成为最耀眼的“明星”。
尽管Hadoop整个生态系统是开源的,但是,由于它包含的软件种类过多,且版本升级过快,大部分公司,尤其是一些中小型公司,难以在有限的时间内快速掌握Hadoop蕴含的价值。此外,Hadoop自身版本的多样化也给很多研发人员带来了很大的学习负担。尽管当前市面上已有很多参考书籍,比如《Hadoop:The Definitive Guide》、《Hadoop in Action》、《Pro Hadoop》、《Hadoop Operations》等,但是,至今还没有一本书能够深入地剖析Hadoop内部的实现细节,比如JobTracker实现、作业调度器实现等。也正因如此,很多Hadoop初学者和研发人员只能参考网络上一些零星的源代码分析的文章,自己一点一点地阅读源代码,缓慢地学习Hadoop。而本书正是为了解决以上各种问题而编写的,它是国内第一本深入剖析Hadoop内部实现细节的书籍。
本书以Hadoop 1.0为基础,深入剖析了Hadoop MapReduce中各个组件的实现细节,包括RPC框架、JobTracker实现、TaskTracker实现、Task实现和作业调度器实现等。书中不仅详细介绍了MapReduce各个组件的内部实现原理,而且结合源代码进行了深入的剖析,使读者可以快速全面地掌握Hadoop MapReduce设计原理和实现细节。
-
微信公众号涨粉丝技巧
大家都知道,公众号是一个很封闭的自媒体平台,因为封闭,所以收益也是全网最高,没有任何平台能与之抗衡,我之前也写过很多公众号项目的文... 1222 0 24-05-07 -
基于AutoJs编写的618双十一淘宝京东赚喵币赚汪汪币炸年兽任务自动完成脚本
基于Autojs的淘宝/京东618以及淘宝双11活动自动刷任务项目快速开始下载并安装app;安装成功先不要打开,去设置->应用->权限->找到“叠蛋糕... 1086 0 25-02-04 -
业务数据访问性能太低怎么办
缓存的定义先来看下缓存的定义。缓存最初的含义,是指用于加速 CPU 数据交换的 RAM,即随机存取存储器,通常这种存储器使用更昂贵但快速... 1217 0 24-05-24 -
php数组函数
PHP 引入文件函数include "text.php"; 引入文件函数算数函数表达式作用mt_rand()随机数pow()幂运算sqrt()平方根PI()圆周率abs()绝对值c... 1192 0 24-04-24 -
php上传图片到个人百度网盘
平时使用百度网盘,都是下载网盘客户端来上传和下载文件。如果想要在系统中使用百度网盘的上传和下载,肯定要用程序来操作客户端。好在,百度网盘开放平台提供了各种实用的接口,在我们开发的程序中,只需要调用接口,就能够完成文件的上传和下载功能 952 0 21-09-01 -
迷你字体
1544 0 24-07-24 -
免费临时邮箱合集
在某些网站提交了 Email 邮箱地址的话,日后很可能就会因此收到大量的垃圾邮件。而偏偏很多网站都必须注册并验证邮箱才能使用,有时会很... 1831 0 24-07-14 -
sketchup 模型合集skp
722 0 24-03-02
发表我的评论
- 这篇文章还没有收到评论,赶紧来抢沙发吧~