Hadoop技术内幕——深入解析MapReduce架构设计与实现原理
突然之间,大数据一下子就“火”了,开源软件Hadoop也因此水涨船高。得益于一些国际领先厂商,尤其是FaceBook、Yahoo!以及阿里巴巴等互联网巨头的现身说法,Hadoop被看成大数据分析的“神器”。IDC在对中国未来几年的预测中就专门提到了大数据,其认为未来几年,会有越来越多的企业级用户试水大数据平台和应用,而这之中,Hadoop将成为最耀眼的“明星”。
尽管Hadoop整个生态系统是开源的,但是,由于它包含的软件种类过多,且版本升级过快,大部分公司,尤其是一些中小型公司,难以在有限的时间内快速掌握Hadoop蕴含的价值。此外,Hadoop自身版本的多样化也给很多研发人员带来了很大的学习负担。尽管当前市面上已有很多参考书籍,比如《Hadoop:The Definitive Guide》、《Hadoop in Action》、《Pro Hadoop》、《Hadoop Operations》等,但是,至今还没有一本书能够深入地剖析Hadoop内部的实现细节,比如JobTracker实现、作业调度器实现等。也正因如此,很多Hadoop初学者和研发人员只能参考网络上一些零星的源代码分析的文章,自己一点一点地阅读源代码,缓慢地学习Hadoop。而本书正是为了解决以上各种问题而编写的,它是国内第一本深入剖析Hadoop内部实现细节的书籍。
本书以Hadoop 1.0为基础,深入剖析了Hadoop MapReduce中各个组件的实现细节,包括RPC框架、JobTracker实现、TaskTracker实现、Task实现和作业调度器实现等。书中不仅详细介绍了MapReduce各个组件的内部实现原理,而且结合源代码进行了深入的剖析,使读者可以快速全面地掌握Hadoop MapReduce设计原理和实现细节。
-
swiper图片左右滑动轮播
456 0 21-06-02 -
Python3.6.4网络爬虫实战第2版
计算机技术飞速发展,人们对计算机使用技能的要求也越来越高在编写软件时,大家既希望有超高的效率,又希望这门语言简单易用。这种鱼与熊掌... 1112 0 24-05-29 -
龙卷风收音机cradio 电脑版 手机版
龙卷风网络收音机,只用鼠标轻轻一点,就能让您听遍全世界的声音。龙卷风网络收音机(CRadio)是一款可以收听全球各地网络电台的网络收音机... 1044 0 25-02-09 -
微信拍照模糊调用手机相机拍照更清晰
觉得微信拍照糊的,长按相册即可调用手机原相机拍摄并发送。相机拍摄的更清晰,还有美颜功能。以后微信拍照片发给别人,也不怕需要修个图加... 965 0 25-06-22 -
中学教师资格证考试文化素养清晨读书计划
【最终上传版】2020.07.08+传统文化之天文历法(上)陈妍+(笔记)+诗涵.pdf【最终上传版】2020.07.09+传统文化之天文历法(下)+陈妍+(笔... 1289 0 24-08-20 -
MC系统架构是如何布局的?
Mc 基于 Libevent 开发实现了多线程网络模型。Mc 的多线程网络模型分为主线程、工作线程。这些线程通过多路复用 IO 来进行网络 IO ... 934 0 24-05-24 -
不懂人性何谈产品
“不懂人性何谈产品”,内容主要分为三个部分:人性不曾改变人性与需求腾讯基于人性的思考19 世纪初,随着特斯拉改进交流电,人类社会开始... 1016 0 24-05-29 -
树芽读书小程序
“树芽读书”毕业设计项目中,我们可以探讨微信小程序在图书阅读领域的应用,以及它可能涉及的技术和设计要点。微信小程序的设计需要遵循微... 935 0 24-10-27
发表我的评论
- 这篇文章还没有收到评论,赶紧来抢沙发吧~