大数据之Hadoop从入门到放弃之hadoop的小伙伴们
前言:一个关于"抢资源"的故事在讲YARN之前,让我先讲一个真实的故事。那是Hadoop 1.x的时代,我们公司有一个50台机器的Hadoop集群。某天,数据组的小王提交了一个MapReduce任务,跑全年的用户行为分析;与此同时,算法组的…
11 0
16 分钟 阅读全文
共 2 篇文章
前言:一个关于"抢资源"的故事在讲YARN之前,让我先讲一个真实的故事。那是Hadoop 1.x的时代,我们公司有一个50台机器的Hadoop集群。某天,数据组的小王提交了一个MapReduce任务,跑全年的用户行为分析;与此同时,算法组的…
前言:为什么我们需要一个"动物园管理员"话说在单体应用的美好时代,一切都是那么简单:一个Tomcat打天下,一个MySQL存数据,session往内存一扔,美滋滋。然后有一天,老板说:"咱们系统要支持百万用户!"于是你开始了分布式改造之旅。…