hadoop磁盘空间满的异常

hadoop磁盘空间满的异常

本事故,发生在测试的环境上,虽然不是线上的环境,但也是一次比较有价值的事故。 起因:公司里有hadoop的集群,用来跑建索引,PHP使用人员,调用建索引的程序时,发...
ELK hadoop hbase

ELK hadoop hbase

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/nicky918/article/details/77369707 方案1-ELK elasticsea...
hadoop 安装教程

hadoop 安装教程

当开始着手实践 Hadoop 时,安装 Hadoop 往往会成为新手的一道门槛。尽管安装其实很简单,书上有写到,官方网站也有 Hadoop 安装配置教程,但由于对 Linux 环境不熟...
Hadoop教程(二)Hadoop伪集群环境安装

Hadoop教程(二)Hadoop伪集群环境安装

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/yuan_xw/article/details/50039325     Hadoop教程(二)Hadoop伪集群环...
Hadoop真的适合你吗?

Hadoop真的适合你吗?

许多公司都在为管理海量数据不断努力。以前,他们都使用数据仓库平台,用这种传统架构在处理来自内部和外部数据源的数据时有很大困难,这些数据的结构和内容类型通常...
Win7 安装hadoop并配置hadoop环境

Win7 安装hadoop并配置hadoop环境

阅读本文前,请先安装并配置好JAVA环境,具体步骤可百度,或者我后续有时间会出攻略   首先,去官网下载hadoop,网址:http://hadoop.apache.org/ 点击 Download ...
hadoop子节点挂掉如何重启

hadoop子节点挂掉如何重启

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/weixin_35852328/article/details/78499068 重启挂掉的节点,...
Hadoop在Windows环境下的部署

Hadoop在Windows环境下的部署

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/ruby97/article/details/7423088 经过一整天的折腾,参考了网上很多资...
如何在hadoop中控制map的个数

如何在hadoop中控制map的个数

http://blog.csdn.net/lylcore/article/details/9136555    hadooop提供了一个设置map个数的参数mapred.map.tasks,我们可以通过这个参数来控制map的个数。但是通...
图解hadoop的MR计算流程

图解hadoop的MR计算流程

        图解hadoop的MR计算流程: 1.左边部分是map阶段,右边部分是reduce阶段 1)我们可以看出左边的有四个map task,一般情况下一个map tasl处理一个split的数据...