在Windows下使用浏览器访问HDFS的小问题

在Windows下使用浏览器访问HDFS的小问题

关闭每个节点的linux防火墙 方法1:临时性关闭防火墙(重启失效) 使用 /etc/init.d/iptables stop 或者 service iptables 加上(restart start syop)控制状态...
使用sqoop将oracle数据导入hdfs集群

使用sqoop将oracle数据导入hdfs集群

集群环境:     hadoop1.0.0     hbase0.92.1     zookeeper3.4.3     hive0.8.1     sqoop-1.4.1-incubating__hadoop-1.0.0.tar        首先,当然前提是hadoop集群...
Windows 实现 读取 HDFS 上 文件内容

Windows 实现 读取 HDFS 上 文件内容

前几天一直在搞HDFS文件的下载与上传,但是在集群内部可以,在集群外部却出现了错误,照说,HDFS的保密协议应该没那么高吧,不解中。 后来才发现自己网上找的代码,却...
Ranger HDFS Plugin Details

Ranger HDFS Plugin Details

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/houzhizhen/article/details/78363332 The main entrance is s...
hadoop 数据的分段组织和复制流水线

hadoop 数据的分段组织和复制流水线

HDFS数据组织是分阶段的 客户创建一个文件的请求并不是马上到达NameNode,实际上,HDFS客户把文件数据先存放到本地的一个临时文件上,应用程序间接地向这个文件写数据...
hdfs数据流读取

hdfs数据流读取

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/qq_30366667/article/details/73293452 RPC实现流程 RPC(远程过程调用...
如何从根源上解决 HDFS 小文件问题

如何从根源上解决 HDFS 小文件问题

本文原文(点击下面 阅读原文 即可进入): https://www.iteblog.com/archives/2320.html 我们知道,HDFS 被设计成存储大规模的数据集,我们可以在 HDFS 上存储 TB ...
Java API访问HA方式的HDFS

Java API访问HA方式的HDFS

版权声明:本文为博主原创文章,欢迎转载。 https://blog.csdn.net/chengyuqiang/article/details/81506561 1、介绍 对于namenode是HA高可用集...
HDFS ZKFC实现NameNode自动切换原理

HDFS ZKFC实现NameNode自动切换原理

版权声明:本文为博主原创文章,欢迎转载。 https://blog.csdn.net/chengyuqiang/article/details/78833171 官方文档: https://issues.apac...