Hive中使用 with as 优化SQL

Hive中使用 with as 优化SQL

背景: 当我们书写一些结构相对复杂的SQL语句时,可能某个子查询在多个层级多个地方存在重复使用的情况,这个时候我们可以使用 with as 语句将其独立出来,...
Hive on Spark 搭建&踩坑

Hive on Spark 搭建&踩坑

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/zyzzxycj/article/details/80267839 背景:想通过jdbc连接hive的方式,...
Hive内置row_number

Hive内置row_number

语法:ROW_NUMBER() OVER(PARTITION BY COLUMN ORDER BY COLUMN) 简单的说row_number()从1开始,为每一条分组记录返回一个数字,这里的ROW_NUMBER() OVER (ORDER BY x...
每个人心中都有一个Hadoop生态圈

每个人心中都有一个Hadoop生态圈

说到现在什么技术最火,想必你一定会想到一个就是Hadoop,你可能经常听说,现在的人们生活在大数据时代,而Hadoop或多或少已经成了大数据的一个代名词。 从狭义上来说...
MPI与Hadoop的区别

MPI与Hadoop的区别

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/qq_15457239/article/details/48824905 1.Hadoop与MPI的主要区别体现在...
《Hadoop与JAVA交互》

《Hadoop与JAVA交互》

1.非常好的学习Hadoop的资源 虾皮工作室 2.Hadoop中RPC通信详解 远程过程调用协议 源码级强力分析hadoop的RPC机制 简简单单的代码让你轻松学会动态代理 Java NIO原理...
Hadoop2.6.0配置参数查看小工具

Hadoop2.6.0配置参数查看小工具

前言 使用Hadoop进行离线分析或者数据挖掘的工程师,经常会需要对hadoop集群或者mapreduce作业进行性能调优。也许你知道通过浏览器访问http://master:18088/conf来...
Hadoop 常见问题总结

Hadoop 常见问题总结

http://blog.csdn.net/huoyunshen88/article/details/9077245 http://cloud.riaos.com/?p=8001390 http://shirley-ren.iteye.com/blog/1174622 出现问题以后先查...
记笔记–hadoop的高可靠性

记笔记–hadoop的高可靠性

hadoop为什么具有高可靠性,靠的是下面的策略: 冗余副本策略、机架感知策略、心跳机制、安全模式、校验和、回收站、元数据保护、快照机制等。