目录一、概述二、MR支持的压缩编码三、压缩方式选择四、压缩位置选择五、压缩参数配置六、Map输出端采用压缩七、Reduce输出端采用压缩一、概述压缩的优缺点优点：以减少磁盘IO、减少磁盘存储空...

如果说大数据是每天写sql还不太精准（精准的是用各种方式写SQL）当你不创造东西时，你只会根据自己的感觉而不是能力去看待问题。会不会转别的，看个人兴趣，大数据方向还有那么多。瞅瞅方向：如...

目录纯Docker部分Docker结合Hadoop部分环境搭建篇Docker入门传送门基于传统的hadoop搭建方式，将hadoop搭建前的虚拟物理机准备部分使用docker容器替代，后续配置文件操作依然为传统方式。规划为...

大数据技术之Sqoop一.Sqoop简介二.Sqoop安装三.Sqoop应用1.全量导入1.1MySQL导入HDFS1.2MySQL导入到Hive1.3MySQL导入到HBase2.增量导入2.1append模式2.2lastmodifie…