hadoop - 相关文章

Linux

hadoop-2.7.3源码编译:支持snappy压缩

封尘网  - 发布于 16-12-20

hadoop2.7.3是一个小版本发布,基于hadoop2.7.2稳定版本;本次编译主要是支持snappy压缩功能; 下面是hadoop2.7.3主要功能和改进概述: Common 1.当使用HTTP 代理服务器的时候,认证改进。当通过...

Linux

Hadoop+Hbase+Hive+Zookeeper+Mysql

封尘网  - 发布于 16-05-31

最近公司在计划未来能够自己使用Hadoop环境,于是都在研究环境的搭建、和一些基本的操作。在服务器弄了三台来搭建了一个小集群环境。方便日后查阅做个记录。 环境准备: 系统版...

Linux

Unable to instantiate org.apache.hadoop.hive.ql.metadata.Sess

封尘网  - 发布于 16-05-28

版本:Hive-2.0.0 Hadoop环境中,某个节点上执行hive命令时报如下错误: Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient 说明:环境由三台服务器组成的,Hive元数据保存在...

Linux

FAILED: Execution Error, return code 1 from org.apache.hadoop

封尘网  - 发布于 16-05-27

hive创建表到hbase上报错:FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. org.apache.hadoop.hbase.HTableDescriptor.addFamily(Lorg/apache/hadoop/hbase/HColumnDescriptor;) 说明: 环境版本: H...

Linux

Hadoop HA环境搭建

封尘网  - 发布于 16-04-13

本 文搭建环境以普通用户运行 Hadoop 集群环境,同时为了保留软件版本号,方便日后升级,所有解压目录都创建软连接,同时在环境变量 /etc/profile 或 ~/.bash_profile 文件中引用的路径都为...

Linux

在Hadoop集群中安装Hive遇到的问题

封尘网  - 发布于 16-03-31

前段时间的Hadoop小集群搭建了,同时也去Hbase数据库也配置上,今天准备在此环境上再把Hive搭建起来并结合Hbase。中途遇到的问题很头疼。度娘找不到太多实际的资料,再说很多都是基...

Linux

hadoop集群中report命令却显示Configured Capacity为0

封尘网  - 发布于 16-03-29

Hadoop集群环境搭建起来后,直接启动HDFS,然后检查每台主机上的进程都正常,打开网页查看都能显示,但是有一个奇怪的问题。 如下图所示:统计信息会是0,很明显不正常嘛。但是日...

Linux

hadoop把secondarynamenode分离

封尘网  - 发布于 16-03-29

hadoop-2.5.2这个版本的NameNode和SecondaryNameNode默认都是在同一主机上,这样就会失去了原本的意义。SecondaryNameNode不是NameNode的备份,但是它会保存一次重要的数据,在NameNode遇到无法修改的...

Linux

Centos6.5搭建Hadoop2.5.2伪分布模式

封尘网  - 发布于 16-01-09

Hadoop伪分布模式:在单节点上同时启动NameNode、DataNode、JobTracker、TaskTracker、Secondary Namenode等5个进程,模拟分布式运行的各个节点; 1、Hadoop搭建环境: 虚拟机操作系统: CentOS6.5 64位,...

资源分享

EasyHadoop 实战操作手册v1.0

封尘网  - 发布于 15-08-01

本文档是Hadoop部署文档,提供了Hadoop单机安装和Hadoop集群安装的方法和步骤,本文档希望让Hadoop安装部署更简单(Easy)。 本安装文档适用于 centos 5 /red hat 5.2 32位,64位版本,ubuntu 等操作系统...