Linux

Hadoop+Hbase+Hive+Zookeeper+Mysql

封尘网  - 发布于 2016-05-31

最近公司在计划未来能够自己使用Hadoop环境,于是都在研究环境的搭建、和一些基本的操作。在服务器弄了三台来搭建了一个小集群环境。方便日后查阅做个记录。 环境准备: 系统版...

Unable to instantiate org.apache.hadoop.hive.ql.metadata.Sess

封尘网  - 发布于 2016-05-28

版本:Hive-2.0.0 Hadoop环境中,某个节点上执行hive命令时报如下错误: Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient 说明:环境由三台服务器组成的,Hive元数据保存在...

FAILED: Execution Error, return code 1 from org.apache.hadoop

封尘网  - 发布于 2016-05-27

hive创建表到hbase上报错:FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. org.apache.hadoop.hbase.HTableDescriptor.addFamily(Lorg/apache/hadoop/hbase/HColumnDescriptor;) 说明: 环境版本: H...

keepalived+LVS

封尘网  - 发布于 2016-04-16

keepalived+LVS高可用架构 一、准备工作 1. 服务器、操作系统(当前CentOS6.5 x86_64) ; # 操作系统:CentOS6.5 x86_64 # 服务器 (LVS主备各1台,WEB服务器3台) Nginx负载虚拟IP:10.0.10.20 LVS主:1...

Hadoop HA环境搭建

封尘网  - 发布于 2016-04-13

本 文搭建环境以普通用户运行 Hadoop 集群环境,同时为了保留软件版本号,方便日后升级,所有解压目录都创建软连接,同时在环境变量 /etc/profile 或 ~/.bash_profile 文件中引用的路径都为...

在Hadoop集群中安装Hive遇到的问题

封尘网  - 发布于 2016-03-31

前段时间的Hadoop小集群搭建了,同时也去Hbase数据库也配置上,今天准备在此环境上再把Hive搭建起来并结合Hbase。中途遇到的问题很头疼。度娘找不到太多实际的资料,再说很多都是基...

hadoop集群中report命令却显示Configured Capacity为0

封尘网  - 发布于 2016-03-29

Hadoop集群环境搭建起来后,直接启动HDFS,然后检查每台主机上的进程都正常,打开网页查看都能显示,但是有一个奇怪的问题。 如下图所示:统计信息会是0,很明显不正常嘛。但是日...

hadoop把secondarynamenode分离

封尘网  - 发布于 2016-03-29

hadoop-2.5.2这个版本的NameNode和SecondaryNameNode默认都是在同一主机上,这样就会失去了原本的意义。SecondaryNameNode不是NameNode的备份,但是它会保存一次重要的数据,在NameNode遇到无法修改的...

Nginx+Tomcat+Redis实现Session共享

封尘网  - 发布于 2016-03-25

Tomcat 要在 Redis 上实现 Session 共享的话就要以下几个依赖包:【把它们复制到 /tomcat/lib/ 目录下】不同版本有可能造成错误。以下几个包下载地址: http://pan.baidu.com/s/1pL9XO6Z commons-pool2-...

脚本自动编译安装redis

封尘网  - 发布于 2016-03-21

Redis的安装比较简单,但是运维的目标是自动化,快速。把脚本自动安装redis记录一下。 脚本内容: #!/bin/bash #==================================================== #Author:SwperEMail:hz328.com #CreateDate:2...

普通用户运行Tomcat7单机多实例

封尘网  - 发布于 2016-03-03

普通用户运行Tomcat7单机多实例 环境:Centos6.5 64位 单机多实例:就是说在一台机器上安装Tomcat服务,通过分开目录的配置以及端口来运行多个Tomcat服务,每个服务各大不影响。 bin:运行...

centos磁盘空间用完导致yum错误提示rpmdb: unable to

封尘网  - 发布于 2016-02-26

Cnetos 磁盘空间用完导致 yum 错误提示 rpmdb:unabletojointheenvironment 很奇怪的一个问题,在虚拟机上安装一个软件,发现执行命令后提示:如下截图 按照网友的说法把: /var/lib/rpm 目录下的...

Centos6.5安装rsyslog+loganalyzer+mysql部署日志服务器汉

封尘网  - 发布于 2016-02-11

rsyslog+loganalyzer 集中式管理日志,并把日志写入到数据库【 Mysql 中】,利用 Web 形式展现给系统管理员。 系统环境: [root@centos~]#uname-rm 2.6.32-431.el6.x86_64x86_64 rsyslog 版本:( Centos6.5 系统...

Linux安装cheat插件快速掌握命令操作方法

封尘网  - 发布于 2016-01-29

cheat命令是有何作用? cheat命令简单来说,就是告诉你一个命令如何使用。通过使用实例告诉你一个命令如何使用。 比如说,你想要知道解压命令top如何使用,都有哪些选项参数等。...

linux mint-17.3安装国际版QQ

封尘网  - 发布于 2016-01-22

使用Linux Mint 系统两三天了,一直有个问题困扰着,就是平时都会习惯上的QQ啊,这两天上webqq无法接收和发送图片。还有很多不便 ,比如远程协助功能。于是在网上搜罗了一天,终于找...

Linux Mint 安装BL-LW05-H 无线网卡驱动

封尘网  - 发布于 2016-01-20

由于之前一直使用Windows系统,最近几天刚换了系统为Linux Mint-17.3-cinnamon-64bit版,换这个系统的原因,我使用的是台式机,之前测试过ubuntu-15.10,发现容易卡死不知道具体什么原因。虽然...

Dockerfile利用内网YUM源制作镜像与Apache自启动容器

封尘网  - 发布于 2016-01-17

1、系统环境: Docker宿主机:centos7.1.1503 【3.10.0-229.el7.x86_64】 内网YUM服务器:Centos6.5【2.6.32-431.el6.x86_64】 IP分配: Docker宿主机:10.0.10.7 YUM服务器:10.0.10.99 2、搭建内网YUM服务器:【在...

Docker 的镜像名和TAG都为none时的解决方法

封尘网  - 发布于 2016-01-13

docker 的镜像名和TAG都为none时的解决方法: 首先,要了解为什么会出现这个none? 一般在制作Docker镜像时已经存在的的REPOSITORY【仓库名】和TAG名,然而还添加了一个一样的仓库名并未以...

动手制作自己的Docker镜像

封尘网  - 发布于 2016-01-12

动手制作自己的Docker镜像,网上很多镜像供我们选择,为什么还要自己制作镜像呢?说到底,别人做的我不喜欢【没安装我想要的包】 重要说明: 制作镜像的系统要和你将制作的镜像...

Docker实现两个容器之间互联

封尘网  - 发布于 2016-01-12

Docker 容器的连接(linking)系统是除了端口映射外【让容器的端口暴露到宿主机上】,另一种跟容器中应用交互的方式。该系统会在源和接收容器之间创建一个隧道,接收容器可以看到...