Cloudera Manager--升级

  我想大家都已经很熟悉Cloudera公司的产品了,我也是从CDH以及CM 4.x使用到现在最新版本CDH5.10.0。不知道大家是否和我一样,喜欢去折腾一些新的版本,总感觉最新的发行版要好一些,有更多优化改进的地方,哈哈哈,当然这种只是片面想法,毕竟早期的版本还是比较稳定。

  我们在升级CDH的时候,首先去升级的是Cloudera Manager,下面博客主要讲解的就是Cloudera Manager从5.5.1升级到5.9.1(其实升级的方法都是大同小异的,比如下面的方法升级5.5.1到5.10.0都是可以的亲自都升级过,只是下面的讲解截图是5.9.1)。

下载上传配置

  1. 下载rpm包,http://archive.cloudera.com/cm5/redhat/6/x86_64/cm/

Some of the anomalies about kylin

  在做kylin的时候遇到了的一些问题,如果后面继续发现问题,会持续做更新……

  1. 异常信息:可以发现是找不到hive-jdbc驱动包
  2. kylin运行时Container内存不够
  3. 在kylin中执行SQL语句异常
  4. kylin执行时找不到类

About the installation of kylin

  我在这里就不去写一些关于Kylin的一些介绍了,而对于kylin的安装我想网上的博客也不少,那为什么还要写呢?主要有以下几点:

  1. 博客太多太杂,难免会遇到一些坑
  2. 该kylin的安装,主要是结合cloudera cdh安装
  3. 针对的是kylin 2.0版本,里面有些参数已经对于之前的版本有所改动了

HBase--强制删除表

  HBase 强制删除表,这个网上记录的也有,但是发现有些记录的有问题,如果要是在生产环境中就需要谨慎的去操作了。在这里我记录一下自己工作中遇到的这个问题,以及解决步骤,遇到类似问题可以参考一下。

发现异常信息

  • 发现表无法操作了,查看一下状态:
    1
    2
    3
    4
    5
    6
    7
    8
    hbase(main):003:0> desc 'HBaseTable'
    Table HBaseTable is DISABLED
    HBaseTable
    COLUMN FAMILIES DESCRIPTION
    {NAME => 'd', DATA_BLOCK_ENCODING => 'NONE', BLOOMFILTER => 'ROW', REPLICATION_SCOPE => '0',
    VERSIONS => '3', COMPRESSION => 'SNAPPY', MIN_VERSIONS => '0', TTL => 'FOREVER',
    KEEP_DELETED_CELLS => 'FALSE', BLOCKSIZE => '65536',IN_MEMORY=>'false',BLOCKCACHE=>'true'}
    1 row(s) in 0.0900 seconds

VirtualBox--网络配置

  下面是对VirtualBox进行网络配置,我需要的网络要求是虚拟机可以通过外网,虚拟机与虚拟机之间可以相互访问
对于VMwar相对来说简单一点,其实VirtualBox也比较简单,只是概念稍微绕一些,不想VMWare那样通过一个nat就能访问外网内网。
VirtualBox的四种网络模式各有各的优点,不过不能同时支持我的需求,
所以需要同时启动两块网卡,一种采用默认的NAT方式访问外网,一种使用Host-Only模式使得主机和虚拟机之间可以相互访问。

当前网速较慢或者你使用的浏览器不支持博客特定功能,请尝试刷新或换用Chrome、Firefox等现代浏览器