Some of the anomalies about kylin

  在做kylin的时候遇到了的一些问题,如果后面继续发现问题,会持续做更新……

  1. 异常信息:可以发现是找不到hive-jdbc驱动包
  2. kylin运行时Container内存不够
  3. 在kylin中执行SQL语句异常
  4. kylin执行时找不到类

About the installation of kylin

  我在这里就不去写一些关于Kylin的一些介绍了,而对于kylin的安装我想网上的博客也不少,那为什么还要写呢?主要有以下几点:

  1. 博客太多太杂,难免会遇到一些坑
  2. 该kylin的安装,主要是结合cloudera cdh安装
  3. 针对的是kylin 2.0版本,里面有些参数已经对于之前的版本有所改动了

HBase--强制删除表

  HBase 强制删除表,这个网上记录的也有,但是发现有些记录的有问题,如果要是在生产环境中就需要谨慎的去操作了。在这里我记录一下自己工作中遇到的这个问题,以及解决步骤,遇到类似问题可以参考一下。

发现异常信息

  • 发现表无法操作了,查看一下状态:
    1
    2
    3
    4
    5
    6
    7
    8
    hbase(main):003:0> desc 'HBaseTable'
    Table HBaseTable is DISABLED
    HBaseTable
    COLUMN FAMILIES DESCRIPTION
    {NAME => 'd', DATA_BLOCK_ENCODING => 'NONE', BLOOMFILTER => 'ROW', REPLICATION_SCOPE => '0',
    VERSIONS => '3', COMPRESSION => 'SNAPPY', MIN_VERSIONS => '0', TTL => 'FOREVER',
    KEEP_DELETED_CELLS => 'FALSE', BLOCKSIZE => '65536',IN_MEMORY=>'false',BLOCKCACHE=>'true'}
    1 row(s) in 0.0900 seconds

VirtualBox--网络配置

  下面是对VirtualBox进行网络配置,我需要的网络要求是虚拟机可以通过外网,虚拟机与虚拟机之间可以相互访问
对于VMwar相对来说简单一点,其实VirtualBox也比较简单,只是概念稍微绕一些,不想VMWare那样通过一个nat就能访问外网内网。
VirtualBox的四种网络模式各有各的优点,不过不能同时支持我的需求,
所以需要同时启动两块网卡,一种采用默认的NAT方式访问外网,一种使用Host-Only模式使得主机和虚拟机之间可以相互访问。

Oozie--安装配置及注意事项

  简单介绍一下,oozieoozie就是一个workflow协调系统,主要用来管理Hadoop作业(job)。属于web应用程序,由oozie clientoozie server两个组件构成。oozie server运行于java servlet容器(tomcat)中的web程序。

OOZIE

  1. Oozie定义了控制流节点(Control Flow Nodes)和动作节点(Action Nodes)
  2. 控制流节点定义了流程的开始和结束,以及控制流程的执行路径(Execution Path),如decision、fork、join等;
  3. 动作节点包括Hadoop map-reduce、Hadoop文件系统、Pig、SSH、HTTP、eMail和Oozie子流程。

当前网速较慢或者你使用的浏览器不支持博客特定功能,请尝试刷新或换用Chrome、Firefox等现代浏览器