`
Molisa
  • 浏览: 34292 次
  • 性别: Icon_minigender_1
  • 来自: 武汉
社区版块
存档分类
最新评论

Cloudera Hue Issues

阅读更多
在使用Cloudera Hue时遇到一问题:
1. 使用Sqoop导入功能时,由于配置错误,使得“保存运行”后Job并不能正常提交,且界面上没有相关提示:
  • 使用Hue的Sqoop shell -》 start job --jid * 提交会出现一些错误提示
  • 然后再去/var/log/sqoop/里面查看log


2. 第二个问题是在使用Job Designer设计Sqoop任务,提交时,执行过过程中提示缺少mysql 驱动,虽然驱动已经被我加入到sqoop/lib下,后来才发现,原来安装的时候会将oozie workflow共享依赖的包入到hdfs中,所以我将驱动上传到hdfs://user/oozie/share/lib/sqoop/下,再执行Job就可以了

3. hue oozie 执行sqoop create-hive-table,不能成功在hive metastore中创建table,虽然在sqoop中加入--verbose参数,在执行过程中显示了表示要创建table的DDL语句,但是在hive中show tables;并没有真正创建成功。初步发现的原因,可能是在hue中sqoop没有办法调用起hive client,因为日志的最后并没有打印hive所生成的log.

4. hue oozie中有几个关于时间的设置,都跟时区有关:
  • Cloudera Manager中有关hue的时区的设置,默认为American/LosAngeles,这个时区设置使得hue oozie dashboard中任务的时间显示不能与中国标准时间一致,将其改为Asia/Chongqing,重启hue服务即可。
  • Hue Oozie Coordinator的频率设置,开始和结束时间后的时区设置,是用来调整夏令时区的。由于某些时区实行夏令时,使得开始和结束时间要进行一定的调整。
  • 上面的开始和结束时间使用的是UTC时区,这个设置可以更改/etc/oozie/conf/oozie-default.xml中的oozie.process.timezone,默认为UTC。然后,Hue oozie对这个设置的更改不起作用,所以在使用hue oozie时,设置时间固定以UTC为基准,中国时间比其早8小时,一般要减去8小时。


5. 当使用MySQL作为集群中Hive的MetaStore和Cloudera Manager Monitor Service的Database的时候,各个节点要安装mysql-connector。

6. 在使用Cloudera Manager部署Hadoop时,由于各节点时钟不统一,会导致服务出现异常,使用NTP server/client可以解决这个问题。

7. Cloudera Manager - Hbase browser couldn't connect to localhost:9090

In Hue 2.5.0, there is a new feature called "HBase Browser", it is for user to quickly browsing huge tables and accessing Hbase content. You can also create new tables, add data, modify existing cells and filter data with the autocompleting search bar. If you click on "Hbase Browser" icon and get "API error: couldn't connect to localhost:9090", probably you don't have a Hbase thrift server running.

In your CM, go to "All Services" -> "hbase1" -> "Instances", then under "Role Instances", click on "Add", choose a node to be "HBase Thrift Server", then start the thrift server. By default, hue connects to itself on port 9090, so make sure hue knows which node is the thrift server.

To start a thrift server from commnad line, just type "hbase thrift start".
分享到:
评论

相关推荐

    Hue Editor:开源SQL查询助手数据库/仓库- cloudera/ Hue

    Query. Explore. Share. The Hue Editor is a mature open source... It ships in Cloudera Data Platform, Google DataProc, Amazon EMR, Open Data Hub... Hue is also ideal for building your own and any contribu

    Cloudera技术参考资料

    Cloudera

    Cloudera 5.4.x Documentation系列官方文档

    Cloudera 5.4.x Documentation系列官方文档。压缩包里面共有十个文档!分别是: cloudera-administration.pdf-配置管理文档 cloudera-datamgmt.pdf-数据管理文档 cloudera-impala.pdf-impala使用文档 cloudera-...

    cloudera 5.12.zip

    cloudera 5.12安装包。

    Cloudera Hadoop 安装指南

    Cloudera Hadoop 安装指南

    hue的环境搭建

    下载链接:https://github.com/cloudera/hue/tree/branch-3.11 参考文档:http://blog.csdn.net/lsshlsw/article/details/47865601 环境准备 yum install krb5-devel cyrus-sasl-gssapi cyrus-sasl-deve libxml2-...

    hue-3.9.0-cdh5.12.1.tar.gz

    HUE是一个开源的图形用户界面,用于操作和开发用于执行自助服务数据分析的应用程序。 集成管理各类大数据应用程序,如:hadoop、hive、hbase、spark等

    java调用Cloudera Manager Api实例

    Cloudera Manager API调用实例(JAVA版),已通过测试可用。Cloudera Manager API调用实例(JAVA版),已通过测试可用。

    cloudera-manager-installer.bin

    cloudera-manager-installer.bin

    Cloudera Manager 6.3.1 (文件1)

    cloudera-manager-agent-6.3.1-1466458.el7.x86_64.rpm, cloudera-manager-daemons-6.3.1-1466458.el7.x86_64.rpm, cloudera-manager-server-6.3.1-1466458.el7.x86_64.rpm, cloudera-manager-server-db-2-6.3.1-...

    cloudera 安装部署手册

    cloudera 安装部署手册 和base、solr运维

    cloudera-impala官方手册

    cloudera impala的官方文档,带书签

    Cloudera Manager API v32.docx

    Cloudera Manager API v32 Introduced in Cloudera Manager 6.2.0 Cloudera Product Documentation

    cloudera-impala.pdf )

    cloudera-impala.pdf )cloudera-impala.pdf )cloudera-impala.pdf )cloudera-impala.pdf )cloudera-impala.pdf )cloudera-impala.pdf )

    Cloudera Manager安装部署

    Cloudera Manager安装部署.pdf

    cloudera连接自定义MySQL数据库

    cloudera连接自定义MySQL数据库,cloudera集成hadoop以及所有组件

    HUE用户手册

    Hue是一个开源的Apache Hadoop UI系统,最早是由Cloudera Desktop演化而来,由Cloudera贡献给开源社区,它是基于Python Web框架Django实现的。通过使用Hue我们可以在浏览器端的Web控制台上与Hadoop集群进行交互来...

    cloudera官方文档

    资源名称:cloudera官方文档资源目录:【】cloudera-administration【】cloudera-datamgmt【】cloudera-impala【】cloudera-installation【】cloudera-introduction【】cloudera-operation【】Cloudera-Opera ...

    HUE搭建说明文档

    Hue是一个开源的Apache Hadoop UI系统,由Cloudera Desktop演化而来,最后Cloudera公司将其贡献给Apache基金会的Hadoop社区,它是基于Python Web框架Django实现的。通过使用Hue我们可以在浏览器端的Web控制台上与...

    Cloudera产品体系及服务介绍

    Cloudera产品体系及服务介绍,包含了Cloudera所有产品的介绍与使用

Global site tag (gtag.js) - Google Analytics