Category Archives: Cloudera

Cloudera CDH – Hadoop + MySQL – Sqoop – Error:ERROR manager.SqlManager: Error reading from database: java.sql.SQLException: Streaming result set com.mysql.jdbc.RowDataDynamic@54d9d12d is still active.

By | 2018年7月17日

在使用Sqoop将MySQL的数据导入HDFS的时候你会遇到如题所示的错误。
具体如下:
1. 可能是这样的:

2. 也可能是这样的:

解决该问题,[……]

Read more

Sqoop + MySQL,error:Error: java.lang.RuntimeException: java.lang.RuntimeException: com.mysql.jdbc.exceptions.jdbc4.CommunicationsException: Communications link failure

By | 2018年7月17日

使用Sqoop将MySQL的数据导入HDFS的时候,你可能会遇到如题所示的错误。
具体如下:

原因:
Sqoop导入的时候不要使用【localhost】,而需要使用【IP】或者【域名】。

使用域名或者IP导入,就没[……]

Read more

Cloudera,Spark – spark-shell,Error:Caused by: ERROR XJ041: Failed to create database ‘/var/lib/hive/metastore/metastore_db’, see the next exception for details.

By | 2018年7月13日

在使用Spark的spark-shell的时候你可能会遇到如题所示的错误。
具体如下:

原因:
因为缺少Hive。

解决:
将Hive配置上去,在我的环境里,指定后端DB到Oracle即可:

然后再试一次:[……]

Read more

Cloudera Enterprise 5.13.x:Installation – 硬件与基本状态说明

By | 2018年7月13日

前面的文章里写到了一个【8】节点的CDH 5.13.x的搭建:

但其实它是包含很多问题的:

可以看到上图,CDH的三个服务都是黄色的:
1. HDFS – 13
2. YARN – 18
3. Cloudera Man[……]

Read more

Cloudera Enterprise 5.13.x:Installation with Oracle Database 11gR2 on RHEL 6.10

By | 2018年7月12日

参考官方文档:
https://www.cloudera.com/documentation/enterprise/5-13-x.html
https://www.cloudera.com/documentation/enterprise/5-13-x/topics/installation.h[……]

Read more