Tag Archives: Hadoop

Cloudera CDH – Hadoop + MySQL – Sqoop – Error:ERROR manager.SqlManager: Error reading from database: java.sql.SQLException: Streaming result set com.mysql.jdbc.RowDataDynamic@54d9d12d is still active.

By | 2018年7月17日

在使用Sqoop将MySQL的数据导入HDFS的时候你会遇到如题所示的错误。
具体如下:
1. 可能是这样的:

2. 也可能是这样的:

解决该问题,[……]

Read more

Cloudera,Spark – spark-shell,Error:Caused by: ERROR XJ041: Failed to create database ‘/var/lib/hive/metastore/metastore_db’, see the next exception for details.

By | 2018年7月13日

在使用Spark的spark-shell的时候你可能会遇到如题所示的错误。
具体如下:

原因:
因为缺少Hive。

解决:
将Hive配置上去,在我的环境里,指定后端DB到Oracle即可:

然后再试一次:[……]

Read more

Cloudera Enterprise 5.13.x:Installation with Oracle Database 11gR2 on RHEL 6.10

By | 2018年7月12日

参考官方文档:
https://www.cloudera.com/documentation/enterprise/5-13-x.html
https://www.cloudera.com/documentation/enterprise/5-13-x/topics/installation.h[……]

Read more

Cloudera:Add Service – Hive

By | 2018年7月1日

本文演示如何向Cloudera CDH中,添加HIVE服务。

前提,安装好了Cloudera CDH:

先配置MySQL:
节点一操作:

然后,在Cloudera CDH的web中添加HIVE服务,并且分配[……]

Read more

Spark + Scala – error:java.io.IOException: Could not locate executable null\bin\winutils.exe in the Hadoop binaries.

By | 2018年5月25日

在MS Windows中使用Intellij Idea编写scala处理Spark的任务的时候,你可能会遇到如题所示的问题,具体如下:

解决该问题,你需要先下载:
http://public-repo-1.hortonwo[……]

Read more