Cloudera CDH – Hadoop + MySQL – Sqoop – Error:ERROR manager.SqlManager: Error reading from database: java.sql.SQLException: Streaming result set com.mysql.jdbc.RowDataDynamic@54d9d12d is still active.

By | 2018年7月17日

在使用Sqoop将MySQL的数据导入HDFS的时候你会遇到如题所示的错误。
具体如下:
1. 可能是这样的:

2. 也可能是这样的:

解决该问题,需要在【sqoop】的导入命令中加入驱动的说明:

注意,大小写。

然后再次执行就没问题了:

————————————
Done。

Sqoop + MySQL,error:Error: java.lang.RuntimeException: java.lang.RuntimeException: com.mysql.jdbc.exceptions.jdbc4.CommunicationsException: Communications link failure

By | 2018年7月17日

使用Sqoop将MySQL的数据导入HDFS的时候,你可能会遇到如题所示的错误。
具体如下:

原因:
Sqoop导入的时候不要使用【localhost】,而需要使用【IP】或者【域名】。

使用域名或者IP导入,就没问题了:

————————————
Done。

SHELL:统计CPU使用率大于XX时,CPU/内存/虚拟内存,高耗进程以及资源使用情况

By | 2018年7月16日

运行时:

脚本代码:

——————————————
Done。

Cloudera,Spark – spark-shell,Error:Caused by: ERROR XJ041: Failed to create database ‘/var/lib/hive/metastore/metastore_db’, see the next exception for details.

By | 2018年7月13日

在使用Spark的spark-shell的时候你可能会遇到如题所示的错误。
具体如下:

原因:
因为缺少Hive。

解决:
将Hive配置上去,在我的环境里,指定后端DB到Oracle即可:

然后再试一次:

然后,在YARN中,也可以看到信息:

后端DB中,Hive的样子:
class=”alignnone size-full wp-image-11859″ />
SQL> conn metastore/oracle[……]

Read more

人美路子野 (腾讯动漫《一人之下》宝儿姐人物同人曲) – 音阙诗听/王梓钰

By | 2018年7月13日

歌词:

人美路子野 (腾讯动漫《一人之下》宝儿姐人物同人曲) – 音阙诗听/王梓钰

词:假寐
曲:殇小谨
编曲:王柏鸿
笛子:黄小开
古筝:图生
和声:皎月
和声编写:皎月
制作人:殇小谨
配唱制作人:殇小谨
混音工程师:殇小谨
混音室:Hot Music Studio
民乐录音师:李文婷
民乐录音室:Holyaria Music Studio
母带工程师:Justin Shturtz
母带录音室:Sterling Sound
出品:音阙诗听
发行:无限可能

庸俗的人生大多都相仿
我早已习惯流浪不端庄
听凭人来人往自顾颓唐
光阴消涨 一身[……]

Read more