hive
Hive date_trunc函数
The function date_trunc is conceptually similar to the trunc function for numbers. date_trunc(‘field‘, source) source is a value expression of type timestamp or interval. (Values of type date and ti[详细]
2020-05-18 17:07 分类：大数据【原创】大叔经验分享（86）hive和mysql数据互导
hive和mysql数据互导，首先想到的是sqoop，并且可以和调度框架（比如oozie等）配合配置定时任务，还有一种更简单的方式是通过spark-sql： CREATE OR REPLACE TEMPORARY VIEW tmp_tbl_test USING org.apache.spark.sql.jdbc OPTIONS ( url...[详细]
2020-05-18 16:44 分类：大数据-
（解决）dbeaver连接hive报错：User: hadoop is not allowed to impersonate XXX
这个坑肯可能是在java操作hive 和 python操作hive都会遇到的配置问题 如下解决方法： 1.配置 hive-site.xml <property> <name>javax.jdo.option.ConnectionUserName</name> <value>hadoop</value> <des...[详细]
2020-05-18 16:35 分类：大数据 -
HiveSQL——row_number() over() 使用
语法格式：row_number() over(partition by 分组列 order by 排序列 desc) row_number() over()分组排序功能： 在使用 row_number() over()函数时候，over()里头的分组以及排序的执行晚于 where 、group by、 order by 的执行。 例一：...[详细]
2020-05-18 16:24 分类：大数据 hive自定义udaf函数
自定义udaf函数的代码框架 1 //首先继承一个类AbstractGenericUDAFResolver,然后实现里面的getevaluate方法 2 public GenericUDAFEvaluator getEvaluator(TypeInfo[] parameters) throws SemanticException {} 3 4 //在类里面再定义...[详细]
2020-05-18 16:16 分类：大数据-
-
ubuntu16.04安装cuDNN
cudnn的安装非常简单 （1）下载安装文件 按需求下载cudnn的安装文件：https://developer.nvidia.com/rdp/cudnn-archive[详细]
2020-05-18 16:09 分类：Linux
加载中,请稍侯......