hive
Hive date_trunc函数
The function date_trunc is conceptually similar to the trunc function for numbers. date_trunc(‘field‘, source) source is a value expression of type timestamp or interval. (Values of type date and ti[详细]
2020-05-18 17:07 分类:大数据【原创】大叔经验分享(86)hive和mysql数据互导
hive和mysql数据互导,首先想到的是sqoop,并且可以和调度框架(比如oozie等)配合配置定时任务,还有一种更简单的方式是通过spark-sql: CREATE OR REPLACE TEMPORARY VIEW tmp_tbl_test USING org.apache.spark.sql.jdbc OPTIONS ( url...[详细]
2020-05-18 16:44 分类:大数据-
(解决)dbeaver连接hive报错:User: hadoop is not allowed to impersonate XXX
这个坑肯可能是在java操作hive 和 python操作hive都会遇到的配置问题 如下解决方法: 1.配置 hive-site.xml <property> <name>javax.jdo.option.ConnectionUserName</name> <value>hadoop</value> <des...[详细]
2020-05-18 16:35 分类:大数据 -
HiveSQL——row_number() over() 使用
语法格式:row_number() over(partition by 分组列 order by 排序列 desc) row_number() over()分组排序功能: 在使用 row_number() over()函数时候,over()里头的分组以及排序的执行晚于 where 、group by、 order by 的执行。 例一:...[详细]
2020-05-18 16:24 分类:大数据 hive自定义udaf函数
自定义udaf函数的代码框架 1 //首先继承一个类AbstractGenericUDAFResolver,然后实现里面的getevaluate方法 2 public GenericUDAFEvaluator getEvaluator(TypeInfo[] parameters) throws SemanticException {} 3 4 //在类里面再定义...[详细]
2020-05-18 16:16 分类:大数据-
-
ubuntu16.04安装cuDNN
cudnn的安装非常简单 (1)下载安装文件 按需求下载cudnn的安装文件:https://developer.nvidia.com/rdp/cudnn-archive[详细]
2020-05-18 16:09 分类:Linux