- 博客(7)
- 资源 (2)
- 收藏
- 关注
原创 hive udf,udaf和udtf
1.背景我们在写hive sql 的时候经常会用到一些内置的函数,例如:max,min,substr等。当这些函数没有办法满足我们的需求的时候,该怎么办呢?我们可以通过自己写udf函数来实现内置函数无法实现的功能。2.概述udf函数,全称是用户自定义函数(user defined function),就是用java 来写一些满足我们需求的函数,并可以在hive sql中使用这些函数。从功能上看,udf函数可以分为三种:(1)udf(User defined scalar funct.
2020-07-07 00:02:48
980
原创 java线程池(一)
参考:https://www.cnblogs.com/dolphin0520/p/3932921.html https://blog.csdn.net/l_kanglin/article/details/57411851线程池ThreadPoolExecutor.继承关系:ThreadPoolExecutor继承自抽象类AbstractExecutorService. ...
2018-06-06 21:39:01
267
原创 MapReduce与关系型数据库的区别
一.处理的数据集 (1)关系型数据库适合处理结构化的数据,mapreduce用于处理半结构化和非结构化的数据。 (2)关系型数据库适合处理(GB)级别的数据,但是mapreduce适合处理更大级别的数据(PB级)。二.适用的场景 (1)关系型数据库适用于只需要少量更新的场景,如果需要大量的数据更新,mapreduce的性能就会更好。 (2)关系型数据库适用于持续更新,多次...
2018-04-16 22:36:06
779
原创 代理模式之一:静态代理模式
//参考文档://https://m.baidu.com/?from=1000953f#iact=wiseindex%2Ftabs%2Fnews%2Factivity%2Fnewsdetail%3D%257B%2522linkData%2522%253A%257B%2522name%2522%253A%2522iframe%252Fmib-iframe%2522%252C%2522id%2522%...
2018-03-26 11:41:38
1103
原创 如何利用SQLyog数据库管理工具生成各表的关系视图
工具: 1. SQLyog-12.0.9-0.x64 2. Mysql5.7 mysql5.7直接去官网下载就可以了。SQLyog的破解版,在这个网址有http://download.csdn.net/download/whdxkcx/10027742。 过程: 1.打...
2017-10-18 13:34:48
40164
14
原创 数据库的范式,主键,外键,候选键
范式 这里我只说说第一,第二和第三范式,因为目前接触到的项目,感觉满足第三范式就可以了。 首先是第一范式,第一范式是数据库表必须满足的最低要求,简单的说,就是你的表如果连第一范式都不能满足,那就不是一个数据库的表了。所谓第一范式是指,你的数据库中表的字段都必须是一个不可分割的属性字段。例如下表: 这个表中的研究生字段有两个值,它就不满足第一范式,他可以分割...
2017-10-17 11:29:15
2267
原创 Centos7上搭建hadoop2.7.3分布式集群环境实验记录
Centos7上搭建hadoop2.7分布式集群环境实验记录1.准备三台虚拟机。2.修改三台虚拟机的主机名分别为master,slave01,slave02,然后修改每台机器的/etc/hosts文件,清空原来的内容,添加如下内容:172.16.136.227 master172.16.136.229 slave01172.16.136.228 slave02 3.配...
2017-09-13 19:12:45
871
commons-fileupload-1.3.3和commons-io.2.2
2017-11-01
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人