思维要走到多数人的前面，甚至是对立面

[置顶] 经典古诗词

更新1015 赞美美句 我想不出任何你需要改变的地方，我爱你的全部。 普天之下唯一能够影响他人的方式，就是找出他们想要什么，并且教给他们如何获得。 如果成功有诀窍的话，那就是我们能洞悉他人的立场，同时还能兼顾自己和他人的立场...

Posted by timebusker on 2021-07-19

Hive—高级操作

数据类型 array # 测试数据 1 huangbo guangzhou,xianggang,shenzhen a1:30,a2:20,a3:100 beijing,112233,13522334455,500 2 xuzheng xianggang b2:50,b3:40 tia...

Posted by timebusker on 2018-02-21

Hive之列转行,行转列

数据准备 104399 1715131 104399 2105395 104399 1758844 104399 981085 104399 2444143 104399 1458638 104399 968412 104400 1609001...

Posted by timebusker on 2018-02-20

Hive分析窗口函数—grouping sets,grouping_id,cube,rollup

数据准备 2015-03,2015-03-10,cookie1 2015-03,2015-03-10,cookie5 2015-03,2015-03-12,cookie7 2015-04,2015-04-12,cookie3 2015-04,2015-04-13,cookie2 2015-0...

Posted by timebusker on 2018-02-16

Hive分析窗口函数—lag,lead,irst_value,last_value

数据准备 cookie1,2015-04-10 10:00:02,url2 cookie1,2015-04-10 10:00:00,url1 cookie1,2015-04-10 10:03:04,1url3 cookie1,2015-04-10 10:50:05,url6 cookie1,...

Posted by timebusker on 2018-02-15

Hive分析窗口函数—cume_dist,percent_rank

测试数据 cookie1,2015-04-10,1 cookie1,2015-04-11,5 cookie1,2015-04-12,7 cookie1,2015-04-13,3 cookie1,2015-04-14,2 cookie1,2015-04-15,4 cookie1,2015-04...

Posted by timebusker on 2018-02-14

Hive分析窗口函数—ntile,row_number,rank,dense_rank

测试数据 cookie1,2015-04-10,1 cookie1,2015-04-11,5 cookie1,2015-04-12,7 cookie1,2015-04-13,3 cookie1,2015-04-14,2 cookie1,2015-04-15,4 cookie1,2015-04...

Posted by timebusker on 2018-02-13

Hive分析窗口函数—sum,avg,min,max

测试数据 cookie1,2015-04-10,1 cookie1,2015-04-11,5 cookie1,2015-04-12,7 cookie1,2015-04-13,3 cookie1,2015-04-14,2 cookie1,2015-04-15,4 cookie1,2015-04...

Posted by timebusker on 2018-02-12

Hive分析窗口函数—窗口和over()开窗函数

窗口就是分析函数分析时要处理的数据范围，就拿sum来说,它是sum窗口中的记录而不是整个分组中的记录， 因此我们在想得到某个栏位的累计值时，我们需要把窗口指定到该分组中的第一行数据到当前行, 如果你指定该窗口从该分组中的第一行到最后一行,那么该组中的每一个sum值都会一样，即整个组的总和。 ...

Posted by timebusker on 2018-02-11

Kafka_安装使用

Single Node-Single Broker 单机环境部署——在一台主机上安装kafka集群： # 安装目录 cd /root/kafka_2.11-2.0.0 # 启动kafka自带的zookeeper服务器 bin/zookeeper-server-start.sh conf...

Posted by timebusker on 2018-01-31

关于Spring Boot微服务加载JAR内静态资源文件

关于Spring Boot 微服务加载JAR内静态资源文件。 问题来源 在开发微服务单个模块过程中，模块通过JAR应用部署，其间可能会出现我们希望在应用运行中读取需要某个包内文件进行处理。 而根据 classpath:conf/core-site.xml 这种方式获取资源文件，但是...

Posted by timebusker on 2018-01-24