timebusker的博客

[置顶] 交易的道与术（一）

业绩拐点：合同负债（签了了合同没拿到钱）大增，现金流也保持的比较设立交易系统的基础要盈利，前提先要学会少亏除非是穿越或者神，否则无人可以推翻这句话:“市场是不可能被持续准确预判”。许多投资者，比如那些经常询问是否现在是牛市、是否可以买入、买入后应持有多久的人，他们的潜意识里只...

Posted by timebusker on 2025-02-19

[置顶] 经典美句收录集合

更新1015 寒窑赋吕蒙正是北宋初年宰相，出身贫寒，曾一度落魄到寄居寒窑、以乞讨为生的地步，后发奋读书，官至极品。相传此文是他为劝诫当时年少气盛的太子（即后来的宋真宗）而作，太子阅后深受触动，一改傲慢态度。 (宋）吕蒙正天有不测风云，人有旦夕祸福。蜈蚣百足，行不及蛇；雄鸡...

Posted by timebusker on 2021-07-19

MyBatis中的ResultMap配置细则(一)

关于Mybatis关联查询：使用关联查询器，如本文；；另外一种在元素内配置集合。【详见】 ResultMap配置属性较多，属于MyBatis映射器中最为复杂的元素。 ResultMap元素属性概览 <resultMap> <constructor>...

Posted by timebusker on 2017-12-24

MyBatis中数据类型转化处理(TypeHandler)

实际开发中我们可能会遇到一类问题，如JavaBean中需要使用格式化的时间格式，但是存储在数据库的是时间戳；再如JavaBean中使用的List<String>列表对象，但数据库中是{A,B,C,D}。事实上，MyBatis本身已经为我们提供了许多TypeHandler，特殊...

Posted by timebusker on 2017-12-23

MyBatis系统总结—MyBatis映射器配置细则

前面两篇博客多次提到Mapper映射器，也做了一些简单讲解，实际中，映射器的元素还是非常多，有select、insert、update、delete、parameterMap、sql、resultMap、cache、cache-ref等。 select select元素用来执行一条查询语句...

Posted by timebusker on 2017-12-22

MyBatis系统总结—MyBatis常用配置

Properties配置在上文中，对于数据库的信息我们将之保存在一个db.properties文件中，然后在mybatis-conf.xml文件中通过properties节点将之引入。实际上，mybatis给我们提供的properties的配置方式不止这一种，我们也可以在propertie...

Posted by timebusker on 2017-12-21

Hive-压缩数据存储格式

Avro Files、ORC、RCFile、Parquet、SequenceFile等属于文件储存的一种格式，其已经默认包含了文件压缩算法，如LZO、Gzip等。在某些情况下，将压缩的数据保存在Hive表中比未压缩存储的性能更好;无论是在磁盘使用方面还是在查询性能方面。可以将压...

Posted by timebusker on 2017-12-20

MyBatis系统总结—初识MyBatis

说道JavaWeb，很多人都知道SSH，这里的H代表了hibernate，这是一个数据库访问框架，hibernate在Java开发中的地位也是相当高，众所周知的JPA标准就是由hibernate主导完成的。然而，数据库访问框架除了hibernate之外，还有另外一个大名鼎鼎的数据库框架，那就...

Posted by timebusker on 2017-12-20

Hive-性能优化

Fetch抓取 Fetch抓取是指，Hive中对某些情况的查询可以不必使用MapReduce计算。例如：SELECT * FROM employees;在这种情况下，Hive可以简单地读取employee对应的存储目录下的文件，然后输出查询结果到控制台。 hive.fetc...

Posted by timebusker on 2017-12-19

Hive-Hive使用Spark on Yarn作为执行引擎

Hive从1.1之后，支持使用Spark作为执行引擎，配置使用Spark On Yarn作为Hive的执行引擎，首先需要注意以下两个问题： Hive的版本和Spark的版本要匹配具体来说，你使用的Hive版本编译时候用的哪个版本的Spark，那么就需要使用相同版本的Spar...

Posted by timebusker on 2017-12-17

Hive-HiveServer服务高可用

在生产环境中使用Hive，强烈建议使用HiveServer2来提供服务，好处很多：在应用端不用部署Hadoop和Hive客户端；相比hive-cli方式，HiveServer2不用直接将HDFS和Metastore暴漏给用户；有安全认证机制，并且支持自定义权限校验；有...

Posted by timebusker on 2017-12-15

Hive-ETL开发样例

编写HSQL脚本 -- 经纬度信息; drop table if exists tb_test_kk_tmp; create table tb_test_kk_tmp as select kkbh,jd,wd from tb_test where udf_is_null(kkbh)=1 a...

Posted by timebusker on 2017-12-15

Hive-程序开发（UDF/UDAF/UDTF/JDBC）

UDF函数开发 Maven依赖 <dependency> <groupId>org.apache.hive</groupId> <artifactId>hive-exec</artifactId> ...

Posted by timebusker on 2017-12-14

Hive-常用的函数及函数定义

常用函数常用函数太多，不举例介绍，有详细文档 UDF UDF —— User Definition Function 用户定义函数一路输入，一路输出 sin(30°)=1/2 # 开发案例 UDAF UDAF —— User Definition Aggre...

Posted by timebusker on 2017-12-13

Hive-常用的数据类型、表、库等操作

数据库操作 # hive 默认数据库为default，进入hive环境直接使用 # 数据库的文件路径 /user/hive/warehouse # 创建数据库： create database db_test; # 数据库的文件路径 /user/hive/warehouse/d...

Posted by timebusker on 2017-12-12

Hive-2.X版本安装及服务配置

Posted by timebusker on 2017-12-11

Nginx中的高可用

https://yq.aliyun.com/articles/669934

Posted by timebusker on 2017-06-05