思维要走到多数人的前面,甚至是对立面

[置顶] 交易的道与术(一)

业绩拐点:合同负债(签了了合同没拿到钱)大增,现金流也保持的比较 设立交易系统的基础 要盈利,前提先要学会少亏 除非是穿越或者神,否则无人可以推翻这句话:“市场是不可能被持续准确预判”。许多投资者,比如那些经常询问是否现在是牛市、是否可以买入、买入后应持有多久的人,他们的潜意识里只...

[置顶] 经典美句收录集合

更新1015 寒窑赋 吕蒙正是北宋初年宰相,出身贫寒,曾一度落魄到寄居寒窑、以乞讨为生的地步,后发奋读书,官至极品。相传此文是他为劝诫当时年少气盛的太子(即后来的宋真宗)而作,太子阅后深受触动,一改傲慢态度。 (宋)吕蒙正 天有不测风云,人有旦夕祸福。 蜈蚣百足,行不及蛇;雄鸡...

MyBatis中的ResultMap配置细则(一)

关于Mybatis关联查询:使用关联查询器,如本文;;另外一种在元素内配置集合。【详见】 ResultMap配置属性较多,属于MyBatis映射器中最为复杂的元素。 ResultMap元素属性概览 <resultMap> <constructor>...

MyBatis中数据类型转化处理(TypeHandler)

实际开发中我们可能会遇到一类问题,如JavaBean中需要使用格式化的时间格式,但是存储在数据库的是时间戳; 再如JavaBean中使用的List<String>列表对象,但数据库中是{A,B,C,D}。 事实上,MyBatis本身已经为我们提供了许多TypeHandler,特殊...

MyBatis系统总结—MyBatis映射器配置细则

前面两篇博客多次提到Mapper映射器,也做了一些简单讲解,实际中,映射器的元素还是非常多, 有select、insert、update、delete、parameterMap、sql、resultMap、cache、cache-ref等。 select select元素用来执行一条查询语句...

MyBatis系统总结—MyBatis常用配置

Properties配置 在上文中,对于数据库的信息我们将之保存在一个db.properties文件中,然后在mybatis-conf.xml文件中通过properties节点将之引入。 实际上,mybatis给我们提供的properties的配置方式不止这一种,我们也可以在propertie...

Hive-压缩数据存储格式

Avro Files、ORC、RCFile、Parquet、SequenceFile等属于文件储存的一种格式,其已经默认包含了文件压缩算法,如LZO、Gzip等。 在某些情况下,将压缩的数据保存在Hive表中比未压缩存储的性能更好;无论是在磁盘使用方面还是在查询性能方面。 可以将压...

MyBatis系统总结—初识MyBatis

说道JavaWeb,很多人都知道SSH,这里的H代表了hibernate,这是一个数据库访问框架,hibernate在Java开发中的地位也是相当高, 众所周知的JPA标准就是由hibernate主导完成的。然而,数据库访问框架除了hibernate之外,还有另外一个大名鼎鼎的数据库框架,那就...

Hive-性能优化

Fetch抓取 Fetch抓取是指,Hive中对某些情况的查询可以不必使用MapReduce计算。 例如:SELECT * FROM employees;在这种情况下,Hive可以简单地读取employee对应的存储目录下的文件,然后输出查询结果到控制台。 hive.fetc...

Hive-Hive使用Spark on Yarn作为执行引擎

Hive从1.1之后,支持使用Spark作为执行引擎,配置使用Spark On Yarn作为Hive的执行引擎,首先需要注意以下两个问题: Hive的版本和Spark的版本要匹配 具体来说,你使用的Hive版本编译时候用的哪个版本的Spark,那么就需要使用相同版本的Spar...

Hive-HiveServer服务高可用

在生产环境中使用Hive,强烈建议使用HiveServer2来提供服务,好处很多: 在应用端不用部署Hadoop和Hive客户端; 相比hive-cli方式,HiveServer2不用直接将HDFS和Metastore暴漏给用户; 有安全认证机制,并且支持自定义权限校验; 有...

Hive-ETL开发样例

编写HSQL脚本 -- 经纬度信息; drop table if exists tb_test_kk_tmp; create table tb_test_kk_tmp as select kkbh,jd,wd from tb_test where udf_is_null(kkbh)=1 a...

Hive-程序开发(UDF/UDAF/UDTF/JDBC)

UDF函数开发 Maven依赖 <dependency> <groupId>org.apache.hive</groupId> <artifactId>hive-exec</artifactId> ...

Hive-常用的函数及函数定义

常用函数 常用函数太多,不举例介绍,有详细文档 UDF UDF —— User Definition Function 用户定义函数 一路输入,一路输出 sin(30°)=1/2 # 开发案例 UDAF UDAF —— User Definition Aggre...

Hive-常用的数据类型、表、库等操作

数据库操作 # hive 默认数据库为default,进入hive环境直接使用 # 数据库的文件路径 /user/hive/warehouse # 创建数据库: create database db_test; # 数据库的文件路径 /user/hive/warehouse/d...

Hive-2.X版本安装及服务配置

相关概念 Hive Hive是一个数据仓库基础工具在Hadoop中用来处理结构化数据。它架构在Hadoop之上,总归为大数据,并使得查询和分析方便。 并提供简单的sql查询功能,可以将sql语句转换为MapReduce任务进行运行。 数据仓库 是能够为企业的各个级别的决策提供数据支撑的数据—...

Nginx中的高可用

https://yq.aliyun.com/articles/669934