思维要走到多数人的前面，甚至是对立面

[置顶] 经典古诗词

更新1015 赞美美句 我想不出任何你需要改变的地方，我爱你的全部。 普天之下唯一能够影响他人的方式，就是找出他们想要什么，并且教给他们如何获得。 如果成功有诀窍的话，那就是我们能洞悉他人的立场，同时还能兼顾自己和他人的立场...

Posted by timebusker on 2021-07-19

Kafka_基础知识

Apache Kafka 概述 Kafka 是一个高吞吐量、分布式的发布—订阅消息系统。据 Kafka 官方网站介绍，当前的 Kafka 已经定位为一个分布式流式处理平台（a distributed streaming platform）， 它最初由 LinkedIn 公司开发，后来成为...

Posted by timebusker on 2018-01-17

消息中间件概述

概述 中间件 非底层操作系统软件，非业务应用软件，不是直接给最终用户使用的，不能直接给客户带来价值的软件统称为中间件。 消息中间件 管制关注于数据的发送和接收，利用高效可靠的异步消息传递机制集成分布式系统，其优点： ① 解耦 ② 异步（...

Posted by timebusker on 2018-01-17

Scala快速入门-常用集合操作

知识点 所有的集合都扩展自Iterable特质 集合有三大类，分别为序列、集和映射 几乎所有集合类，Scala都同时提供了可变和不可变的版本 Scala列表要么是空的，要么拥有一头一尾，其中尾部本身又是一个表列 集是无先后次序的集合 用LinkedHashSet来保...

Posted by timebusker on 2018-01-10

Hive的数据倾斜解决方案

什么是数据倾斜 由于数据分布不均匀，造成数据大量的集中到一点，造成数据热点 Hadoop框架的特性 不怕数据大，怕数据倾斜 Jobs 数比较多的作业运行效率相对比较低，如子查询比较多 sum,count,max,min 等聚集函数，通常不会有数据倾斜问题 主要表现 任务进度...

Posted by timebusker on 2018-01-09

Scala快速入门-模式匹配与样例类

知识点 mathch表达式是一个更好的switch，不会有穿透到下一个分支的问题 如果没有模式能够匹配，会抛出MatchError，可以用case _ 模式来避免，相当于Java中的default 模式可以包含一个随意定义的条件，称做守卫 可以匹配数组、列表、元组等模式，然...

Posted by timebusker on 2018-01-09

Scala快速入门-高阶函数

知识点 作为值的函数 创建匿名函数 带函数参数的函数 闭包 柯里化 函数 在Scala中，函数是“头等公民”，可以在变量中存放函数 scala> def fun(msg: String) {println(msg)} fun: (msg: Stri...

Posted by timebusker on 2018-01-08

Scala快速入门-特质

知识点 Scala和Java一样不允许类继承多个超类，特质解决这一局限性 类可以实现任意数量的特质 当将多个特质叠加在一起时，顺序很重要，其方法先被执行的特质排在更后面 Scala特质可以提供方法和字段的实现 特质要求实现它们的类具备特定的字段、方法或超类 特质可以...

Posted by timebusker on 2018-01-07

Scala快速入门-继承

知识点 继承类 extends 重写方法时必须用override 只有主构造器可以调用超类的主构造器 重写字段 抽象类、字段 扩展类 使用extends关键字 class Employee extends Person {...} 在子类中定义...

Posted by timebusker on 2018-01-06

Scala快速入门-单例对象及伴生对象

知识点 用对象作为单例或存放工具方法，Scala没有静态方法或字段 类可以有一个同名的伴生对象 对象的apply方法通常用来构造伴生类的新实例 Scala的main函数定义 单例对象 Scala没有静态方法或字段，可以用object语法定义结构，对象定义了类...

Posted by timebusker on 2018-01-05

Scala快速入门-类定义

知识点 每个类都有一个主构造器，这个构造器和类的定义“交织”在一起，它的参数直接成为类的字段，主构造器执行类体中所有的语句 类中的字段自动带getter和setter方法 用@BeanProperty注解生成JavaBean的getXxx/setXxx方法 辅助构造器是可选...

Posted by timebusker on 2018-01-04