[TOC]
# 類定義
在scala類中,與類名相同的對象叫做伴生對象,類和伴生對象之間可以相互訪問私有的方法和屬性
~~~
//scala中,類不必聲明為public
//scala源文件中可以包含多個類,所有這些類都具有公有可見性
class Person {
//用val修飾的變量是只讀屬性,有getter但沒有setter(相當于java中用final修飾的變量)
val id = "9527"
//用var修飾的變量既有getter又有setter
var age: Int = 18
//類私有字段,只能在類的內部使用
private var name: String = "唐伯虎"
//對象私有字段,訪問權限更加嚴格,Person類的方法只能訪問到當前對象的字段
private[this] val pet = "小強"
def sayHi(): Unit = {
println(name)
println(pet)
println("------------")
}
}
//(單例對象,靜態對象)
//伴生對象: 與類名相同并且在同一個文件中
object Person {
def main(args: Array[String]): Unit = {
val p = new Person()
println(p.id)
println(p.age)
p.age=20
println(p.age)
println(p.name)
p.name="abc"
println(p.name)
//pet訪問不到
}
}
~~~
# 構造器
主構造器中的參數使用后會被升級為字段
~~~
//每個類都有主構造器,主構造器的參數直接放置類名后面,與類交織在一起
class Student(val name: String, val age: Int, faceValue: Double = 99.99, private var height: Int = 18) {
//主構造器會執行類定義中的所有語句
println("執行主構造器")
private[this] var gender: String = null
def show(): Unit = {
println(faceValue)
}
//輔助構造器 def this (參數),可以重載
def this(name: String, age: Int, gender: String) {
//輔助構造器第一行,一定要調用主構造器
this(name, age)
this.gender = gender
}
}
object Student {
def main(args: Array[String]): Unit = {
val p = new Student("zx", 30, 100)
println(p.age)
println(p.name)
}
}
~~~
**私有主類構造器**
~~~
class Student private(val name: String, val age: Int, faceValue: Double = 99.99, private var height: Int = 18) {
~~~
這樣用戶只能通過輔助構造器來構造對象了
**限制包使用**
~~~
private[cn] class Student private(val name: String, val age: Int, faceValue: Double = 99.99, private var height: Int = 18) {
~~~
# 單例對象
在scala中沒有靜態方法和靜態字段,但是可以使用object這個語法結構來達到同樣的目的
~~~
class SingletonDemo {
}
object SingletonDemo {
def main(args: Array[String]): Unit = {
val s1 = SingletonDemo
val s2 = new SingletonDemo
val s3 = SingletonDemo
println(s1)
println(s2)
println(s3)
}
}
~~~
輸出
~~~
SingletonDemo$@6debcae2
SingletonDemo@5ba23b66
SingletonDemo$@6debcae2
~~~
在伴生對象內,不用new就是單例
# apply方法
通常我們會在類的伴生對象中定義apply方法,當遇到類名(參數1,...參數n)時apply方法會被調用
~~~
object ApplyDemo {
def apply(): Unit = {
println("apply invoked")
}
def main(args: Array[String]): Unit = {
val a = ApplyDemo()
println(a)
}
}
~~~
# 繼承
在scala中重寫一個非抽象的方法必須使用override修飾符
**類型檢查和轉換**
| scala | java |
| --- | --- |
| obj.isInstanceOf[C] | obj instanceof C |
| obj.asInstanceof[C] | (C)obj |
| classOf[C] | C.class |
~~~
//接口,但是可以有實現
trait Flyable{
def fly(): Unit = {
println("I can fly")
}
def fight(): String
}
abstract class Animal {
def run(): Int
val name: String
}
//如果接口是第一個實現的,也用extends,后面的用with
class Human extends Animal with Flyable {
val name = "abc"
//在scala中重寫一個非抽象方法必須用override修飾
override def fight(): String = {
"fight"
}
//在子類中重寫超類的抽象方法時,不需要使用override關鍵字,寫了也可以
def run(): Int = {
1
}
}
~~~
# 靜態方法和非靜態方法
調用方法,靜態方法(scala中沒有靜態方法這個概念,需要通過伴生類對象來實現)
~~~
scala> BigInt.probablePrime(16, scala.util.Random)
~~~
調用方法,非靜態方法,使用對象調用
~~~
scala> "HelloWorld".distinct
~~~
# 對象私有化字段
變量: workDetails在封閉包professional中的任何類中可訪問
封閉包: friends的任何類都可以被society包中任何類訪問
變量: secrets只能在實例方法的隱式對象(this)中訪問
~~~
package unit7{
package society {
package professional {
class Executive {
private[professional] var workDetails = null
private[society] var friends = null
private[this] var secrets = null
def help(another: Executive): Unit = {
println(another.workDetails)
//another是不能用的,因為他是其他對象
// println(another.secrets)
}
}
}
}
}
~~~

# 嵌套類
在class中,再定義一個class,以此類推
java中的內部類從屬于外部類.scala中內部類從屬于實例
~~~
class Network {
class Member(val name: String) {
val contacts = new ArrayBuffer[Member]
}
private val members = new ArrayBuffer[Member]
def join(name: String) = {
val m = new Member(name)
members += m
m
}
}
~~~
這里的member沒有指定是屬于類的還是對象的
實際上是屬于對象的
這個代碼會報錯
~~~
object ObjectDemo extends App {
val network1 = new Network
val nick = network1.join("Nick") //network1.Member
val alice = network1.join("Alice") //network1.Member
nick.contacts += alice
alice.contacts += nick
val network2 = new Network
val jone = network2.join("Jone") //network2.Member
nick.contacts += jone
}
~~~
指定屬于哪個對象的就不會報錯了
~~~
class Network {
private val members = new ArrayBuffer[Network.Member]
def join(name: String) = {
val m = new Network.Member(name)
members += m
m
}
}
object Network {
class Member(name: String) {
val contacts = new ArrayBuffer[Member]()
}
}
~~~
注意: 類和他的伴生對象可以相互訪問私有特性,他們必須存在同一個源文件中.必須同名
# 枚舉
scala中沒有枚舉類型,定義一個擴展Enumeration類的對象,并以value調用初始化枚舉中的所有可能值
~~~
object TrafficLightColor extends Enumeration {
val Red = Value(0, "stop")
val Yello = Value(1, "slow")
val Green = Value(2, "Go")
}
object ObjectDemo extends App {
println(TrafficLightColor.Red)
println(TrafficLightColor.Yello)
println(TrafficLightColor.Green.id)
}
~~~
# 包和引用
在java和scala中管理項目可以使用包結構,c和c#使用命名空間
對于package,有如下幾種形式
~~~
package com
package nick.impatient
package people
class Person {
val name = "Nick"
def play(message: String): Unit = {
}
}
~~~
等同于
~~~
package com.nick.impatient { //com和com.nick在這不可見
package people {
class Person {
val name = "Nick"
def play(message: String): Unit = {
}
}
}
}
~~~
提示: 在文件頂部不帶花括號的包聲明在整個文件范圍內有效
訪問父package中的內容.(即:作用域)
包對象可以持有函數和變量
引入語句可以引入包,類和對象
源文件的目錄和包之間并沒有強制的關聯關系
可以在同一個.scala文件中,聲明多個并列的package
包名可以相對也可以絕對,比如,訪問ArrayBuffer的絕對路徑是: `_root_.scala.collection.mutable.ArrayBuffer`
## 包對象
包可以包含類,對象和特質trait,**但是不能包含函數或變量的定義**.很不幸,這是java虛擬機的局限.
把工具函數或常量添加到包而不是某個utils對象,這是更加合理的做法.包對象出現正是為了解決這個局限.**每個包都可以有一個包對象**.**你需要在父包中定義他**,而且名稱與子包一樣
~~~
package object people {
val defaultName = "Nick";
}
package people {
class people {
//從包對象拿到的
val name = defaultName
}
}
~~~
## 包可見性
在java中,沒有聲明為public,private或protected的類成員在包含類的包中可見.
在scala中,你可以通過修飾符達到同樣的效果
~~~
package com.nick.impatient.people
class Person {
//只在當前包可見
private[people] def description = "desc"
//可以將可見度延展到上層包
private[impatient] def name = "name"
}
~~~
## **重命名**
如果你想要引入包中的幾個成員,可以像這樣使用選取器(selector),而且選取的通俗,可以重命名
~~~
import java.util.{HashMap=>JavaHashMap, List}
~~~
這樣一來,javaHashMap就是java.util.HashMap,而HashMap對應scala.collection.mutable.HashMap
# 受保護的字段和方法
protected在scala中比java要跟嚴格一點,只有繼承關系才可以訪問,同一個包下,也是不可以的
# 超類構造
類有一個主構造器和任意數量的輔助構造器,而每個輔助構造器都必須對先前定義的輔助構造器或主構造器的調用開始.
子類的輔助構造器最終都會調用主構造器,只有主構造器可以調用超類的構造器,輔助構造器永遠不可能直接調用超類的構造器.
在scala的構造器中,你不能調用super(params)
* 當前類的(輔助構造器),最終都會調用當前類的(主構造器)
* 子類的主構造器,最終都會調用父類的構造器(可以是輔助構造器,可以是主構造器)
~~~
class Animal(age: Int, hairColor: String) {
}
//可以給默認值
class Dog(age: Int, hairColor: String) extends Animal(age, hairColor = "11") {
}
~~~
# 抽象類
可以通過abbstract關鍵字標記不能被實例化的類.方法不用標記abstract,只要省掉方法體即可.
抽象類可以擁有抽象字段
抽象字段就是沒有初始值的字段
~~~
abstract class Person(val pname: String) {
val id: Int
var name: String
def idString: Int
def play: Unit
}
class Employee(pname: String) extends Person(pname) {
val id = 5;
var name = ">>>"
def idString = pname.hashCode
override def play: Unit = {
println(name)
}
}
~~~
# 構造順序和提前定義
~~~
class Father {
val range = 10
val arr = new ArrayBuffer(range)
}
class Child extends Father {
override val range = 20
}
~~~
1. new Father
--- 初始化range變量等于10
--- 發現該變量被子類覆寫了
--- 提取range值,去子類中提取,通過提取器,提取子類中的range值 = 0
--- new ArrayBuffer(range = 0)
2. new Child
--- 覆寫range = 20
打印
--- arr.length = 0
--- range = 20
問題解決: 3種方案
1. 可以將val聲明為final,這樣子類不可改寫
2. 可以將超類中將val聲明為lazy,這樣安全但是并不高效
3. 還可以使用提前定義語法,可以在超類的構造器執行之前初始化子類的val字段:
~~~
class Ant2 extends {
override val range = 3
} with Creature
~~~
里面大括號表示是Creature的子類,并且在初始化的時候先初始化這個匿名類
# scala繼承層級
在scala中,所有其他類都是AnyRef的子類,類似java的Object
AnyVal和AnyRef都擴展自Any類.Any類是根節點
Any中定義了isInstanceOf,asInstanceOf方法,以及哈希方法等
Null類型的唯一實例就是null對象.可以將null賦值給任何引用,但不能賦值給值類型的變量
# 當做接口使用的特質
特質中沒有實現的方法就是抽象方法.類通過extends繼承特質,通過with可以繼承多個特質
~~~
trait Logger {
def log(msg: String)
}
class ConsoleLogger extends Logger with Cloneable with Serializable {
override def log(msg: String): Unit = {
println(msg)
}
}
~~~
特質中的方法并不一定是抽象的
## 混入
~~~
/**
* 疊加特質的執行順序
* 1. 動態混入: 右向左執行
* 2. 情景: 混入的多個特質,是繼承了同一個特質
* 3. super關鍵字為向左調用
*/
trait Logger3 {
def log(msg: String)
}
trait ConsoleLogger3 extends Logger3 {
def log(msg: String) {
println(msg)
}
}
trait TimestampLogger3 extends ConsoleLogger3 {
override def log(msg: String) {
super.log(new java.util.Date() + " " + msg)
}
}
trait ShortLogger3 extends ConsoleLogger3 {
override def log(msg: String): Unit = {
super.log(if (msg.length <= 15) msg else s"${msg.substring(0, 12)}...")
}
}
class Account3 {
protected var balance = 0.0
}
abstract class SavingsAccount3 extends Account3 with Logger3 {
def withdraw(amount: Double) {
//沒有實體下面有混入的
if (amount > balance) log("余額不足")
else balance -= amount
}
}
object Main3 extends App {
//TimestampLogger3
// val acct1 = new SavingsAccount3 with TimestampLogger3 with ShortLogger3
// acct1.withdraw(100)
//ShortLogger3
val acct1 = new SavingsAccount3 with ShortLogger3 with TimestampLogger3
acct1.withdraw(100)
}
~~~
- 基礎
- 編譯和安裝
- classpath到底是什么?
- 編譯運行
- 安裝
- sdkman多版本
- jabba多版本
- java字節碼查看
- 數據類型
- 簡介
- 整形
- char和int
- 變量和常量
- 大數值運算
- 基本類型包裝類
- Math類
- 內存劃分
- 位運算符
- 方法相關
- 方法重載
- 可變參數
- 方法引用
- 面向對象
- 定義
- 繼承和覆蓋
- 接口和抽象類
- 接口定義增強
- 內建函數式接口
- 多態
- 泛型
- final和static
- 內部類
- 包
- 修飾符
- 異常
- 枚舉類
- 代碼塊
- 對象克隆
- BeanUtils
- java基礎類
- scanner類
- Random類
- System類
- Runtime類
- Comparable接口
- Comparator接口
- MessageFormat類
- NumberFormat
- 數組相關
- 數組
- Arrays
- string相關
- String
- StringBuffer
- StringBuilder
- 正則
- 日期類
- Locale類
- Date
- DateFormat
- SimpleDateFormat
- Calendar
- 新時間日期API
- 簡介
- LocalDate,LocalTime,LocalDateTime
- Instant時間點
- 帶時區的日期,時間處理
- 時間間隔
- 日期時間校正器
- TimeUnit
- 用yyyy
- 集合
- 集合和迭代器
- ArrayList集合
- List
- Set
- 判斷集合唯一
- Map和Entry
- stack類
- Collections集合工具類
- Stream數據流
- foreach不能修改內部元素
- of方法
- IO
- File類
- 字節流stream
- 字符流Reader
- IO流分類
- 轉換流
- 緩沖流
- 流的操作規律
- properties
- 序列化流與反序列化流
- 打印流
- System類對IO支持
- commons-IO
- IO流總結
- NIO
- 異步與非阻塞
- IO通信
- Unix的IO模型
- epoll對于文件描述符操作模式
- 用戶空間和內核空間
- NIO與普通IO的主要區別
- Paths,Path,Files
- Buffer
- Channel
- Selector
- Pipe
- Charset
- NIO代碼
- 多線程
- 創建線程
- 線程常用方法
- 線程池相關
- 線程池概念
- ThreadPoolExecutor
- Runnable和Callable
- 常用的幾種線程池
- 線程安全
- 線程同步的幾種方法
- synchronized
- 死鎖
- lock接口
- ThreadLoad
- ReentrantLock
- 讀寫鎖
- 鎖的相關概念
- volatile
- 釋放鎖和不釋放鎖的操作
- 等待喚醒機制
- 線程狀態
- 守護線程和普通線程
- Lamda表達式
- 反射相關
- 類加載器
- 反射
- 注解
- junit注解
- 動態代理
- 網絡編程相關
- 簡介
- UDP
- TCP
- 多線程socket上傳圖片
- NIO
- JDBC相關
- JDBC
- 預處理
- 批處理
- 事務
- properties配置文件
- DBUtils
- DBCP連接池
- C3P0連接池
- 獲得MySQL自動生成的主鍵
- Optional類
- Jigsaw模塊化
- 日志相關
- JDK日志
- log4j
- logback
- xml
- tomcat
- maven
- 簡介
- 倉庫
- 目錄結構
- 常用命令
- 生命周期
- idea配置
- jar包沖突
- 依賴范圍
- 私服
- 插件
- git-commit-id-plugin
- maven-assembly-plugin
- maven-resources-plugin
- maven-compiler-plugin
- versions-maven-plugin
- maven-source-plugin
- tomcat-maven-plugin
- 多環境
- 自定義插件
- stream
- swing
- json
- jackson
- optional
- junit
- gradle
- servlet
- 配置
- ServletContext
- 生命周期
- HttpServlet
- request
- response
- 亂碼
- session和cookie
- cookie
- session
- jsp
- 簡介
- 注釋
- 方法,成員變量
- 指令
- 動作標簽
- 隱式對象
- EL
- JSTL
- javaBean
- listener監聽器
- Filter過濾器
- 圖片驗證碼
- HttpUrlConnection
- 國際化
- 文件上傳
- 文件下載
- spring
- 簡介
- Bean
- 獲取和實例化
- 屬性注入
- 自動裝配
- 繼承和依賴
- 作用域
- 使用外部屬性文件
- spel
- 前后置處理器
- 生命周期
- 掃描規則
- 整合多個配置文件
- 注解
- 簡介
- 注解分層
- 類注入
- 分層和作用域
- 初始化方法和銷毀方法
- 屬性
- 泛型注入
- Configuration配置文件
- aop
- aop的實現
- 動態代理實現
- cglib代理實現
- aop名詞
- 簡介
- aop-xml
- aop-注解
- 代理方式選擇
- jdbc
- 簡介
- JDBCTemplate
- 事務
- 整合
- junit整合
- hibernate
- 簡介
- hibernate.properties
- 實體對象三種狀態
- 檢索方式
- 簡介
- 導航對象圖檢索
- OID檢索
- HQL
- Criteria(QBC)
- Query
- 緩存
- 事務管理
- 關系映射
- 注解
- 優化
- MyBatis
- 簡介
- 入門程序
- Mapper動態代理開發
- 原始Dao開發
- Mapper接口開發
- SqlMapConfig.xml
- map映射文件
- 輸出返回map
- 輸入參數
- pojo包裝類
- 多個輸入參數
- resultMap
- 動態sql
- 關聯
- 一對一
- 一對多
- 多對多
- 整合spring
- CURD
- 占位符和sql拼接以及參數處理
- 緩存
- 延遲加載
- 注解開發
- springMVC
- 簡介
- RequestMapping
- 參數綁定
- 常用注解
- 響應
- 文件上傳
- 異常處理
- 攔截器
- springBoot
- 配置
- 熱更新
- java配置
- springboot配置
- yaml語法
- 運行
- Actuator 監控
- 多環境配置切換
- 日志
- 日志簡介
- logback和access
- 日志文件配置屬性
- 開機自啟
- aop
- 整合
- 整合Redis
- 整合Spring Data JPA
- 基本查詢
- 復雜查詢
- 多數據源的支持
- Repository分析
- JpaSpeci?cationExecutor
- 整合Junit
- 整合mybatis
- 常用注解
- 基本操作
- 通用mapper
- 動態sql
- 關聯映射
- 使用xml
- spring容器
- 整合druid
- 整合郵件
- 整合fastjson
- 整合swagger
- 整合JDBC
- 整合spingboot-cache
- 請求
- restful
- 攔截器
- 常用注解
- 參數校驗
- 自定義filter
- websocket
- 響應
- 異常錯誤處理
- 文件下載
- 常用注解
- 頁面
- Thymeleaf組件
- 基本對象
- 內嵌對象
- 上傳文件
- 單元測試
- 模擬請求測試
- 集成測試
- 源碼解析
- 自動配置原理
- 啟動流程分析
- 源碼相關鏈接
- Servlet,Filter,Listener
- springcloud
- 配置
- 父pom
- 創建子工程
- Eureka
- Hystrix
- Ribbon
- Feign
- Zuul
- kotlin
- 基本數據類型
- 函數
- 區間
- 區塊鏈
- 簡介
- linux
- ulimit修改
- 防止syn攻擊
- centos7部署bbr
- debain9開啟bbr
- mysql
- 隔離性
- sql執行加載順序
- 7種join
- explain
- 索引失效和優化
- 表連接優化
- orderby的filesort問題
- 慢查詢
- show profile
- 全局查詢日志
- 死鎖解決
- sql
- 主從
- IDEA
- mac快捷鍵
- 美化界面
- 斷點調試
- 重構
- springboot-devtools熱部署
- IDEA進行JAR打包
- 導入jar包
- ProjectStructure
- toString添加json模板
- 配置maven
- Lombok插件
- rest client
- 文檔顯示
- sftp文件同步
- 書簽
- 代碼查看和搜索
- postfix
- live template
- git
- 文件頭注釋
- JRebel
- 離線模式
- xRebel
- github
- 連接mysql
- 選項沒有Java class的解決方法
- 擴展
- 項目配置和web部署
- 前端開發
- json和Inject language
- idea內存和cpu變高
- 相關設置
- 設計模式
- 單例模式
- 簡介
- 責任鏈
- JUC
- 原子類
- 原子類簡介
- 基本類型原子類
- 數組類型原子類
- 引用類型原子類
- JVM
- JVM規范內存解析
- 對象的創建和結構
- 垃圾回收
- 內存分配策略
- 備注
- 虛擬機工具
- 內存模型
- 同步八種操作
- 內存區域大小參數設置
- happens-before
- web service
- tomcat
- HTTPS
- nginx
- 變量
- 運算符
- 模塊
- Rewrite規則
- Netty
- netty為什么沒用AIO
- 基本組件
- 源碼解讀
- 簡單的socket例子
- 準備netty
- netty服務端啟動
- 案例一:發送字符串
- 案例二:發送對象
- websocket
- ActiveMQ
- JMS
- 安裝
- 生產者-消費者代碼
- 整合springboot
- kafka
- 簡介
- 安裝
- 圖形化界面
- 生產過程分析
- 保存消息分析
- 消費過程分析
- 命令行
- 生產者
- 消費者
- 攔截器interceptor
- partition
- kafka為什么快
- kafka streams
- kafka與flume整合
- RabbitMQ
- AMQP
- 整體架構
- RabbitMQ安裝
- rpm方式安裝
- 命令行和管控頁面
- 消息生產與消費
- 整合springboot
- 依賴和配置
- 簡單測試
- 多方測試
- 對象支持
- Topic Exchange模式
- Fanout Exchange訂閱
- 消息確認
- java client
- RabbitAdmin和RabbitTemplate
- 兩者簡介
- RabbitmqAdmin
- RabbitTemplate
- SimpleMessageListenerContainer
- MessageListenerAdapter
- MessageConverter
- 詳解
- Jackson2JsonMessageConverter
- ContentTypeDelegatingMessageConverter
- lucene
- 簡介
- 入門程序
- luke查看索引
- 分析器
- 索引庫維護
- elasticsearch
- 配置
- 插件
- head插件
- ik分詞插件
- 常用術語
- Mapping映射
- 數據類型
- 屬性方法
- Dynamic Mapping
- Index Template 索引模板
- 管理映射
- 建立映射
- 索引操作
- 單模式下CURD
- mget多個文檔
- 批量操作
- 版本控制
- 基本查詢
- Filter過濾
- 組合查詢
- 分析器
- redis
- String
- list
- hash
- set
- sortedset
- 發布訂閱
- 事務
- 連接池
- 管道
- 分布式可重入鎖
- 配置文件翻譯
- 持久化
- RDB
- AOF
- 總結
- Lettuce
- zookeeper
- zookeeper簡介
- 集群部署
- Observer模式
- 核心工作機制
- zk命令行操作
- zk客戶端API
- 感知服務動態上下線
- 分布式共享鎖
- 原理
- zab協議
- 兩階段提交協議
- 三階段提交協議
- Paxos協議
- ZAB協議
- hadoop
- 簡介
- hadoop安裝
- 集群安裝
- 單機安裝
- linux編譯hadoop
- 添加新節點
- 退役舊節點
- 集群間數據拷貝
- 歸檔
- 快照管理
- 回收站
- 檢查hdfs健康狀態
- 安全模式
- hdfs簡介
- hdfs命令行操作
- 常見問題匯總
- hdfs客戶端操作
- mapreduce工作機制
- 案例-單詞統計
- 局部聚合Combiner
- combiner流程
- combiner案例
- 自定義排序
- 自定義Bean對象
- 排序的分類
- 案例-按總量排序需求
- 一次性完成統計和排序
- 分區
- 分區簡介
- 案例-結果分區
- 多表合并
- reducer端合并
- map端合并(分布式緩存)
- 分組
- groupingComparator
- 案例-求topN
- 全局計數器
- 合并小文件
- 小文件的弊端
- CombineTextInputFormat機制
- 自定義InputFormat
- 自定義outputFormat
- 多job串聯
- 倒排索引
- 共同好友
- 串聯
- 數據壓縮
- InputFormat接口實現類
- yarn簡介
- 推測執行算法
- 本地提交到yarn
- 框架運算全流程
- 數據傾斜問題
- mapreduce的優化方案
- HA機制
- 優化
- Hive
- 安裝
- shell參數
- 數據類型
- 集合類型
- 數據庫
- DDL操作
- 創建表
- 修改表
- 分區表
- 分桶表
- DML操作
- load
- insert
- select
- export,import
- Truncate
- 注意
- 嚴格模式
- 函數
- 內置運算符
- 內置函數
- 自定義函數
- Transfrom實現
- having和where不同
- 壓縮
- 存儲
- 存儲和壓縮結合使用
- explain詳解
- 調優
- Fetch抓取
- 本地模式
- 表的優化
- GroupBy
- count(Distinct)去重統計
- 行列過濾
- 動態分區調整
- 數據傾斜
- 并行執行
- JVM重用
- 推測執行
- reduce內存和個數
- sql查詢結果作為變量(shell)
- youtube
- flume
- 簡介
- 安裝
- 常用組件
- 攔截器
- 案例
- 監聽端口到控制臺
- 采集目錄到HDFS
- 采集文件到HDFS
- 多個agent串聯
- 日志采集和匯總
- 單flume多channel,sink
- 自定義攔截器
- 高可用配置
- 使用注意
- 監控Ganglia
- sqoop
- 安裝
- 常用命令
- 數據導入
- 準備數據
- 導入數據到HDFS
- 導入關系表到HIVE
- 導入表數據子集
- 增量導入
- 數據導出
- 打包腳本
- 作業
- 原理
- azkaban
- 簡介
- 安裝
- 案例
- 簡介
- command類型單一job
- command類型多job工作流flow
- HDFS操作任務
- mapreduce任務
- hive腳本任務
- oozie
- 安裝
- hbase
- 簡介
- 系統架構
- 物理存儲
- 尋址機制
- 讀寫過程
- 安裝
- 命令行
- 基本CURD
- java api
- CURD
- CAS
- 過濾器查詢
- 建表高級屬性
- 與mapreduce結合
- 與sqoop結合
- 協處理器
- 參數配置優化
- 數據備份和恢復
- 節點管理
- 案例-點擊流
- 簡介
- HUE
- 安裝
- storm
- 簡介
- 安裝
- 集群啟動及任務過程分析
- 單詞統計
- 單詞統計(接入kafka)
- 并行度和分組
- 啟動流程分析
- ACK容錯機制
- ACK簡介
- BaseRichBolt簡單使用
- BaseBasicBolt簡單使用
- Ack工作機制
- 本地目錄樹
- zookeeper目錄樹
- 通信機制
- 案例
- 日志告警
- 工具
- YAPI
- chrome無法手動拖動安裝插件
- 時間和空間復雜度
- jenkins
- 定位cpu 100%
- 常用腳本工具
- OOM問題定位
- scala
- 編譯
- 基本語法
- 函數
- 數組常用方法
- 集合
- 并行集合
- 類
- 模式匹配
- 異常
- tuple元祖
- actor并發編程
- 柯里化
- 隱式轉換
- 泛型
- 迭代器
- 流stream
- 視圖view
- 控制抽象
- 注解
- spark
- 企業架構
- 安裝
- api開發
- mycat
- Groovy
- 基礎