> # 索引失效的場景、索引優化方案
> ### 索引失效的場景
- 字段類型不同(隱式類型轉換): 給一個字符串字段加索引, where 字段=123456 時候, 字段是 varchar(255), 而輸入的參數是整型,需要類型轉換導致全表掃描(類型符合轉換規則還是可以使用的 不同位數的類型互相轉換)
- 表字符集不同(隱式字符編碼轉換): 通過字段關聯兩種表時, 一張表是utf8, 另一張表是utf8mb4也會導致全表掃描
- 字段使用了函數或表達式 where ABS(字段) = 7 , where 字段+1 > 9
- !=,<>,is null,is not null不會走索引
- 條件中帶有or, or中的每個列都有索引時才有用(要想使用or,又想讓索引生效,只能將or條件中的每個列都加上索引 )(每一個or單處建索引,查詢的使用索引合并,用到多列索引)
- 不符合最左匹配原則, 建立了組合索引, where 時沒出現前面的索引前面的列
- 在進行范圍查詢(比如>、=、<=、in等條件)時,當Mysql發現通過索引掃描的行記錄數超過全表的10%-30%時,優化器可能會放棄走索引,自動變成全表掃描
- like (like 'XXX%' 符合最左匹配原則可以用到索引, like '%XXX', '%XXX%' 無法使用索引)
- 查詢數據量大的時候,導致優化器認為走全表查詢時間效率更佳
- NOT條件
- 我們知道建立索引時,給每一個索引列建立一個條目,如果查詢條件為等值或范圍查詢時,索引可以根據查詢條件去找對應的條目。反過來當查詢條件為非時,索引定位就困難了,執行計劃此時可能更傾向于全表掃描,這類的查詢條件有:<>、NOT、in、not exists
> ### 索引優化方案
- 盡量使用覆蓋索引(只訪問索引的查詢(索引列和查詢列一直)),減少select \*
- 索引列字符很長,會讓索引變大和慢, 這時可以通過前綴或后綴去優化(有時也會用到字段倒序存儲, Hash字段存儲)
- 創建組合索引時, 把第一時間過濾完后數據量少的字段放在前面
- 組合索引a,b, 在建立a索引是冗余, 建立b索引不是, 組合索引a,b, 中的b是一個個比對
- 唯一索引比普通索引差, 如果業務在保存數據時能確保唯一就采用普通索引
- 查詢全表字段時, select 字段名 會比 select * 快
- 優化器選擇錯誤索引時, 強制優化器使用某個索引 : select * from table force index(索引名稱)
- 聚簇索引的主鍵長度小, 有序自增, 避免修改和刪除
- 最左匹配原則,mysql會一直向右匹配直到遇到范圍查詢(>、<、like、between),就停止匹
- 主鍵不能太長而且插入時的主鍵最好是按順序遞增,否則對性能有很大影響
- 分頁數據如何優化?
- 取出來數據的ID是有序自增, 可以通過代碼算出每一頁的ID范圍, 然后 select * from table where id bwteen 范圍1, 范圍2
- 取出來的數據是 ID無序, 可以先 select id from table limit xxx,xxx 然后 select * from table where id in (id值), 這樣兩次查詢都能用到索引
- [MySql千萬級limit優化方案](https://blog.csdn.net/sunct/article/details/90441965)
- order by 優化
- 沒有order by時, 執行SQL返回的數據順序, 會按照使用到的索引排序返回, 需要回表的話會用主鍵排序返回
- [MySQL中order by 原理](https://www.szhulian.com/new/1646.html)
- [Mysql學習之order by的工作原理](https://www.cnblogs.com/lamp01/p/10770172.html)
- 按照效率排序的話,count(字段)<count(主鍵 id)<count(1)≈count(\*)
- count(主鍵 id) 來說,InnoDB 引擎會遍歷整張表,把每一行的 id 值都取出來,返回給 server 層。server 層拿到 id 后,判斷是不可能為空的,就按行累加。
- 對于 count(1) 來說,InnoDB 引擎遍歷整張表,但不取值。server 層對于返回的每一行,放一個數字“1”進去,判斷是不可能為空的,按行累加。
- 草稿
- Golang
- 切片 slice
- 數組和切片的區別
- 左閉右開
- make([]int, 5) 和 make([]int, 0, 5) 區別
- 切片非線程安全,并發操作為啥不會像map一樣報錯
- []struct{} 如何遍歷
- 切片如何刪除某個元素
- append 一個nil 切片
- 哈希表 map
- 并發操作
- 并發寫報錯
- 并發讀不會報錯
- 并發讀有寫報錯
- 并發迭代有寫報錯
- 自制并發安全字典
- 官方并發安全字典
- 對未初始化的 map 進行賦值操作
- map的底層
- 無序輸出
- 等量擴容
- 實現集合
- map的key可以使哪些值
- 協程 go
- 協程相關閱讀
- 進程、線程、協程
- 協程 (捕獲異常 和 協程池)
- GPM 模型
- CSP模型
- channel
- channel 相關操作
- 交替打印
- 如何讓channel 只能接收/只能發送
- channel 常見報錯
- channel 死鎖
- nil channel 和 已關閉的 channel
- 使用 select 來多路復用 channel
- channel 的使用
- 接口和結構體
- 簡單使用
- 兩個結構體能否比較
- 工廠模式
- 概念
- 簡單工廠
- 方法工廠
- 堆和棧,值類型和引用類型,內存逃逸,垃圾回收
- 棧和堆
- 內存逃逸
- 值類型和引用類型
- 垃圾回收方式
- 性能優化分析工具 pprof
- golang 代碼片段
- 片段一 defer
- 片段二 channel
- Golang 相關
- Golang 相關閱讀
- Golang 1-10
- make 和 new 的區別
- 使用指針的場景
- Go語言的context包
- 位運算
- Copy 是淺拷貝還是深拷貝
- init 函數 和 sync.Once
- select 多路復用
- Golang 其它
- MongoDB
- 可比較類型 與 可轉json 類型
- Gorm
- 面向對象和面向過程
- go語言實現-面向對象
- go語言實現-面向過程
- 限流,熔斷,降級
- 了解
- 熔斷配置
- 熔斷例子
- 服務降級
- github.com/alibaba/sentinel-golang
- 互斥鎖 讀寫鎖 原子鎖
- 為什么需要鎖
- 互斥鎖
- 讀寫鎖
- 原子鎖
- 互斥鎖性能對比
- 原子鎖性能對比
- 互斥鎖 or 原子鎖?
- 條件鎖
- 計數器
- GoFrame
- GF1.16版本
- 修改使用的表
- 按天、周、月、年
- GoFrame 文檔
- 配置文件
- 生成腳本
- 排序算法
- 相關排序
- 冒泡排序
- 選擇排序
- 插入排序
- 快速排序
- 歸并排序
- 堆排序
- 數據庫
- 分布式怎么保證線程安全
- 數據庫實現方式
- 基于表記錄
- 樂觀鎖
- 悲觀鎖
- Redis實現方式
- Zookeeper實現方式
- Mysql 相關
- group_concat
- 索引優化
- 索引優化1
- 定期分析和優化索引
- 覆蓋索引
- 組合索引
- 聚簇索引和非聚簇索引
- 索引類型與方式、聚簇與非聚簇索引
- 事務特征和隔離級別
- 查詢優化
- mysql自增表插入數據時,Id不連續問題
- InnoDB引擎 和 MyISAM引擎區別
- 鎖
- 悲觀鎖和樂觀鎖
- 查詢,更新,插入語句
- 什么是死鎖
- 怎么處理死鎖
- MySQL 隔離級別
- 事務特征
- 隔離級別
- 廢棄3
- 索引
- 索引類型和方式、聚簇和非聚簇索引(上)
- 索引類型和方式、聚簇和非聚簇索引(下)
- 回表、覆蓋索引、最左前綴、聯合索引、索引下推、索引合并
- Mysql 優化
- 索引的原理
- 千萬級表修改表結構
- Redis
- 獲取隨機三條數據
- Redis 持久化方式
- 全量模式 RDB 冷備份(內存快照)
- 增量模式 AOF 熱備份(文件追加)
- 過期key的刪除策略、內存淘汰機制
- 數據結構
- 位圖
- 網絡
- 網絡相關
- 游戲同步方式:幀同步和狀態同步
- Websocket
- OSI模型
- TCP 與 UDP
- 三次握手四次揮手
- Http 狀態碼
- 1xx(信息性狀態碼)
- 101 服務端代碼
- 101 客戶端代碼
- 2xx(成功狀態碼)
- 3xx(重定向狀態碼)
- 302 服務端代碼
- 302 客戶端代碼
- 4xx(客戶端錯誤狀態碼)
- 5xx(服務器錯誤狀態碼)
- 如何排查接口問題
- 網絡請求和響應過程
- time_wait
- keep-alive
- http 和 rpc 的區別
- I/O多路復用 select和poll
- too many open file
- 其它技術
- git 相關操作
- 修改提交備注
- 多個提交合并成一個提交
- 回退版本
- 小程序和公眾號
- 消息模板
- 獲取code
- 靜默登錄
- 其它技術相關
- C盤空間不足
- 生成式人工智能AIGC
- 共享文件
- 接口文檔, mock提供測試數據
- 抓包工具
- Python
- 安裝包失敗
- 自動化測試 Scrapy
- AIGC:人工智能生成內容
- PHP
- xhprof 性能分析
- 一鍵安裝
- 哈希沖突的解決方式
- 鏈地址法(拉鏈法)
- 開放地址法
- 再哈希
- 概念1
- Nginx
- 負載均衡方式
- 加密解密
- 簡單了解
- 簽名算法例子
- 碼例子1
- 代碼例子2
- Linux
- netstat (用于查看和管理網絡連接和路由表)
- ps 用于查看和管理進程
- ab 壓測
- nohup 守護進程
- lsof (List Open File 獲取被進程打開文件的信息)
- tail 查看日志
- 各類linux同步機制
- Socket 服務端的實現,select 和epoll的區別?
- scp 傳輸,awk 是一個強大的文本分析工具
- pidof
- 項目
- 棋牌
- 牌的編碼
- 出牌規則
- 洗牌
- 股票
- 股票知識
- 龍虎榜數據緩存方式
- 單日龍虎榜數據
- 單只股票的歷史上榜
- 遇到的問題
- 浮點數精度問題
- Mysql Sum 精度問題(float, double精度問題)
- 分頁問題(數據重復)
- 工具包
- v3
- common.go
- common_test.go
- customized.go
- customized_test.go
- slice.go
- slice_test.go
- time.go
- time_test.go
- v4
- common.go
- common_test.go
- customized.go
- customized_test.go
- slice.go
- time.go
- time_test.go
- 相關閱讀
- 協程 goroutine
- 通道 channel
- json 和 gob 序列化和反序列化
- redis 有序集合
- mysql22
- 相關閱讀 s
- pyTorch
- defer
- 內存泄漏
- 數據傳輸
- 雜項
- 一提
- gogogoo
- 內容