>[success] # HTTP 相關技術 ~~~ 1.經常使用的'萬維網'（World Wide Web），它基于 HTTP 協議，傳輸 HTML 等超文本資源， 能力也就被限制在 HTTP 協議之內. 2.HTTP協議并不是互聯網的全部，但是現在互聯網大部分都被萬維網所覆蓋，因此也可理解成大部分 被HTTP 覆蓋，相比之下還有電子郵件、BT 和 Magnet 點對點下載、FTP 文件下載、SSH 安全登錄、 各種即時通信服務等等，它們需要用各自的專有協議來訪問。 ~~~ >[danger] ##### 瀏覽器 -- http請求方 ~~~ 1.瀏覽器'Web Browser'檢索、查看互聯網上網頁資源的應用程序,Web，實際上指的就是'World Wide Web'， 也就是萬維網 2.瀏覽器本質上是一個 HTTP 協議中的請求方，使用 HTTP 協議獲取網絡上的各種資源 3.在 HTTP 協議里，瀏覽器的角色被稱為'User Agent'即'用戶代理'，意思是作為訪問者的'代理'來發起 HTTP 請求,就是我們常說的'客戶端' ~~~ >[danger] ##### Web 服務器 -- 響應方 ~~~ 1.服務器'Web Server',它是 HTTP 協議里響應請求的主體 2.服務器有兩個層面的含義'硬件' 和'軟件' 2.1.硬件含義就是物理形式或“云”形式的機器 2.2.軟件 這里就有常見的'Apache','Nginx'，'Windows 上的 IIS','Java 的 Jetty/Tomcat' ~~~ >[danger] ##### CDN ~~~ 1.CDN，全稱是'Content Delivery Network'，翻譯過來就是'內容分發網絡'。它應用了 HTTP 協議里的 緩存和代理技術，代替源站響應客戶端的請求。 2.瀏覽器通常不會直接連到服務器，中間會經過其中的一個就是'cdn' 3.增加了'CDN'的好處 3.1.它可以緩存源站的數據，讓瀏覽器的請求不用到達源站服務器,直接在'半路'就可以獲取響應,就好比我的 服務器在美國，我本人在中國，我可以利用國內的cdn獲取資源，就不用將一些資源需要訪問美國的服務器 3.2.供負載均衡、安全防護、邊緣計算、跨運營商網絡等功能 ~~~ >[danger] ##### 爬蟲 ~~~ 1.爬蟲可以理解成非'人'用戶，一把就是通過代碼來模仿'用戶'在瀏覽器的操作，來獲取網頁資源 2.爬蟲的缺點它會過度消耗網絡資源，占用服務器和帶寬，影響網站對真實數據的分析，甚至導致敏感信息泄漏， 一般網站會規定'robots.txt，約定哪些該爬，哪些不該爬' ~~~