# 技術使用
不管是java原生API 還是 httpclient 或者是OKHTTP,無非就是做一個HTTP請求,只是做了不同程度的封裝,為了方便使用,請求HTTP是爬蟲項目的一個基礎功能,寫完以后一般是以工具類的形式出現,這類工作一般只需要做一次,在后面的模塊中使用即可,所有就算麻煩,也就是麻煩一次,哪怕是使用java原生的API,也一樣可以解決問題。
只是使用原生API,對于cookie的處理上會稍微麻煩一點。而另外兩個都是成熟的http的解決方案,都能找到相應的解決方法,見仁見智,看你如何使用了。
- Introduction
- 爬蟲相關技能介紹
- 爬蟲簡單介紹
- 爬蟲涉及到的知識點
- 爬蟲用途
- 爬蟲流程介紹
- 需求描述
- Http請求處理
- http基礎知識介紹
- http狀態碼
- httpheader
- java原生態處理http
- URL類
- 獲取URL請求狀態
- 模擬Http請求
- apache httpclient
- Httpclient1
- httpclient2
- httpclient3
- httpclient4
- httpclient5
- httpclient6
- okhttp
- OKhttp使用教程
- 技術使用
- java執行javascript
- 網頁解析
- Xpath介紹
- HtmlCleaner
- HtmlCleaner介紹
- HtmlCleaner使用
- HtmlParser
- HtmlParser介紹
- Jsoup
- 解析和遍歷一個HTML文檔
- 解析一個HTML字符串
- 解析一個body片斷
- 從一個URL加載一個Document
- 從一個文件加載一個文檔
- 使用DOM方法來遍歷一個文檔
- 使用選擇器語法來查找元素
- 從元素抽取屬性,文本和HTML
- 處理URLs
- 示例程序 獲取所有鏈接
- 設置屬性的值
- 設置一個元素的HTML內容
- 消除不受信任的HTML (來防止XSS攻擊)
- 正則表達式
- elasticsearch筆記
- 下載安裝elasticsearch
- 檢查es服務健康