流程:
第一步:創建xxx項目
~~~
scrapy startproject woaiwojia
~~~
第二步:創建要抓取的名稱及抓取網址
~~~
scrapy genspider ershoufang https://sh.5i5j.com/ershoufang/
~~~
第三步:編寫items.py,明確需要提取的數據
第四步:編寫spiders/xxx.py 編寫爬蟲文件,處理請求和響應,以及提取數據(yeild item)
第五步:編寫pipelines.py管道文件,處理spider返回item數據
第六步:編寫settings.py,啟動管理文件,以及其他相關設置
第七步:執行爬蟲