> 原文出處：[Scrapy爬蟲教程](http://blog.csdn.net/column/details/scrapy-dengjingdong.html) 作者：[djd1234567](http://blog.csdn.net/djd1234567) **本系列文章經作者授權在看云整理發布，未經作者允許，請勿轉載！** # Scrapy爬蟲教程 > 網絡爬蟲（Web Crawler, Spider）就是一個在網絡上亂爬的機器人。當然它通常并不是一個實體的機器人，因為網絡本身也是虛擬的東西，所以這個“機器人”其實也就是一段程序，并且它也不是亂爬，而是有一定目的的，并且在爬行的時候會搜集一些信息。