第三百三十八节，Python分布式爬虫打造搜索引擎Scrapy精讲—深度优先与广度优先原理
网站树形结构
深度优先
是从左到右深度进行爬取的，以深度为准则从左到右的执行
原文：http://www.cnblogs.com/adc8868/p/7275925.html
