该框架为轻型爬虫框架,主要的工作原理就是定义两个队列,分别为任务队列与保存队列.将请求任务放到工作队列中,将获取的结果放入到保存队列中.然后分别定义相应的处理函数,来对队列中的数据进行处理.