相关阅读
相关 爬虫日记(95)：Twisted开发异步程序基础
前面测试过多台服务器的情况下，如果使用同步客户端程序来下载，就会比较慢，要等一个服务器完成了才能下载另外一个文件，后面采用异步的客户端就比较快，可以与三台服务器同步进行下载。由
﹏ヽ暗。殇╰゛Y相关 爬虫日记(93)：Twisted的设计模型
由于scrapy的代码采用twisted的框架来设计，因此需要继续来学习twisted的内容，才可以更加深入地了解scrapy的代码实现方式，以及借鉴scrapy的代码来开发自
相关 爬虫日记(82)：Twisted的线程返回值
前面学习callInThread 和callFromThread函数，callInThread函数允许把一些代码交给其它线程工作，callFromThread函数允许其它线程把
怼烎@相关 爬虫日记(81)：Twisted的线程池使用
为了尽快熟悉scrapy的代码，先来抽取里面的一个循环调度的类出来测试一下，这个类实现对回调函数的封装。整个例子的代码如下： 爬虫日记-蔡军生（qq:9073204)
相关 爬虫日记(80)：Twisted的循环任务
前面已经学习了Twisted框架的一些延时机制、延时链、多个延时条件等等，接着下来继续学习Twisted的循环任务，比如scrapy里下载任务失败之后，尝试过一段时间再重试下载
相关 爬虫日记(79)：Twisted的延时机制
当我们深入地分析Scrapy的源码时，我们一定会遇到Twisted框架，因为Scrapy是构建在这个框架之上，因此我们是避免不了要了解Twisted框架内容，才能够进一步理解S
相关 爬虫日记(108)：Twisted:使用后悔药
有时候有一些操作发送出去了，但是不再需要做，这样就需要使用后悔药。比如前面的诗歌代理服务器，当一个客户端连接过来获取诗歌内容，但是由于服务器下载很慢，但是客户端等不起了，决定关
相关 爬虫日记(106)：Twisted:单元测试怎么样编写
前面学习了很多Twisted框架的代码，也能够实现了比较多功能，但是这些代码都没有编写单元测试的，因此这些代码的正确性并不能保证，同时由于没有单元测试，当项目比较大时，无法保证
Bertha 。相关 爬虫日记(99)：Twisted的Deferred重新审视
在前面的例子可以看到，回调函数是事件循环框架异步编程的基本方式，只有使用回调函数才能把用户的代码，插入到框架的事件循环里运行，这是所有事件循环框架的基本要求，也是它的基本内容，
相关 爬虫日记(97)：Twisted的更高级的抽象层
前面使用学习了下载诗歌的客户端程序，不过使用的是底层的网络socket来实现，这是一个可行的方案，不过使用此方案需要自己注意更多的细节，还需要适应不同的平台，这些都是麻烦人的事
还没有评论，来说两句吧...