Mobai
/
magic-Dependency
1
0
Fork 0
Code Issues Pull Requests Packages Projects Releases Wiki Activity
magic-Dependency/webmagic-extension
History
x1ny 90e14b31b0 修正FileCacheQueueScheduler导致程序不能正常结束和未关闭流 
FileCacheQueueScheduler中开启了一个线程周期运行来保存数据但在爬虫结束后没有关闭导致程序无法结束，以及没有关闭io流。

解决方法：
让FileCacheQueueScheduler实现Closable接口，在close方法中关闭线程以及流。
在Spider的close方法中添加对scheduler的关闭操作。
 		2015-11-12 23:10:20 +08:00
..
src 修正FileCacheQueueScheduler导致程序不能正常结束和未关闭流 2015-11-12 23:10:20 +08:00
README.md update readme 2013-08-07 09:45:38 +08:00
pom.xml update version 2014-06-04 17:33:30 +08:00

README.md

webmagic-extension

webmagic的扩展模块。包括注解格式定义爬虫、JSON、分布式等支持。