我使用的是母鸡2.3.所有作业运行一个又一个,即第一个
生成器,
提取,解析,索引等.我想同时运行一些作业.我知道一些作业不能并行运行,但其他作业可以解析作业,dbupdate,indexjob应该用fetch运行.
可能吗 ?我的基本目标是一直运行抓取工作.我想我们可以用不同的时间戳来做.
任何人都可以指导我正确的方法吗?
如果您查看了Nutch Web应用服务器,您将发现它可以并行执行多个爬网作业.您应该查看Nutch 2.3的源
代码,用于webapp [NutchUiServer].希望这可以帮助.