在crawler4j中WebCrawler的参数

Question

是否可以将参数传递给WebCrawler ?例如，我想在运行时通过WebCrawler.shouldVisit(WebURL url)方法的新规则或在我的WebCrawler中设置一些字段。这可能吗?

Answer 1

我找到了答案。你可以使用CrawlController方法。setCustomData(对象customData)来存储数据，然后你可以使用WebCrawler.getMyController(). getcustomdata()从爬虫获取数据。