需要澄清应该访问和访问Crawler4j的方法

我需要使用Crawler4j从网站下载PDF。我按照这个文档创建了两个类：

1. PDFCrawler
2. PDFCrawlController

现在，在我的PDFCrawler类中，我有一个shouldVisit(Page page, WebURL url)方法，如下所示：

public boolean shouldVisit(Page page, WebURL url) {
    String href = url.getURL().toLowerCase(); 
    return href.startsWith(crawlDomain) && pdfPatterns.matcher(href).matches();
}

这里，crawlDomain是从PDFCrawlController类（例如，http://www.example.com）发送的域。pdfPatterns定义如下：

private static final Pattern pdfPatterns = Pattern.compile(".*(\.(pdf?))$");

PDFCrawler类中的visit(Page page)方法开始如下：

    public void visit(Page page) {
        String url = page.getWebURL().getURL();
        if (!pdfPatterns.matcher(url).matches()) {
            System.out.println("I am in " + url);
            System.out.println("No match. Leaving.");
            return;
        }
//and so on...
}

现在，当我将http://www.example.com发送到PDFCrawler时，visit(Page page)方法中的System.out.println()打印如下：

I am in http://www.example.com/allforgood
No match. Leaving.
I am in http://www.another-web-site.iastate.edu/grants/xp2011-02
No match. Leaving.
I am in http://www.example.com/careers
No match. Leaving.
I am in http://www.example.com/wp-content/uploads/2014/01/image-happenings1.png
No match. Leaving.

我的问题是：

1. 为什么爬网程序要转到another-web-site？我不是在shouldVisit()方法中限制它这样做吗
2. 为什么它访问来自同一域的实际上是图像的页面（例如png）？我不是在shouldVisit()方法中限制它这样做吗