如何从许多url网页获取文章内容



我搜索了很多正确的解决方案,但仍然无法修复。请看这个&帮帮我。

   import java.io.BufferedReader;
   import java.io.BufferedWriter;
   import java.io.FileOutputStream;
   import java.io.IOException;
   import java.io.InputStreamReader;
   import java.io.OutputStreamWriter;
   import java.io.PrintWriter;
   import org.jsoup.Jsoup;
   import org.jsoup.nodes.Document;
   import org.jsoup.nodes.Element;
   import org.jsoup.select.Elements;
   public class NewClass {

   public static void main(String[] args) throws IOException {

   Document doc = Jsoup.connect("http://tamilblog.ishafoundation.org").get();
         Elements section = doc.select("section#content");
  Elements article = section.select("article");
  for (Element a : article) {
    System.out.println("Title : n" + a.select("a").text());
    System.out.println("Article summary: n" + a.select("div.entry-summary").text());
  }
  }
}

我有上面的代码,用于从一个页面获取文章及其内容。

   Document doc = Jsoup.connect("http://tamilblog.ishafoundation.org").get();

我想为几个网站做这件事。

在这一行中,或者使用一些迭代,我想将我的代码应用于几个网页,比如500+。我想把它保存在文章标题和内容下的单独文本文档中。

我是编码新手,所以找不到正确的代码。

在过去的两个月里,我一直在做这个代码来创建我的代码。

对于初学者,你可以做这样的事情,

String[] urls={"http://tamilblog.ishafoundation.org","url2","url3"};//your 500 urls wil be stored here, 
    for(String url: urls){
        Document doc = Jsoup.connect(url).get();
        Elements section = doc.select("section#content");
        Elements article = section.select("article");
        for (Element a : article) {
            System.out.println("Title : n" + a.select("a").text());
            System.out.println("Article summary: n" + a.select("div.entry-summary").text());
        }
    }

最新更新