android Jsoup獲取網(wǎng)站內(nèi)容 android獲取新聞標題實例

更新時間：2017年03月30日 11:40:17 作者：許佳佳233

這篇文章主要為大家詳細介紹了android Jsoup獲取網(wǎng)站內(nèi)容，android獲取新聞標題實例，具有一定的參考價值，感興趣的小伙伴們可以參考一下

近期做簡單的新聞客戶端界面使用到了Jsoup獲取，使用起來特別方便，這也是被我一個學(xué)長稱為學(xué)android網(wǎng)絡(luò)必學(xué)的一個東西，在此也是分享一下自己近期所學(xué)。

首先還是給出效果：

上面是通過textview顯示的一個從網(wǎng)站上獲取的所有內(nèi)容的顯示，下面是通過listview顯示一下獲取的新聞的標題，如此顯示比較便于理解。

MainActivity：

import android.app.Activity; 
import android.content.Intent; 
import android.net.Uri; 
import android.os.AsyncTask; 
import android.os.Bundle; 
import android.text.method.ScrollingMovementMethod; 
import android.util.Log; 
import android.view.Menu; 
import android.view.View; 
import android.widget.AdapterView; 
import android.widget.AdapterView.OnItemClickListener; 
import android.widget.ArrayAdapter; 
import android.widget.ListView; 
import android.widget.TextView; 
 
import org.apache.http.HttpResponse; 
import org.apache.http.client.HttpClient; 
import org.apache.http.client.methods.HttpPost; 
import org.apache.http.impl.client.DefaultHttpClient; 
import org.apache.http.util.EntityUtils; 
import org.jsoup.Jsoup; 
import org.jsoup.nodes.Document; 
import org.jsoup.nodes.Element; 
import org.jsoup.select.Elements; 
 
import java.util.ArrayList; 
import java.util.List; 
 
@SuppressWarnings("unused") 
public class MainActivity extends Activity { 
  private TextView TV_HTMLCode; 
  //此處搞一個TextView主要來顯示News列表里面存儲的內(nèi)容，僅僅便于分析和理解 
 
  private String URL_EOL = "http://www.cnwust.com/newsList/1_1", 
      TAG = "ATAG"; 
  //這是索要獲取內(nèi)容的網(wǎng)址 
 
  private List<News> NewsList; 
  //自定義的News的類，用于存放索要獲取新聞的目錄、時間以及點擊后顯示的網(wǎng)址 
 
  private ListView LV_Result; 
  private ArrayAdapter<String> LV_Adapter; 
 
  @Override 
  protected void onCreate(Bundle savedInstanceState) { 
    super.onCreate(savedInstanceState); 
    setContentView(R.layout.activity_main); 
    LV_Result = (ListView) findViewById(R.id.LV_Result); 
    TV_HTMLCode = (TextView) findViewById(R.id.TV_HTMLCode); 
    TV_HTMLCode.setMovementMethod(ScrollingMovementMethod.getInstance()); 
 
    ConnectTask C1 = new ConnectTask(); 
    C1.execute(); 
 
  } 
 
  @Override 
  public boolean onCreateOptionsMenu(Menu menu) { 
    getMenuInflater().inflate(R.menu.menu_main, menu); 
    return true; 
  } 
 
  public class ConnectTask extends AsyncTask<Void, Void, String> { 
 
    @Override 
    protected String doInBackground(Void... params) { 
      String result = ConnectEOL(); 
      return result; 
    } 
 
    @Override 
    protected void onPostExecute(String result) { 
      // TV_HTMLCode.setText(result); 
      NewsList = getNews(result); 
      List<String> NewsTitles = new ArrayList<String>(); 
      for (News news : NewsList) { 
        TV_HTMLCode.append(news.getNewsTitle() + "\n"); 
        TV_HTMLCode.append(news.getNewsTime() + "\n"); 
        TV_HTMLCode.append(news.getNewsUrl() + "\n"); 
        NewsTitles.add(news.getNewsTitle()); 
      } 
    /* 為ListView添加適配器 */ 
 
      LV_Adapter = new ArrayAdapter<String>(MainActivity.this, 
          android.R.layout.simple_list_item_1, NewsTitles); 
      LV_Result.setAdapter(LV_Adapter); 
 
    /* 為ListView添加點擊打開對應(yīng)網(wǎng)頁功能 */ 
      LV_Result.setOnItemClickListener(new OnItemClickListener() { 
 
        @Override 
        public void onItemClick(AdapterView<?> arg0, View arg1, 
                    int arg2, long arg3) { 
          final Uri uri = Uri.parse(NewsList.get(arg2).getNewsUrl()); 
          final Intent it = new Intent(Intent.ACTION_VIEW, uri); 
          startActivity(it); 
        } 
 
      }); 
      //此處為了方便就點擊就直接調(diào)用設(shè)備默認瀏覽器打開網(wǎng)址 
 
      super.onPostExecute(result); 
 
 
    } 
 
  } 
 
  /* 連接EOL的方法 返回整個網(wǎng)頁經(jīng)過截取之后的的源代碼 */ 
  public String ConnectEOL() { 
    String result = ""; 
    try { 
      HttpClient httpclient = new DefaultHttpClient(); 
      HttpPost httppost = new HttpPost(URL_EOL); 
      HttpResponse response = httpclient.execute(httppost); 
      String Res = EntityUtils.toString(response.getEntity(), "UTF-8"); 
 
      int st = Res.indexOf("<div id=\"result\">"); 
      int ed = Res.indexOf("<div id=\"pager\">"); 
      //這邊算是最重要的部分，代碼獲取的便是這兩段之間的部分。 
 
      String content = Res.substring(st, ed); 
      st = content.indexOf("<ul>") + 4; 
      ed = content.indexOf("</ul>"); 
      content = content.substring(st, ed); 
      result = content; 
    } catch (Exception e) { 
      Log.d(TAG, e.toString()); 
    } 
    return result; 
  } 
 
  /* 對源代碼進行解析截取的方法 返回一個News數(shù)組 */ 
  public List<News> getNews(String HTMLCode) { 
    List<News> newsList = new ArrayList<News>(); 
    Document doc = Jsoup.parse(HTMLCode); 
    Log.d(TAG, "解析html中"); 
    Elements lis = doc.getElementsByTag("li"); 
    Log.d(TAG, "lis的size " + lis.size()); 
    for (Element li : lis) { 
      String newstime = li.getElementsByTag("span").text(); 
      String newstitle = li.getElementsByTag("a").text(); 
      String newsurl = li.getElementsByTag("a").attr("href"); 
      //這三段算是Jsoup從html中獲取內(nèi)容的關(guān)鍵了，很容易理解。 
 
      newsurl = newsurl.replace("/news", "http://www.cnwust.com/news"); 
      //直接從html的代碼中獲取的URL是相對路徑，此處使用replace改為絕對路徑 
 
      Log.d(TAG, newstime); 
      Log.d(TAG, newstitle); 
      Log.d(TAG, newsurl); 
 
      News newst = new News(); 
      newst.setNewsTime(newstime); 
      newst.setNewsTitle(newstitle); 
      newst.setNewsUrl(newsurl); 
      newsList.add(newst); 
    } 
    return newsList; 
  } 
}

News：

public class News { 
  private String newsTime; 
  private String newsUrl; 
  private String newsTitle; 
 
  public News() { 
 
  } 
 
  public News(String newsTitle, String newsTime, String newsUrl) { 
    this.newsTime = newsTime; 
    this.newsUrl = newsUrl; 
    this.newsTitle = newsTitle; 
  } 
 
  public String getNewsTime() { 
    return newsTime; 
  } 
 
  public void setNewsTime(String newsTime) { 
    this.newsTime = newsTime; 
  } 
 
  public String getNewsUrl() { 
    return newsUrl; 
  } 
 
  public void setNewsUrl(String newsUrl) { 
    this.newsUrl = newsUrl; 
  } 
 
  public String getNewsTitle() { 
    return newsTitle; 
  } 
 
  public void setNewsTitle(String newsTitle) { 
    this.newsTitle = newsTitle; 
  } 
 
}

activity_main:

<RelativeLayout xmlns:android="http://schemas.android.com/apk/res/android" 
  xmlns:tools="http://schemas.android.com/tools" 
  android:layout_width="match_parent" 
  android:layout_height="match_parent" 
  android:paddingBottom="@dimen/activity_vertical_margin" 
  android:paddingLeft="@dimen/activity_horizontal_margin" 
  android:paddingRight="@dimen/activity_horizontal_margin" 
  android:paddingTop="@dimen/activity_vertical_margin" 
  tools:context=".NewsList" > 
 
  <TextView 
    android:id="@+id/TV_HTMLCode" 
    android:layout_width="match_parent" 
    android:layout_height="150dp" 
    android:layout_above="@+id/LV_Result" 
    android:layout_alignParentTop="true" 
    android:layout_centerHorizontal="true" 
    android:scrollbars="vertical" /> 
 
  <ListView 
    android:id="@+id/LV_Result" 
    android:layout_width="match_parent" 
    android:layout_height="230dp" 
    android:layout_alignLeft="@+id/TV_HTMLCode" 
    android:layout_alignParentBottom="true" > 
  </ListView> 
 
</RelativeLayout>

此處對html代碼的解析可能部分新手還是不太清楚，在此也是建議使用chrome瀏覽器，可以直接查看網(wǎng)站的源碼。（有部分加密的網(wǎng)站看不到）下面看一下具體使用的截圖：

1、首先先要打開到你要獲取內(nèi)容的網(wǎng)站