本教程是爲了採集騰訊視頻數據,作爲筆記的同時,也可以給大家一點參考的價值。
第一天
分析:http://v.qq.com/x/list/movie 顯示全部電影信息地址
代碼實現
package com.sdjxd.hussar;
import java.io.IOException;
import org.jsoup.Jsoup;
import org.jsoup.nodes.Document;
import org.jsoup.nodes.Element;
import org.jsoup.select.Elements;
public class Main {
/**
* @param args
* @throws IOException
*/
public static void main(String[] args) throws IOException {
Document doc = Jsoup.connect("http://v.qq.com/x/list/movie").get();
Elements list = doc.select("li.list_item");
for(Element e : list){
// 標題
String title = e.select("img").attr("alt");
// 前置圖片
String imgPreUrl = e.select("img").attr("src");
// 圖片
String imgUrl = e.select("img").attr("r-lazyload");
// 描述
String context = e.select("span.figure_info").html();
// 主演
String castsStr = "";
Elements castsEs = e.select("div.figure_desc");
for(Element castsE : castsEs){
castsStr += castsE.select("a").html().replaceAll("\r|\n", " ");
}
// 評分
String averageStr = "";
Elements averageEs = e.select("div.figure_score");
for(Element averageE : averageEs){
averageStr += averageE.select("em").html().replaceAll("\r|\n", "");
}
System.out.println(averageStr+" "+castsStr+" "+title+" " + imgPreUrl +" " +imgUrl+" "+context);
}
}
}
結果返回: