Android利用爬蟲實現模擬登錄的實現實例
為了用手機登錄校網時不用一遍一遍的輸入賬號密碼,于是決定用爬蟲抓取學校登錄界面,然后模擬填寫本次保存的賬號、密碼,模擬點擊登錄按鈕。實現過程折騰好幾個。
一開始選擇的是htmlunit解析登錄界面html,在pc上測的能實現,結果在android上運行不起來,因為htmlunit利用了javax中的類實現的解析,android不支持javax,所以就跑不起來。
不過pc還是ok的
實例代碼:
package com.yasin;import java.io.IOException;import java.net.MalformedURLException;import java.net.URL;import java.util.List;import org.junit.Test;import com.gargoylesoftware.htmlunit.BrowserVersion;import com.gargoylesoftware.htmlunit.WebClient;import com.gargoylesoftware.htmlunit.html.HtmlForm;import com.gargoylesoftware.htmlunit.html.HtmlInput;import com.gargoylesoftware.htmlunit.html.HtmlPage;import com.gargoylesoftware.htmlunit.html.HtmlPasswordInput;import com.gargoylesoftware.htmlunit.html.HtmlSubmitInput;import com.gargoylesoftware.htmlunit.html.HtmlTextInput;public class AutoLogin { String url = "http://172.16.10.3/"; @Test public void run(){ try{ WebClient webClient = new WebClient(BrowserVersion.CHROME); //htmlunit 對css和javascript的支持不好,所以請關閉之 webClient.getOptions().setJavaScriptEnabled(false); webClient.getOptions().setCssEnabled(false); HtmlPage page = (HtmlPage)webClient.getPage(url); List<HtmlForm> forms = page.getForms(); HtmlForm form = forms.get(0); HtmlTextInput name = form.getInputByName("DDDDD"); name.setValueAttribute("/*填寫你的賬號*/"); HtmlPasswordInput pass = form.getInputByName("upass"); pass.setValueAttribute("/*你的密碼*/"); HtmlSubmitInput ok = form.getInputByName("0MKKey"); System.out.println(pass.toString()); ok.click(); }catch(Exception e){ System.out.println(e.toString()); } }}
于是接著調研,發現利用jsoup可以在android運行起來,不過這個庫能抓取網頁中的內容,也能進行賦值操作,但不支持模擬點擊事件,網上有好多例子,是利用第一次訪問獲取cookie,然后把賬號密碼再給Post到服務器,完成模擬登陸。可以我們的校網竟然沒有使用cookie,于是我只能抓包看看post的data有什么,然后把data直接通過post發送,不過不知道我們校網密碼的加密的方式,所以填寫密碼需要先去抓包,抓到自己賬號的密文,然后放到data中直接發送。成功了!
核心代碼:
public void login() throws IOException{ Map<String,String> datas = new HashMap<String,String>(); Connection con = Jsoup.connect("http://172.16.10.3/"); con.header("User-Agent", "Mozilla/5.0 (Windows NT 6.1; WOW64; rv:29.0) Gecko/20100101 Firefox/29.0");//配置模擬瀏覽器 Response rs= con.execute();//獲取響應 Document doc = Jsoup.parse(rs.body()); datas.put("DDDDD", "/*自己的賬號*/"); datas.put("upass", "/*自己密碼的密文,需抓包獲取*/"); datas.put("R1", "0"); datas.put("R2", "1"); datas.put("0MMKey", "123456"); System.out.println(datas.toString()); Connection con2=Jsoup.connect("http://172.16.10.3/"); con2.header("User-Agent", "Mozilla/5.0 (Windows NT 6.1; WOW64; rv:29.0) Gecko/20100101 Firefox/29.0"); //設置cookie和post上面的map數據.cookies(rs.cookies()) Response login=con2.ignoreContentType(true).method(Method.POST).data(datas).execute(); Message msg = new Message(); msg.what = 1; mHandler.sendMessage(msg); }抓包方式:

點擊登錄后快速停止監聽,獲取form data,然后把data中的值填上就好了。
總的來說,如果只是單純抓取網頁內容android這一塊利用jsoup還是能實現的,但不支持按鈕的點擊操作;Htmlunit API更好用,也能模擬點擊事件,不過javax android并不支持,但服務器還是可以用來抓取數據的。
如有疑問請留言或者到本站社區交流討論,感謝閱讀,希望能幫助到大家,謝謝大家對本站的支持!
新聞熱點
疑難解答