Android利用爬虫实现模拟登录的实现实例

为了用手机登录校网时不用一遍一遍的输入账号密码,于是决定用爬虫抓取学校登录界面,然后模拟填写本次保存的账号、密码,模拟点击登录按钮。实现过程折腾好几个。
一开始选择的是htmlunit解析登录界面html,在pc上测的能实现,结果在android上运行不起来,因为htmlunit利用了javax中的类实现的解析,android不支持javax,所以就跑不起来。
不过pc还是ok的
实例代码:
package com.yasin;
import java.io.IOException;
import java.net.MalformedURLException;
import java.net.URL;
import java.util.List;
import org.junit.Test;
import com.gargoylesoftware.htmlunit.BrowserVersion;
import com.gargoylesoftware.htmlunit.WebClient;
import com.gargoylesoftware.htmlunit.html.HtmlForm;
import com.gargoylesoftware.htmlunit.html.HtmlInput;
import com.gargoylesoftware.htmlunit.html.HtmlPage;
import com.gargoylesoftware.htmlunit.html.HtmlPasswordInput;
import com.gargoylesoftware.htmlunit.html.HtmlSubmitInput;
import com.gargoylesoftware.htmlunit.html.HtmlTextInput;
public class AutoLogin {
String url = "http://172.16.10.3/";
@Test
public void run(){
try{
WebClient webClient = new WebClient(BrowserVersion.CHROME);
//htmlunit 对css和javascript的支持不好,所以请关闭之
webClient.getOptions().setJavaScriptEnabled(false);
webClient.getOptions().setCssEnabled(false);
HtmlPage page = (HtmlPage)webClient.getPage(url);
List<HtmlForm> forms = page.getForms();
HtmlForm form = forms.get(0);
HtmlTextInput name = form.getInputByName("DDDDD");
name.setValueAttribute("/*填写你的账号*/");
HtmlPasswordInput pass = form.getInputByName("upass");
pass.setValueAttribute("/*你的密码*/");
HtmlSubmitInput ok = form.getInputByName("0MKKey");
System.out.println(pass.toString());
ok.click();
}catch(Exception e){
System.out.println(e.toString());
}
}
}
于是接着调研,发现利用jsoup可以在android运行起来,不过这个库能抓取网页中的内容,也能进行赋值操作,但不支持模拟点击事件,网上有好多例子,是利用第一次访问获取cookie,然后把账号密码再给Post到服务器,完成模拟登陆。可以我们的校网竟然没有使用cookie,于是我只能抓包看看post的data有什么,然后把data直接通过post发送,不过不知道我们校网密码的加密的方式,所以填写密码需要先去抓包,抓到自己账号的密文,然后放到data中直接发送。成功了!
核心代码:
public void login() throws IOException{
Map<String,String> datas = new HashMap<String,String>();
Connection con = Jsoup.connect("http://172.16.10.3/");
con.header("User-Agent", "Mozilla/5.0 (Windows NT 6.1; WOW64; rv:29.0) Gecko/20100101 Firefox/29.0");//配置模拟浏览器
Response rs= con.execute();//获取响应
Document doc = Jsoup.parse(rs.body());
datas.put("DDDDD", "/*自己的账号*/");
datas.put("upass", "/*自己密码的密文,需抓包获取*/");
datas.put("R1", "0");
datas.put("R2", "1");
datas.put("0MMKey", "123456");
System.out.println(datas.toString());
Connection con2=Jsoup.connect("http://172.16.10.3/");
con2.header("User-Agent", "Mozilla/5.0 (Windows NT 6.1; WOW64; rv:29.0) Gecko/20100101 Firefox/29.0");
//设置cookie和post上面的map数据.cookies(rs.cookies())
Response login=con2.ignoreContentType(true).method(Method.POST).data(datas).execute();
Message msg = new Message();
msg.what = 1;
mHandler.sendMessage(msg);
}
抓包方式:
点击登录后快速停止监听,获取form data,然后把data中的值填上就好了。
总的来说,如果只是单纯抓取网页内容android这一块利用jsoup还是能实现的,但不支持按钮的点击操作;Htmlunit API更好用,也能模拟点击事件,不过javax android并不支持,但服务器还是可以用来抓取数据的。
如有疑问请留言或者到本站社区交流讨论,感谢阅读,希望能帮助到大家,谢谢大家对本站的支持!
# Android
# 爬虫
# 爬虫实现模拟登录
# 爬虫的应用
# Android编写简单的网络爬虫
# Android抓取CSDN首页极客头条内容完整实例
# 也能
# 一遍
# 但不
# 自己的
# 的是
# 有什么
# 这一
# 如有
# 不起来
# 希望能
# 用手
# 不支持
# 我只能
# 谢谢大家
# 好用
# 好几个
# 抓到
# 就跑
# 可以用来
# 再给
相关文章:
详解免费开源的.NET多类型文件解压缩组件SharpZipLib(.NET组件介绍之七)
如何自己制作一个网站链接,如何制作一个企业网站,建设网站的基本步骤有哪些?
如何在Golang中使用encoding/gob序列化对象_存储和传输数据
想学网站制作怎么学,建立一个网站要花费多少?
图片制作网站免费软件,有没有免费的网站或软件可以将图片批量转为A4大小的pdf?
自助网站制作软件,个人如何自助建网站?
如何在橙子建站中快速调整背景颜色?
建站之星在线客服如何快速接入解答?
已有域名和空间如何搭建网站?
Python如何创建带属性的XML节点
ppt在线制作免费网站推荐,有什么下载免费的ppt模板网站?
魔方云NAT建站如何实现端口转发?
如何快速生成橙子建站落地页链接?
建站ABC备案流程中有哪些关键注意事项?
如何在Tomcat中配置并部署网站项目?
如何确保西部建站助手FTP传输的安全性?
如何用IIS7快速搭建并优化网站站点?
如何在腾讯云服务器上快速搭建个人网站?
制作网站的软件免费下载,免费制作app哪个平台好?
如何处理“XML格式不正确”错误 常见XML well-formed问题解决方法
网站制作员失业,怎样查看自己网站的注册者?
建站之星安装需要哪些步骤及注意事项?
电影网站制作价格表,那些提供免费电影的网站,他们是怎么盈利的?
微网站制作教程,我微信里的网站怎么才能复制到浏览器里?
成都网站制作公司哪家好,四川省职工服务网是做什么用?
西安市网站制作公司,哪个相亲网站比较好?西安比较好的相亲网站?
如何在云虚拟主机上快速搭建个人网站?
历史网站制作软件,华为如何找回被删除的网站?
c# 在ASP.NET Core中管理和取消后台任务
建站之星后台管理系统如何操作?
台州网站建设制作公司,浙江手机无犯罪记录证明怎么开?
建站DNS解析失败?如何正确配置域名服务器?
专业企业网站设计制作公司,如何理解商贸企业的统一配送和分销网络建设?
早安海报制作网站推荐大全,企业早安海报怎么每天更换?
广州网站建站公司选择指南:建站流程与SEO优化关键词解析
制作网站公司那家好,网络公司是做什么的?
c++ stringstream用法详解_c++字符串与数字转换利器
建站之星下载版如何获取与安装?
建站主机与虚拟主机有何区别?如何选择最优方案?
rsync同步时出现rsync: failed to set times on “xxxx”: Operation not permitted
家庭建站与云服务器建站,如何选择更优?
建站之星24小时客服电话如何获取?
网站制作的软件有哪些,制作微信公众号除了秀米还有哪些比较好用的平台?
青浦网站制作公司有哪些,苹果官网发货地是哪里?
个人网站制作流程图片大全,个人网站如何注销?
网站设计制作企业有哪些,抖音官网主页怎么设置?
制作表格网站有哪些,线上表格怎么弄?
如何破解联通资金短缺导致的基站建设难题?
如何通过虚拟机搭建网站?详细步骤解析
网站广告牌制作方法,街上的广告牌,横幅,用PS还是其他软件做的?
*请认真填写需求信息,我们会在24小时内与您取得联系。