最近很多人问一键评教的一些细节，所以写一点在Java做爬虫程序的一些技术点。首先，什么是评教？教务系统神来之笔了一个评教系统，每门课程有大约6、7个评论选项，还要写评论，每学期课程大概有10门，最奇葩的是，如果没有完成评教请求其他的服务还会被自动拦截到评教页面，这也意味着完成这项工作耗费时间，至于对教学有没有实际作用就只有仁者见仁了。所以，在最新一版加入了自动评教功能。这篇主要说下通过OkHttp爬虫的一些细节。
如何保存保存Session？对于如何保存页面状态获取需要Session认证的方法，可以使用OkHttp的拦截器，当然，OKHttp提供了一个 CookieJar 的接口可以方便完成这个任务，这里示例是一个没有做持久化存储Cookie的示例。public class EPCookieJar implements CookieJar { private final HashMap<String, List<Cookie>> cookieStore = new HashMap<>(); @Override public void saveFromResponse(HttpUrl httpUrl, List<Cookie> list) { cookieStore.put(httpUrl.host(), list); } @Override public List<Cookie> loadForRequest(HttpUrl httpUrl) { List<Cookie> cookies = cookieStore.get(httpUrl.host()); return cookies != null ? cookies : new ArrayList<Cookie>(); }}
阅读全文…
