当前位置：首页 > article >正文

Java网络编程 - cookiesession

article 2024/11/25 8:10:51

cookie

之前学习了 Okhttp3 库可以调用API、抓取网页、下载文件。但是这些操作都是不要求登录的，如果 API、网页、文件等内容要求登录才能访问，就需要学习新的 cookie 相关的知识。

下面以豆瓣为例，使用 Java 程序读取“我的豆瓣”页面内容，在此过程中熟悉运用 cookie 。

所谓 cookie ，是存储在客户端浏览器中的一段文本内容。以 key=value （数据名称、数据值）的格式存储一条数据；多条数据之间用分号 ; （英文半角）分开。由于各种浏览器都对 cookie 大小和数量有限制，所以 cookie 目前的核心功能是存储登录数据；额外可以存储一些小数据，比如 是否登录=true;昵称=张三 这样的内容不大的数据。

InternetExplorer 限制 cookie 为每个域名 50 个，上限 4095 个字节。Firefox 每个域名 cookie 限制为 50 个，上限 4097 个字节。每种浏览器略有异同，但肯定都有限制。

1.前期准备

在浏览器输入 https://www.douban.com/mine 打开“我的豆瓣”页面。这个页面是必须登录的。

豆瓣登录

登录完成以后，可以正确看到“我的豆瓣”页面了。

我的豆瓣

注意：登录信息是存放在 cookie 里的

所以，必须先找到登录后的 cookie，这是完成 Java 程序的重要的前提条件。

2.找到 `cookie`

打开谷歌浏览器的开发者工具（使用谷歌浏览器），切换到 Network 菜单项，如下图：

对谷歌开发者工具不熟悉的，可以点击查看使用教程

豆瓣点赞登录

如果没有 mine ，就选第一个跟浏览器地址栏相同的 URL 请求

按照图中所示的四个步骤，把 cookie 的值（Cookie: 后的内容哦，不包括 Cookie:）拷贝下来，放入一个 cookie.txt 文件中。

cookie 的内容很长，而且看不懂。因为 cookie 中除了登录信息，还能放其它信息，大多是加密过的。但没关系，这些信息是给计算机看的。

我们需要编码把 cookie 信息字符串转换为 Map 类型的数据。

3.编码实现

实际上，程序我们前面练习过，就是使用 Okhttp3 库完成 get 请求而已。

上图中可以看到，浏览器在发送请求的时候，自动带上了 Host、User-Agent 内容哦。

这样所需的数据都已识别完毕，我们先看一下演示程序。系统提供了一个工具类，用于从 cookie.txt 文件读取内容。

举例：

Request request = new Request.Builder()
        .url(url)
        .addHeader("User-Agent", "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/78.0.3904.108 Safari/537.36")
        .addHeader("Referer", "https://www.douban.com/mine")
        .addHeader("Host", "www.douban.com")
        .addHeader("Cookie",ReadFileTool.readContent("cookie.txt"))
        .build();

session

之前已经学会了使用谷歌浏览器的开发者工具抓取到了登录的 cookie ，然后使用程序完成登录。

但 cookie 的弊端是，cookie 是存放在客户端浏览器的，而且是临时的，登录后还想以登录状态与服务器通讯，就比较麻烦。

这就需要在程序中使用 Session 对象来解决这个问题。下面我们通过模拟登录时光网来学会如何应用 Session 对象。

1.时光网登录

浏览器中输入http://www.mtime.com/ 打开时光网，点击右上角的登录按钮；

如果没有看到输入框，可以点击角落电脑图标切换：

弹出登录对话框。

时光网1

或者直接点此打开注册与登录页面，并点击“会员登录”

时光网2

2.收集信息

然后打开谷歌浏览器的开发者工具，如图所示，Preserve log 必须勾选。

关键点

输入用户名和密码后，在右侧抓取到的网络请求中，找到登录请求 API ：

https://front-gateway.mtime.com/user/user/login.api

时光网3

新版浏览器可能有一点不同

在“标头”后面多了一个“载荷”（Payload）的小菜单。

时光网3

切换到小菜单可以看到密码：

时光网3

需要收集的关键信息包括：

登录地址
执行方式（GET/POST）
HOST
Referer
User-Agent
表单数据，数据名称和数据值

3.编码实现

  // 用 CookieJar 实现 cookie 的存储，便于登录后请求其它 URL 可以复用
  private static final OkHttpClient okHttpClient = new OkHttpClient.Builder()
      .cookieJar(new CookieJar() {
        private final HashMap<String, List<Cookie>> cookieStore = new HashMap<>();

        @Override
        public void saveFromResponse(HttpUrl url, List<Cookie> cookies) {
          cookieStore.put("mtime.com", cookies);
          System.out.println("[saveFromResponse]url.host()=" + url.host());
        }

        @Override
        public List<Cookie> loadForRequest(HttpUrl url) {
          System.out.println("[loadForRequest]url.host()=" + url.host());
          List<Cookie> cookies = cookieStore.get("mtime.com");
          return cookies != null ? cookies : new ArrayList<>();
        }
      })
      .build();