数据篇| App爬虫入门(一)
App 的爬取相比 Web 端爬取更加容易,反爬虫能力没有那么强,而且数据大多是以 JSON 形式传输的,解析更加简单。在 Web 端,我们可以通过浏览器的开发者工具监听到各个网络请求和响应过程,在 App 端如果想要查看这些内容就需要借助抓包软件。常见抓包软件有:
工具名称 | 简介 | 官网地址 |
Wireshark | 跨平台网络协议分析工具,支持上千种协议,可深度解析网络流量细节,适用于网络排障和安全分析 | Wireshark · Go Deep |
Fiddler | 支持 HTTP/HTTPS 的调试工具,提供请求模拟、断点调试等功能,早期仅支持 Windows,现有跨平台版本(Fiddler Everywhere) | Web Debugging Proxy and Troubleshooting Tools | Fiddler</ |