相比于强大的wireshark来说，Charles的功能算是十分局限了，因为Charles只能用于http/https的抓包。但是术业有专攻，Charles的体验比wiresharek好了好多倍。之所以最近要用到Charles，是因为wireshark的https抓包比较鸡肋，设置复杂，不同的电脑可能抓取不到想要的结果。所以我选择了Charles，当然是试用版啦，能试用30天，试用期以后能正常使用，不过每次试用不超过半小时，超过后不保存就退出了，有点儿恶心。WireShark的原理是监听网卡，而Charles的原理则是非常简单的设置代理。其主要的特点有:
- 抓取https和http，外观展示类似postman，十分详细并且结构化
- 能改变请求的内容
- 能改变响应的内容
- 能模拟弱网环境
- 能做压力测试
Charles的基本设置
- 点击菜单
Proxy -> Proxy Setting，设置Http代理
- 系统代理设置
- 安装Charles的证书: Help -> SSL Proxying -> Install Charles Root Certificate，安装证书，并完全信任该证书
- 虽然设置了ssl证书，但是默认并没有对每个请求开启https的抓取，还需要针对单独的请求进行选择，在请求上面右键选择
SSL Proxy: Enabled， 注意这里我不知道为什么，我在mac上右键的时候必须把键盘按下去才行
Charles抓取移动端设备iPhone过程
Mac上开启Wifi热点，或者连接到统一局域网
手机连接Mac的Wifi，在wifi详情的最下面设置http代理，代理地址即使路由地址，也即mac的地址
选择Help -> SSL Proxying -> Instanll Charles Root Certificate on a Mobile Device or Remote Browse。在移动端上面安装，下载后需要再设置APP里面搜索描述文件就能找到已下载的描述文件了然后点击安装即可
这样和mac端一样进行抓取。抓取示例:
TroubleShooting
- Charles的网络出现不可描述的问题: 关闭系统的其他代理，例如vpn和ss。
- 想要解开所有的HTTP/HTTPS请求？不可能的。:移动端不像web端，能够看到所有的源码。如果对post的data进行加密，即使是HTTP也不能解开。当然移动端也有apk包反编译的工具，但并不是每次都能成功，所以和web端爬虫更相似的一种万能方法是模拟真机操作。我的想法是使用安卓模拟器，然后在上面进行点击操作，这一点我正在试验。
