前端抓手机抓包可以看页面样式吗

author author     2023-05-04     699

关键词:

时隔 3 年,重新接触了移动端 h5 页面开发,上一次还是大四实习。这一次是 hybrid 开发,涉及到 h5 页面与原生 app 的交互,h5 页面需要与原生打通登录态,以及调用原生app 的接口,比如调用原生相机进行二维码扫描。跟微信小程序开发不同,本地开发时微信有提供微信开发者工具,可以本地模拟调用而我这边需要每次都打包静态文件,上传服务器才能调试,非常麻烦。

能不能在原生 app 加载线上 h5 时,跑本地的代码呢?答案是可以的,通过抓包工具比如 whistle 就可以做到拦截线上页面请求数据,再响应本地代码,本文主要讲述抓包的原理和抓包工具 whistle 使用。

1. 抓包的原理
1.1 什么是抓包?
抓包就是将网络传输发送与接收的数据包进行截获、重发、编辑、转存等操作,通过抓包可以:

分析网络问题

业务分析

分析网络信息流通量

网络大数据金融风险控制

探测企图入侵网络的攻击

探测由内部和外部的用户滥用网络资源

探测网络入侵后的影响

监测链接互联网宽频流量

监测网络使用流量(包括内部用户,外部用户和系统)

监测互联网和用户电脑的安全状态

渗透与欺骗

...

回顾下计算机网络知识,数据在网络上是以很小的帧的单位传输的,帧通过特定的称为网络驱动程序的程序进行成型,然后通过网卡发送到网线上,通过网线到达目的机器,在目的机器的一端执行相反的过程。接收端机器的以太网捕获到这些帧,并告诉操作系统帧已到达,然后对其进行存储。在这个传输和接收的过程,就可以使用抓包工具(Sniffers)进行抓包,作为前端开发者,通常是抓取应用层的 HTTP/HTTPS 的包。



1.2 HTTP/HTTPS 抓包原理
HTTP/HTTPS 是应用层使用的通信协议,常见的应用层体系结构是客户端-服务器体系。

对运行在不同端系统上的客户端程序和服务端程序是如何互相通信的么?实际上,在操作系统上的术语中,进行通信的实际上是进程而不是程序,一个进程可以被认为是运行在端系统中的一个程序。

在 web 应用程序中,一个客户浏览器进程与一台服务器进程进行会话交换报文。

浏览器进程需要知道接收进程的主机地址,以及定义在目的主机中的接收进程的标识符,也就是目的端口。

多数应用程序由通信进程对组成,每对中的两个进程互相发送报文。进程通过一个称为套接字的软件接口向网络发送报文和从网络接收报文。

进程可以类比一座房子,而它的套接字可以是它的门,套接字是应用层与运输层之间的端口。



知道了两个进程的通信流程,我们要怎么抓包呢?举一个生活中的例子,小明暗恋小雯,于是他写了一封情书,但他有点害羞,找了小雯的好朋友小花帮忙传递情书。这个时候,小花可以负责小雯与小明之间的情书传递,作为中间人,她可以偷偷查看他们的情书内容。

思路就是设置一个中间人进程负责抓包,每次目标进程之间的会话都先与中间人进程通信,再进行转发。



1.2.1 HTTP 抓包原理
在 http 标准中,没有对通信端身份验证的标准。对于服务器来说,它接收的 HTTP 请求报文只要格式符合规范,就发送响应报文。

对于客户端来说也是如此,它无法校验服务器的身份,比如它连接的 http://www.jecyu.com 的主机,但由于中间节点的存在,最终连接的可能是 http://www.jerry.com 的主机。

因此,对于 HTTP 抓包,无需做过多的处理,只需要让中间人负责转发客户端和服务端的数据包。

1.2.2 HTTPS 抓包原理
HTTP 是明文传输,容易受到中间人攻击,不安全。

HTTPS 语义仍然是 HTTP,只不过是在 HTTP 协议栈中 http 与 tcp 之间插入安全层 SSL/TSL。

安全层采用对称加密的方式加密传输数据和非对称加密的方式来传输对称密钥,解决 http 数据没有加密、无法验证身份、数据容易纂改三个核心问题。

HTTP + 加密 + 认证 + 完整性保护 = HTTPS

其中验证身份问题是通过验证服务器的证书来实现的,证书是第三方组织(CA 证书签发机构)使用数字签名技术管理的,包括创建证书、存储证书、更新证书、撤销证书。



浏览器连接至一个 HTTPS 网站,服务器发送的不仅仅只是服务器实体证书,而是一个证书链,但不包含根证书,根证书会被内嵌在 Windows, Linux, macOS, Android, iOS 这些操作系统里。



其中校验证书分为两步,证书的签发者校验和服务器实体证书校验

1、证书链校验:

1.1 浏览器从服务器实体证书的上一级证书(比如 B 证书)获取公钥,用来校验服务器实体证书的签名(签名是通过 CA 机构的私钥签名的),校验成功则继续,否则证书校验失败。

1.2 浏览器从 B 证书的上一级证书(比如 C 证书)获取公钥,用来校验 B 证书的签名,

校验成功则继续,否则证书校验失败。

1.3 浏览器迭代校验每张证书的签名,最后会找到自签名的根证书(签发者和使用者是同一个人),由于浏览器已经集成了根证书,可以充分信任根证书的公钥,完成最后的签名。
2、服务器实体证书校验:访问的域名信息是否与证书一致、日期、证书扩展校验等。

了解完证书校验后,我们来看看具体的 https 通信流程:

首先是 tcp 的三次握手建立连接

接着是非对称加密的握手过程

client 发送随机数 random1 + 支持的加密算法集合

server 收到信息,返回选择的一个加密算法+ 证书 (包含S_公钥) + random2

client 验证证书有效性,并用 random1 + random2 生成 pre-master-secure,通过服务端公钥加密发送给 server

server 收到 pre-master-secure,根据约定的算法使用S_私钥对 pre-master-secure 解密,

然后用加密算法生成 master-secure(对称加密的密钥),然后发送给 client

client 收到生成的 master-secure,对称加密密钥传输完毕

最后,就可以使用 master-secure 进行真正的数据对称加密传输。

中间人想要抓包,需在 HTTPS 加密通信之前:

截取客户端发送的包含证书的报文,伪装成服务端,把自己的证书发给客户端,然后拿到【客户端返回的包含对称加密通信密钥的报文】,生成中间人与客户端对称加密的密钥。

同样伪装成客户端,以服务端自己的非对称公钥加密【客户端返回的包含对称加密通信密钥的报文】发给服务端,获得服务端生成的对称加密密钥。

这样一来,加密通信建立完成,而中间人拿到了通信的数据密钥,可以查看、修改 HTTPS 的通信报文。

这里客户端与中间人通信、中间人与服务端通信,都是正常建立了 HTTPS 加密连接的。



其中很重要的一步是浏览器的根证书校验,CA 机构不可能随便给一个中间人签发不属于它的域名证书,也就不在客户端的操作系统上了,因此只能把中间人的根证书,导入到客户端的操作系统了,以此完成建立加密通信时对中间人证书的验证。

1.3 电脑如何抓手机的包
要想通过电脑端获取手机 Web 应用的数据包,根据前面所学,就需要中间人策略。

PC 端建立一个服务器中间人进程,伪装为 web 应用的目标服务器。手机端 web 应用发送的请求数据先经过中间人,中间人进行拦截处理再发送给目标服务器。反过来,目标服务器发送的数据包先通过中间人,再由中间人响应给浏览器客户端。

这里要注意的是,无论是个人电脑PC,还是移动端手机,都需要接入互联网网络,可以相互找到对方才能建立通信。

一般对开发来说,个人电脑本地起的服务器进程,在公网上是访问不到的。一般是无线局域网,个人电脑与手机端连接同一个路由器发出的 Wi-Fi,就可以相互通信。



具体步骤:

在 PC 电脑本地起一个服务器进程,监听一个端口比如 8899

在手机上连接同一个局域网,配置网络代理,指向 PC 端的 IP 地址和 8899 端口

这样一来,手机上所有的网络通信都会被先转发到 PC 端的 8899 端口,就可以对数据包进行分析处理

拿访问 youtuBe 来说,比如电脑已经使用【服务器软件】成功访问,此时只要手机配置代理指向电脑 ip 地址和指定端口,手机就可以同样访问 youtuBe了。

2. 抓包工具 whistle
2.1 whistle 是什么
Whistle 是基于 Node 实现的跨平台抓包免费调试工具,其主要特点:

1、完全跨平台:支持 Mac、Windows 等桌面系统,且支持服务端等命令行系统

2、功能强大:

支持作为 HTTP、HTTPS、SOCKS 代理及反向代理

支持抓包及修改 HTTP、HTTPS、HTTP2、WebSocket、TCP 请求

支持重放及构造 HTTP、HTTPS、HTTP2、WebSocket、TCP 请求

支持设置上游代理、PAC 脚本、Hosts、延迟(限速)请求响应等

支持查看远程页面的 console 日志及 DOM 节点

支持用 Node 开发插件扩展功能,也可以作为独立 npm 包引用

3、操作简单

直接通过浏览器查看抓包、修改请求

所有修改操作都可以通过配置方式实现(类似系统 Hosts),并支持分组管理

项目可以自带代理规则并一键配置到本地 Whistle 代理,也可以通过定制插件简化操作

如何快速使用 whistle

先安装 node,建议用 nvm 管理

全局安装 whistle

1

npm i -g whistle & w2 start

安装后,可以在电脑上设置全局代理,代理的端口为 8899.

1

2

3

w2 proxy // 设置全局代理

w2 proxy off // 关闭全局代理

就可以通过浏览器访问 http://127.0.0.1:8899/ 查看抓包、修改请求等。



如果你不想使用全局代理,就可以安装 SwitchyOmega 插件,按需对某些网站设置 whistle 代理。

选择 Whistle 代理



设置 Whistle 代理



2.2 whistle 可以做的事情
whistle 可以做的事情很多,以下是官网图:



一些例子配置如下图所示:



3. whistle 实战案例
3.1 原生 app 加载 PC本地代码开发
在原生 app 上已经通过 h5 域名加载了 web 页面,但是本地开发时不想每次都走流水线或本地打包上传代码。

需要把原生 app 的请求代理到本地服务器上来,前提条件是 wifi 手机与电脑可相互访问,也就是前面提到的电脑抓 pc 的包。

因为我的 web 服务端是 https 应用,因此需要下载 whistle 提供的根证书,手动导入到手机上。

点击 HTTPS 菜单,然后使用手机扫描二维码,使用手机浏览器打开即可下载,在手机证书中设置进行导入并且设置信任。



此时,再在手机上配置代理指向 PC 电脑的 IP和 whistle 监听的端口即可在电脑上截获数据包。

我本地webpack 启动的服务器应用访问地址为:xxx.xxx.xxx.xxx:8080

whistle 的配置规则:

1

2

3

4

5

6

7

8

9

# Rules

# 访问首页走本地

jecyu.com/webs/short-transport http://xxx.xxx.xxx.xxx:8080?deptCode=755DL # 首页路径

# 后续的请求都使用本地代码

jecyu.com http://xxx.xxx.xxx.xxx:8080?deptCode=755DL

其中试过在原生 app 访问本地应用时出现错误“ webpack 会提示 invalid host header”,解决方案是在 devServer 配置添加即可:

1

2

3

4

5

devServer:

allowedHosts: 'all',



至此,成功让原生 app 访问PC 端本地的开发代码。

3.2 查看移动端的 DOM 样式
Whistle 能够通过内置的 Weinre 去实现查看移动端的 DOM 样式,配置规则如下

1

2

3

# 设置 weinre

https://juejin.cn weinre://test

手机上重新访问 juejin.cn 网站,然后打开 weinre 可以看到如下,绿色表示远程连接成功
参考技术A 抓包就是将网络传输发送与接收的数据包进行截获、重发、编辑、转存等操作,通过抓包可以:

分析网络问题

业务分析

分析网络信息流通量

网络大数据金融风险控制

探测企图入侵网络的攻击

探测由内部和外部的用户滥用网络资源

探测网络入侵后的影响

监测链接互联网宽频流量

监测网络使用流量(包括内部用户,外部用户和系统)

监测互联网和用户电脑的安全状态

渗透与欺骗

...

回顾下计算机网络知识,数据在网络上是以很小的帧的单位传输的,帧通过特定的称为网络驱动程序的程序进行成型,然后通过网卡发送到网线上,通过网线到达目的机器,在目的机器的一端执行相反的过程。接收端机器的以太网捕获到这些帧,并告诉操作系统帧已到达,然后对其进行存储。在这个传输和接收的过程,就可以使用抓包工具(Sniffers)进行抓包,作为前端开发者,通常是抓取应用层的 HTTP/HTTPS 的包

手机抓包fiddle4的安装及配置

抓手机包可以用的是fiddle。安装先在下载页面下载--->DownloadFiddlerWebDebuggingToolforFreebyTelerik选择你“准备用fiddle来干嘛”你的邮箱以及同意“最终用户许可协议”就可以下载了下载后按照提示安装就可以了。配置点... 查看详情

2-1如何抓不同的接口(手机抓包,web网页抓包)

...台的接口错误。这个时候就需要接口测试了。1.如何抓取手机 查看详情

软件不能代理http怎么抓包

参考技术Afiddler可以为pc开启http代理服务,之后在手机网络中配置代理。然后fiddler就可以进行抓包。详细情况,可网络搜索“使用Fiddler代理调试本地手机页面”本回答被提问者采纳 查看详情

手机抓包工具-fiddler

...可以使用httpdump以及tcpdump这样的工具抓取相应的数据包,手机上要调试一些问题就一眼摸瞎,不知道该用什么工具。本文就来介绍一下手机抓包工具Fiddler。首先下载Fiddler,并且注册他的账号,该工具是免费的,无需授权。下载... 查看详情

charles抓包工具常用功能——https抓包接口——iosiphone手机抓包

...—LocalIPAddress;1.2记住这个电脑端的IP地址二、打开iPhone手机进行HTTP代理,配置代理2.1打开iPhone手机,点击设置——无线局域网2.2进入无线局域网页面后,往下滑,找到HTTP代理——配置代理项,点击配置代理2.3进入配置代理页面... 查看详情

应用抓包之fiddler抓包

...程序既然是代理,客户端的所有请求都要先经过Fiddler3.让手机和PC处于同一网络下(连同一WiFi或同一网段即可)查看PC的IP地址4.到开手机WiFi设置进入WiFi详细信息(不同手机选项可能不同)手动设置代理(用的手机在高级设置里... 查看详情

测试:进入某个页面显示内容错误,如何定位是前端还是后端问题?

朋友您好,进入某个页面显示内容错误,定位是前端问题还是后端问题,其实很简答。将后端的日志等级调低,当页面显示内容错误的时候,可以看一下后端日志有没有报错;其次,如果你是研发人员的话,可以debug或者将页面... 查看详情

一步一步教你https抓包

...,安装不了需要翻一下墙首先需要配置一下网络环境,将手机和电脑连在同一个wifi环境下,然后进入手机的设置-无线局域网,点击当前连接的wifi进入详情设置页面,在http代理那一栏输入当前连接的ip地址,端口填8080,这个ip地... 查看详情

android利用fiddler进行抓包详解教程。抓取接口以及数据,可以抓真实安卓手机或者模拟器。

...介绍。我这里演示的是fiddler+天天模拟器,当然真实安卓手机也是一样的。而且也可以观察自己pc电脑的数据。如果抓安卓手机的数据,手机建议连接自己电脑的无线网。因为fiddler只是一个代理,需要将手机的代理指向PC机,不... 查看详情

fiddler手机抓包有啥用

参考技术Afiddler手机抓包有什么用:cr173.37625_1.上面为Fiddler对安卓应用手机抓包图文教程fiddlerapp抓包有什么用在做手机或移动端APP的介面测试时,需要从开发人员那里获取介面文件,介面文件应该包括完整的功能介面、介面请求... 查看详情

手机抓包的两种方法:wireshark抓包和fiddler抓包

1、电脑做wifi热点,手机连上后电脑上使用wireshark抓包该方法手机无须root,并且适用于各种有wifi功能的手机(IOS、android等)、平板等。只要电脑的无线网卡具有无线承载功能,就可以。方法如下:1.把电脑的网络做为热点2.开启... 查看详情

fiddler怎么抓包手机

我最近在群里面看很多人问fiddler怎么抓手机的包,那就写一个吧第一步打开Tools,点击options 然后按如下设置就可以了,询问是否安装证书点yes      设置好后在手机wifi里设置代理ip  代理主机名... 查看详情

charles手机抓包

...请求代理设置打开Charles后将它设置成代理服务器,这样手机上访问app的时候就可以监听网络请求。想要解决手机上面的网络抓包还需要一些设置,在Charles菜单栏上选择Proxy->ProxySettings,填写代理端口8888,并且勾选启动代理。... 查看详情

如何通过使用fiddler对android系统设备抓包总结

1.通过fiddler抓包真机好处是安卓手机不用root,简单设置代理,并可以在电脑端检测抓包数据。只能抓获wifi,不同抓包3g/2g运营商的数据2.通过tcpudmp工具抓包可以检测真机,也可以模拟器。可以wifi,也可以3g/2g必须root,可以安装... 查看详情

通过fiddler进行手机抓包

通过Fiddler进行手机抓包通过Fiddler抓包工具,可以抓取手机的网络通信,但前提是手机和电脑处于同一局域网内(WI-FI或热点),然后进行以下设置:用Fiddler对Android应用进行抓包打开Fiddler设置     在Connections里... 查看详情

whistle手机抓包

环境:whistle:1.14.6whistle手机抓包以安卓手机为例手机跟电脑要连同一个wifi。1.启动whistle使用w2start启动whistle。退出cmd后,whistle自动关闭了,所以每次使用whistle,需要启动whistle,不然提示w2命令无法使用。2.安装证书电脑打开浏... 查看详情

为啥抓包都用夜神模拟器

...行抓包,很多时候是在pc端浏览器中进行,有时候需要对手机进行抓包。由于抓包时电脑和手机必须处于同一网络下,使用笔记本时还没有什么限制,台式电脑的话,这时候就需要用到无线网卡。在没有无线网卡的情况下,怎么... 查看详情

ios开发用charles进行抓包的方法

...漂亮的青花瓷。  现在,我们需要将我们的电脑配置成手机的.代理服务器,这样才能让我们的MAC顺利的拦截到手机软件的网络接口。我们先看一下自己的电脑ip。  在系统偏好设置-->网络-->查看当前IP。  然后我们来... 查看详情