这是一个创建于 379 天前的主题，其中的信息可能已经有所发展或是发生改变。
- 需求：爬取封闭 APP 中的公开数据，比如微信内公众号的数据、朋友圈数据、美团内的商家数据等。
- 问题：这些数据场景的共同特征是无法通过 HTTPS 抓包的方式获取，且相关 APP 都没有开放可以爬取的 H5 页面，或 H5 版本的页面信息不足。
-
方案：
- 通过 Appium 抓取（方案待实践验证）；
- 通过自动脚本录屏后，由 AI 根据特征对进行视频内画面信息提取实现数据爬取（尚未发现此类工具）。
针对这两个方案，有建议或其他思路，恳请赐教。🌹🌹🌹
 |
1
q11391 2023-12-04 17:52:45 +08:00 via iPhone
怎么可能抓不了包
|
 |
2
Gilmty 2023-12-04 18:02:19 +08:00
微信 MMTLS ，美团 TCP
|
 |
4
x86 2023-12-04 18:07:18 +08:00
截屏再 ORC
|
 |
5
dapang1221 2023-12-04 18:40:53 +08:00
root 了么，用 frida 加 hook ，或者去内存里捞吧
|
 |
6
owen800q 2023-12-05 09:40:51 +08:00 via iPhone
@dapang1221 現在新的 app 大部分都是 flutter, 沒法用 frida hook dart
|
 |
7
ming61177 2023-12-05 10:45:31 +08:00
autoxjs + clip 技术
|
 |
8
luzihang 2023-12-05 15:55:57 +08:00  1
实现过，运行半年没什么问题。airtest+阿里云手机+百度飞桨 ocr+自己代码调度整体流程
|
 |
9
ahhhhhh888 OP @luzihang #8 这个不错，赞！
|
 |
10
capehorn 2023-12-06 03:16:39 +08:00
App 爬虫 Android 无障碍爬即可。 联系我 linode16
|
Select Language