V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX 提问指南
simadad
V2EX  ›  问与答

超出认知范围的视频 APP 反爬虫策略

  •  
  •   simadad · 2018-10-20 12:59:38 +08:00 · 2251 次点击
    这是一个创建于 2251 天前的主题,其中的信息可能已经有所发展或是发生改变。

    问题描述

    最近在练习爬虫技巧时遇到了一个十分棘手的视频 APP —— 移动电影院,在我有限的认知内,fiddlerXposedJustTrustMe等工具在面对这款 APP 时均告失败,有没有大神能花时间分析一下这款 APP 的反爬虫策略,指导一下我接下来该往哪个方向去尝试破解?

    已尝试过哪些方法

    1.fiddler 代理捕获 http 请求——无法获取视频资源 url ;

    猜测原因:视频请求地址为 https 加密地址;

    2.fiddler 代理伪造证书捕获 https 请求—— APP 响应 404

    猜测原因:证书不受信任;

    3.Charles 代理伪造证书捕获 https 请求—— APP 响应 404

    猜测原因:安卓 8.0 用户证书不被信任;

    4.Xposed + Android6.0 模拟器(mumu 模拟器) + JustTrustMe 模块绕过 SSL Pinning—— APP 闪退;

    猜测原因:APP 与模拟器版本不兼容

    5.Xposed + Android4.4 模拟器(夜神模拟器) + JustTrustMe 模块绕过 SSL Pinning——仍然无法捕获视频链接;

    猜测原因:视频请求使用的不是 tcp/http/https/WebSocket 等 fiddler 可以捕获到的常规协议???

    求助

    有没有大神能花时间分析一下这款 APP 的反爬虫策略,指导一下我接下来该往哪个方向去尝试破解?

    2 条回复    2018-10-20 19:51:56 +08:00
    wdv2ly
        1
    wdv2ly  
       2018-10-20 13:15:34 +08:00 via Android
    wireshark
    PulpFunction
        2
    PulpFunction  
       2018-10-20 19:51:56 +08:00 via iPhone
    他们的工程师应该也会看这里
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   1008 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 24ms · UTC 20:56 · PVG 04:56 · LAX 12:56 · JFK 15:56
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.