V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
推荐学习书目
Learn Python the Hard Way
Python Sites
PyPI - Python Package Index
http://diveintopython.org/toc/index.html
Pocoo
值得关注的项目
PyPy
Celery
Jinja2
Read the Docs
gevent
pyenv
virtualenv
Stackless Python
Beautiful Soup
结巴中文分词
Green Unicorn
Sentry
Shovel
Pyflakes
pytest
Python 编程
pep8 Checker
Styles
PEP 8
Google Python Style Guide
Code Style from The Hitchhiker's Guide
saximi
V2EX  ›  Python

写爬虫时用什么工具可以方便地抓取报文的内容呢?

  •  
  •   saximi · 2017-09-08 00:17:04 +08:00 · 3289 次点击
    这是一个创建于 2659 天前的主题,其中的信息可能已经有所发展或是发生改变。
    不知有什么好工具便于抓取每次交互的实际报文内容,以及哪里可以下载到,感谢指点!
    13 条回复    2017-09-09 01:10:02 +08:00
    changwei
        1
    changwei  
       2017-09-08 00:32:33 +08:00 via Android
    wireshark
    param
        2
    param  
       2017-09-08 01:20:51 +08:00 via Android
    @changwei 有没有办法让 Wireshark 抓手机上的 HTTPS 并解密,我知道 Charles 可以
    akira
        3
    akira  
       2017-09-08 01:52:46 +08:00
    @param fiddle 不过你要自己去谷歌下怎么配置 https
    param
        4
    param  
       2017-09-08 02:13:48 +08:00 via Android
    @akira fiddle 没有 Linux 版
    akira
        5
    akira  
       2017-09-08 03:07:14 +08:00
    @param linux 不熟悉 帮不到你了
    mlyy
        6
    mlyy  
       2017-09-08 07:29:46 +08:00
    charles
    15015613
        7
    15015613  
       2017-09-08 08:29:58 +08:00 via Android
    @param
    fiddle 可以运行在 Linux 下的。
    https://aur.archlinux.org/packages/fiddler/
    你可以看看这个 aur 仓库。
    fuxkcsdn
        8
    fuxkcsdn  
       2017-09-08 08:55:44 +08:00 via iPhone
    @15015613 linux 的不清楚,mac 版的 fiddler 卡到爆
    u5f20u98de
        9
    u5f20u98de  
       2017-09-08 09:05:38 +08:00
    burpsuite,装个 java 就行
    15015613
        10
    15015613  
       2017-09-08 09:06:32 +08:00 via Android
    @fuxkcsdn
    我用的 aur 里的 fiddle,并没有卡顿的情况。
    就是界面丑的要死,字小的不得了。
    不过使用还是没有什么问题的。
    dsg001
        11
    dsg001  
       2017-09-08 09:14:18 +08:00
    普通抓包用 httpfox,ff 的扩展简单好用
    负载一点的用 burpsuite,方便各种调试修改
    runningman
        12
    runningman  
       2017-09-08 14:08:42 +08:00
    太多了。charles
    zhilincom
        13
    zhilincom  
       2017-09-09 01:10:02 +08:00 via Android
    我觉得一般情况下一个 Chrome 内核的浏览器就够了,直接 F12。
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   1197 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 28ms · UTC 23:21 · PVG 07:21 · LAX 15:21 · JFK 18:21
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.