V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX 提问指南
wuxi889
V2EX  ›  问与答

[不懂就问] 为什么 Shopify 这个站的统计可以忽略来自 Postman 的请求

  •  
  •   wuxi889 · 2021-06-24 09:18:06 +08:00 · 2109 次点击
    这是一个创建于 1281 天前的主题,其中的信息可能已经有所发展或是发生改变。

    在一家外贸企业上班,碰到一个不懂的问题就是为什么 Shopify 这个站的统计可以忽略来自 Postman爬虫 的请求,他不是通过 UA 来判断的,那么他是通过什么原理来统计访客的呢?

    8 条回复    2021-06-24 13:37:59 +08:00
    zenxds
        1
    zenxds  
       2021-06-24 09:22:57 +08:00
    postman 的请求会在 HTTP 头里加一个 Postman-Token,可以在 postman 里面点 code,里面会有各种代码示例里可以看到
    wuxi889
        2
    wuxi889  
    OP
       2021-06-24 09:41:17 +08:00
    @zenxds 那爬虫的请求如何屏蔽呢,就是非搜索引擎的那种爬虫
    wuxi889
        3
    wuxi889  
    OP
       2021-06-24 09:41:40 +08:00
    @zenxds 不是屏蔽爬虫访问,而是去记录爬虫的信息
    LxExExl
        4
    LxExExl  
       2021-06-24 10:01:44 +08:00
    所以楼主是要刷访问嘛
    pkoukk
        5
    pkoukk  
       2021-06-24 10:19:27 +08:00
    selenium 这样的也能屏蔽?
    如果不能,说明就是前端加了什么 token 。
    如果能,那就超出我的知识范围了
    ferrum
        6
    ferrum  
       2021-06-24 10:21:38 +08:00
    看它怎么统计的,有可能是用 JavaScript 访问 API 进行统计的,这样不渲染页面的访问记录就不算。
    zenxds
        7
    zenxds  
       2021-06-24 11:54:13 +08:00
    @wuxi889 规范一点的爬虫框架也会在请求头里加上特殊的标识的
    wuxi889
        8
    wuxi889  
    OP
       2021-06-24 13:37:59 +08:00
    @LxExExl 只是想弄明白他的实现,主要是交流,你懂的
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   5518 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 22ms · UTC 07:06 · PVG 15:06 · LAX 23:06 · JFK 02:06
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.