[不懂就问] 为什么 Shopify 这个站的统计可以忽略来自 Postman 的请求

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

V2EX 提问指南

这是一个创建于 1256 天前的主题，其中的信息可能已经有所发展或是发生改变。

在一家外贸企业上班，碰到一个不懂的问题就是为什么 Shopify 这个站的统计可以忽略来自 Postman 或 爬虫 的请求，他不是通过 UA 来判断的，那么他是通过什么原理来统计访客的呢？

8 条回复 • 2021-06-24 13:37:59 +08:00

zenxds

2021-06-24 09:22:57 +08:00

postman 的请求会在 HTTP 头里加一个 Postman-Token，可以在 postman 里面点 code，里面会有各种代码示例里可以看到

wuxi889

2021-06-24 09:41:17 +08:00

@zenxds 那爬虫的请求如何屏蔽呢，就是非搜索引擎的那种爬虫

wuxi889

2021-06-24 09:41:40 +08:00

@zenxds 不是屏蔽爬虫访问，而是去记录爬虫的信息

LxExExl

2021-06-24 10:01:44 +08:00

所以楼主是要刷访问嘛

pkoukk

2021-06-24 10:19:27 +08:00

selenium 这样的也能屏蔽？
如果不能，说明就是前端加了什么 token 。
如果能，那就超出我的知识范围了

ferrum

2021-06-24 10:21:38 +08:00

看它怎么统计的，有可能是用 JavaScript 访问 API 进行统计的，这样不渲染页面的访问记录就不算。

zenxds

2021-06-24 11:54:13 +08:00

@wuxi889 规范一点的爬虫框架也会在请求头里加上特殊的标识的

wuxi889

2021-06-24 13:37:59 +08:00

@LxExExl 只是想弄明白他的实现，主要是交流，你懂的