求一个实现思路

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

这是一个创建于 3397 天前的主题，其中的信息可能已经有所发展或是发生改变。

类似网站统计但并不同。
网页嵌入代码后自动或定时检测网站新生成的网址并提交给后端。

9 条回复 • 2015-07-31 16:26:53 +08:00

SergioChan

2015-07-31 10:11:17 +08:00

新生成网址？你希望收集站点下所有新生成的url么。。

nyfwan123

2015-07-31 10:25:55 +08:00

doublleft

2015-07-31 10:38:40 +08:00

我来提供一种思路：
既然你想要获得新出现的网址，那就要获得所有的网址（截获所有请求），这样当出现了新的网址，你也就能分析对比出来了。

nyfwan123

2015-07-31 11:23:21 +08:00

@doublleft 那前期是要先爬一遍网站吗？

comesx4

2015-07-31 12:34:55 +08:00

判断交给后端,你只要负责把当前的页面地址发送过去

nyfwan123

2015-07-31 12:58:27 +08:00

@comesx4 通过什么方式呢？

gamexg

2015-07-31 13:01:31 +08:00 via Android

你的网站还是你能控制的？
你的直接查log。
其他人的可以插Js,甚至插一个你网站的图片查Log引用地址。

nyfwan123

2015-07-31 13:05:10 +08:00

@gamexg 其他的网站，请问“甚至插一个你网站的图片查Log引用地址。”这个怎么实现，有例子吗请问？

SergioChan

2015-07-31 16:26:53 +08:00

例如Nginx通过服务端的accessLog来分析URL？