三个月前做了个免费开源的代理检测数据库,起因是自己的项目需要注册风控,没找到免费的离线数据库。CSV 格式的数据: https://github.com/NetworkCats/OpenProxyDB GitHub Actions 每天自动更新
与其它地理定位库结合的 MMDB 格式: https://github.com/NetworkCats/Merged-IP-Data 生产环境的话推荐用 MMDB ,完全是内存中查询的。
可以在这里在线查询数据库中的内容:ip.nc.gy 这个网站也是开源的,https://github.com/NetworkCats/rustyip
数据库覆盖 IPv4 和 IPv6 ,准确度的话,对比 IPinfo 的代理检测库准确度是不相上下的,这个是我自己做的测试,由于版权原因不能分发测试结果,有其它商业库访问权限的人可以自己做对比测试。这个库对住宅代理也是能检测到的,至少我自己在用的多个住宅代理是被标记的。
数据库都是 CC0 ,随便在商业项目用。但是如果你用在 IP 查询网站上,然后网站有广告的话,最好还是链接到项目仓库,这样能有更多人知道这个免费数据库。
1
wsliwh 11 小时 6 分钟前
感谢大佬分享
|
2
org100 10 小时 46 分钟前
谢谢分享
|
3
ala2008 10 小时 45 分钟前
|
4
nc OP @ala2008 不是地理库,是风控库,用来检测 IP 是不是代理的。街道级别的库都是国内的,从 APP/广告商买的 GPS 数据,非常准。国外的库没有这么精确的,因为有 GDPR ,据我所知 IPinfo 的地理定位基本全部依靠延迟定位,类似基站三角定位。
|
6
nc OP 另外,releases 那里自动生成的 IP 统计信息,显示的是未展开的 CIDR 的数量,不是独立 IP 的数量。
|
7
codeface 9 小时 22 分钟前
有意思,没想到 wikipedia 会把 block 的 ip 数据开放出来
|
8
guanhui07 9 小时 21 分钟前
谢谢分享
|
9
nc OP @codeface wiki 还是非常开放的,封禁列表都是有 API 可以查询。而且数据质量还很好,他们有 Bot 自动扫开放代理,并且有用商业的数据库,比如 spur ,算是跟着白嫖数据了。
|
10
woodchen 8 小时 43 分钟前
谢谢分享, 我有一个免费自用的 IP 查询站, 可以把你的服务作为查询源之一吗?
|