简易创建适合风控系统的IP库
发布时间：2022-05-18 09:31:28 所属栏目：安全 来源：互联网
导读：ip作为识别和定位用户的手段来说，对互联网企业起着至关重要的作用，特别是在精准营销、反欺诈等业务方面。本文描述如何简单的去构建自己的ip地址库。 但对我们这样的风控公司来说，现成的资源有以下不足： 1.需要离线的数据库。我们的产品是提供私有化的大
|
ip作为识别和定位用户的手段来说，对互联网企业起着至关重要的作用，特别是在精准营销、反欺诈等业务方面。本文描述如何简单的去构建自己的ip地址库。 但对我们这样的风控公司来说，现成的资源有以下不足： 1.需要离线的数据库。我们的产品是提供私有化的大数据风控平台，由于涉及的信息比较敏感，需要隔绝外网来保证数据隐私性和安全性，api的方式不合适 2.需要定期更新的数据库。ip地址经常变化，需要精准度高、更新频繁的来源，评测下来，现存的第三方提供商还是存在数据覆盖率和准确性方面的不足 3.需要规范化的数据。我们需要手机、身份证、ip等多个维度的归属地，但数据来源多样，比如：在很多场合，这种数据不一致没关系，但我们的风控引擎会拿来作比较计算，这种不一致会导致大量的计算偏差，引起误报 有的显示“南京”， 有的显示“南京市” 有的显示县级市，有的显示地级市 有些城市改过名称，有的显示老名称，有的显示新名称 有的精确到市，有的精确到区 ... 4.有一些优秀的数据源提供精确到区的数据，但我们不需要采用。ip分配多变，而且运营商分配顶多到市一级，所以区县级的数据准确度会有很大挑战，影响风控使用，建议是先弃掉 5.对于非主动获取的第三方数据，习惯上不信任，需要去进行评估和重新验证，贸然使用会有不良后果 所以，我们做了一些工作，来构建自己的ip库，方便我们的风控系统使用。本文余下部分会描述我们的大概思路(具体实现会采用简要方法来说明)。 ip库原始数据获取 作为一个非专业公司，不可能像 ipip.net 那样花很大的力气去撒点做网络探测和分析，最省事的就是爬取网上的资源。这里举一个简单例子，拿局域网内最大的搜索引擎公司作为数据来源。 （编辑：江门站长网） 【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容! |
站长推荐