关于数据库:挂图作战网络实体定位技术

73次阅读

共计 1260 个字符,预计需要花费 4 分钟才能阅读完成。

在当今互联网的浪潮下,网络给人们带来了微小的经济效益和便当。广告商通过判断网络用户的地位来推送准确的广告;网络安全人员通过定位 IP 地位来确定网络故障的所在,及时排除故障。因而对于 IP 地址的实体地理位置定位技术的钻研就显的愈发的重要。

随着 IP 定位技术的倒退,集成的 IP 定位系统就是将国内外优良的 IP 定位数据库会集到一起,附加抓取一些 WHOIS 和 DNS.LOC 来提炼定位信息,最终造成一个绝对全面的 IP 定位数据库。有了数据源后通过抵触打消算法和爬虫对定位信息库的每日更新使得数据库更加的全面,通过类 SVD 算法和高效 IP 查问算法的钻研与实现来使定位后果更加精确和高效。次要做如下三方面的钻研工作:

第一钻研和实现了 IP 定位系统的外围数据源的获取工作,包含分布式爬虫的架构和实现,冲破相干网站安全性措施的办法,以及不同数据源“抵触”数据的解决办法,无效晋升数据库的全面性。

第二钻研和解决了大量 IP 查问效率低下的问题,论述了通过高频加工夫相结合的缓存策略、基于 HASH 的查问算法和基于 FODO 算法的分布式分片策略来晋升 IP 查问效率。

第三钻研和实现了类 SVD 算法通过置信度和准确度来实现最佳定位后果的生成算法,无效晋升定位后果的准确性。

数据集是天文定位实现模型的数据根底,天文定位即是依据特定的需要对数据集的参考和更新过程。数据集蕴含以下几个局部:

• BGP 数据:BGP 门路信息由 Routeviews 我的项目提供,BGP 门路信息蕴含路由器连贯的网络前缀和 AS 门路。

• 天文组: 从 3 个路径收集局部 IP 对应地理位置的信息,以 (网络地址、网络前缀、地区名称、经度、纬度、可信等级) 的模式存储。这 3 个路径包含:1)局部网站用户信息的收集;2)手工向提供地理位置信息服务机构提交査询失去的信息;3)凋谢软件中公开的局部信息。

• 门路信息: 在验证阶段保留 traceroute 的门路信息,以门路结点为单位记录其前驱和后继的网络地址、RTT,地理信息、可信等级等。

• 编码信息: 地理信息常常以编码模式被嵌入在一些以城市、州、国家名缩写为 DNS 名的路由器中。对这些路由器名称的剖析结果表明,有 3 种根本类型的编码暗示地位:1)城市编码: 许多 ISP 用无特色的城市编码或州编码定义主机名称,能够给出一些地理信息的线索;2)机场编码: 一些 ISP 以他们所在城市的机场编码为根底命名 DNS。因为机场编码是世界范畴的,这样的命名习惯能够暗示局部路由器的地位;3)国家编码: 国家编码是基于 ISO3166 中定义的国家代码,国家信息对于判断依附国家或机场编码定位后果的正确性十分必要。

地理位置定位实现的次要阶段

地理位置定位须要从以下几个阶段:定位、验证和聚类,如图所示:

定位模块依据定位申请,参考数据源已有信息,通过定位算法确定指标的根本地位。在验证阶段,利用 traceroute 原理和传输提早判断后果的可靠性,并对不牢靠的后果给出可能的猜想,同时更新数据源中天文组信息。在聚类阶段,进一步调整正当的网络地址前缀与地理位置的关系。

(局部材料来源于网络,如有波及请分割删除)

正文完
 0