论mac定位技术的大数据民用应用.docx

论MAC定位技术的
大数据应用
(民用版)
修订历史记录
版本
日期
CAMD
修订者
说明

2015-05-26
C
宋为
创建初稿,标题为《论PC定位技术的大数据应用》

2015-05-27
A
宋为
1、修改标题为《论MAC定位技术的大数据应用》
2、添加了数据采集方式及民用前景
(C-创建,A-添加,M-修改,D-删除)
目录
前言 4
用户环境 5
数据采集原理 6
数据采集方式 6
数据传输方式 7
建模参数 7
民用应用前景 8
公共安全和个人隐私的矛盾 10
民用应用经营运作方式 10
前言
随着电脑终端及移动设备的普及,信息化时代的舆论走向管理及信息安防大数据等新时期的需求开始凸显重要性以及加强管理的必要性。
在传统方式上的电脑定位大致是通过技术手段获取到电脑所在网络出口IP地址,然后通过运营商查询相关IP的登记属性。这种方式步骤繁琐,流程冗长。本文是用于探讨新信息时代的大数据管理方式模型,以提高PC、笔记本等电脑终端设备定位的查询效率。
移动终端的普及,带动了WIFI的发展,现在家家户户以及一些非涉密企事业的办公室,基本上都部署了无线路由器。
这是本文探讨的大数据采集模型的基础。本文所述技术思路、应用流程均为开放文档,作者拥有本文版权,任何民间单位、团体、个人都可以采纳、引用,且不得具此申请专利而限制他人应用及使用。但政府执法机关采用和限制其他团体及个人使用不在此声明之中。
用户环境
首先我们梳理一下网民的常用应用:
手机:微信、手机QQ、陌陌、百度搜索、WIFI***、高德地图、百度地图、腾讯地图、谷歌地图。
电脑:QQ、阿里旺旺、QQ安全管家、360杀毒、350卫士、百度杀毒、百度卫士。
手机上的地图软件,除了能够展示地图外,还能够通过手机本身的功能定位,定位精度一般能达到10米以内。此处所述的定位功能,既包括GPS定位法、北斗定位法,也包括基站定位法,前者精确,但需要定位设备处于卫星信号范围内;后者虽然只有大致范围,但一般也能精准到半径100米的范围内。这在民用级应用中是足够了。
目前所有的手机地图软件,技术上都可以采集手机的经纬度定位地址、手机所在WIFI网的路由器MAC地址(不是优先采集SSID)。因为MAC地址是格式单一、编码唯一的,而SSID则必然存在名称重复、字符集多样性的情况而不方便被唯一性采用。
以上列举的只是常用手机软件中,带定位功能的软件;目前的手机APP软件,相当多的软件都包含了读取用户当前定位信息的功能,因为它们也在尝试建立自己的用户大数据中心。但目前各个APP软件采集到用户定位信息后,如何进行系统化和规模化大数据应用挖掘,目前还没有比较成熟的案例。
数据采集原理
当一个手机连接到WIFI,获取到IP地址可以上网后,手机上的内置软件读取到手机的定位信息,读取到无线路由器网关地址的MAC信息,传送到软件服务器的数据库中保存。
这实际上就定位了大多数路由器的地址,只要它的局域网里面有WIFI接入点,它又是一个网络的网关,可以供其它电脑终端上网,那就能把一批电脑终端的大致定位都确定了。
从这可以看出,用户群体越大的客户端软件,越能详尽的、精准的、尽快的完善数据资料。
当电脑终端以有线/无线方式连接到网络时,它必然是要通过网关连接到互联网的,而通过采集电脑终端的网关路由器MAC信息,和数据库中的MAC地址进行比对,就能很快的判断出这台有线/无线设备的定位,数据可以精准到一个大楼的位置。
数据采集方式
手机终端:
1、由手机厂商后台预置,在手机登录到WIFI以后,获取路由器网关MAC地址信息、SSID信息传送到服务器数据库。
2、由常用手机软件采集:微信、QQ、陌陌、WIFI***等安装普及率比较高的软件厂商,在软件登录到WIFI的时候,获取路由器网关MAC地址信息、SSID信息、并扫描同网段其他设备ARP地址表,传送到
服务器数据库。
3、附加采集:软件在初登录WIFI成功后扫描,或定期扫描同网段其他设备ARP地址表,传送到服务器数据库。这种采集不是必要的,但有它的警用应用前景。
电脑终端:
由桌面软件厂商采集网关路由器MAC地址,到服务器查询设备自身所在坐标。定位数据库比较全的厂家,可以将坐标信息有偿开放查询。比如QQ、360、飞信、天翼等软件或者网上营业厅的ActiveX控件,在我国的电脑终端应用部署量达到了数亿。完全可以利用这个平台进行非移动设备的定位及增值业务推广。
数据传输方式
单个环境,数据传输的数据量并不大,但由于涉及到相关设备信息,不建议明文传输,建议数据进行压缩加密后进行传输。由于数据量并不大,而且不需要精准记录,可以选择以UDP协议单向