1、中太数据宽带用户行为分析系统技术方案中太数据通信（深圳）有限公司2008年 03月中太数据宽带用户行为分析系统技术方案第 1 页 共 35 页 中太数据通信（深圳）有限公司目 录概述 宽带用户行为分析系统 2第一部分 非法接入监控 51.1 背景资料 .51.2 系统概要 .51.3 非法接入方法 .51.4 简要工作原理 .61.5 系统功能 .71.6 系统特点 .9第二部分 VoIP 监控 102.1 背景资料 .102.2 系统概要 .102.3 VoIP 的隐蔽性 .102.4 简要工作原理 .112.5 系统功能 .112.6 系统特点 .13第三部分 P2P 流量监控 .143.
2、1 背景资料 .143.2 系统概要 .143.3 P2P 下载分类 .143.4 简要工作原理 .153.5 系统功能 .163.6 系统特点 .18第四部分 互联网多业务分析 .194.1 背景资料 .194.2 系统概要 .194.3 系统功能 .19第五部分 WEB 信息推送 .225.1 背景资料 .225.2 系统概要 .225.3 系统功能 .23第六部分 小带宽互联跟踪 256.1 背景资料 .256.2 系统概要 .256.3 系统功能 .25第七部分 其他业务系统 288.1 防毒墙系统 .288.2 邮件分析过滤系统 .288.3 网站点击排名系统 .288.4 上网偏好
3、分析系统 .298.5 流向分析系统 .30联系方式 .31中太数据宽带用户行为分析系统技术方案第 2 页 共 35 页 中太数据通信（深圳）有限公司概述 宽带用户行为分析系统伴随着电信行业的激烈竞争，宽带业务的发展成为电信业务增收的重要来源，电信运营商出于运维和市场经营的需要，开始对宽带网用户的行为进行分析与监控。中太数据“宽带用户行为分析系统”用于实时监控宽带网上的所有数据流，具有“非法接入监控” 、 “VoIP 监控” 、 “P2P 流量监控” 、 “互联网多业务分析”等功能，以及附加的“WEB 信息推送”功能。以上所有软件功能模块，都使用同一套硬件设备，减少了重复投资。随着互联网应用的
4、日益复杂化，将来还可通过叠加新的软件功能模块，满足运维和市场部门的新需求。中太数据“宽带用户行为分析系统”与骨干网的连接如下图所示：在省域网与国家骨干网互相连接的 10G 或 2.5G POS 接口，采用无源光纤分路器将所有的上行链路分一路信号给“宽带用户行为分析系统” ，系统经过实时密集计算，判断出哪些用户正在提供宽带非法接入，哪些网关正在提供 VoIP 服务，该系统还可以实时监测并抑制全网及指定用户的 P2P 下载流量，也可分析和统计全网及指定用户的各种网络应用流量。中太数据“宽带用户行为分析系统”内部的结构如下图所示，通过网络接口转换设备，将骨干网上的 10G/2.5G POS 分光输入
5、信号，转成 1000M 的以太网输出，送往预处理服务器进行实时分析，再将分析结果送往统计管理服务器，中太数据宽带用户行为分析系统技术方案第 3 页 共 35 页 中太数据通信（深圳）有限公司预处理服务器还会接受统计管理服务器下达的命令，执行相应的控制动作。网络接口转换设备可选用国内外电信设备制造商生产的高端路由设备，预处理服务器可采用 DELL 或 IBM 公司的刀片服务器，由众多的刀片服务器共同完成实时密集计算。中太数据“宽带用户行为分析”系统，满足如下总体需求：（A）基本要求系统发生任何故障，都不影响宽带用户正常上网，不降低现有宽带网的可靠性和可用性；（B）便于扩展1、系统所有功能都能使用
6、同一套硬件设备来完成，随着互联网应用的日益复杂化，将来还可通过叠加新的软件功能模块，满足运维和市场部门的新需求；2、系统支持多机负荷分担方式工作，支持性能叠加，并能无缝平滑扩容；3、系统既支持骨干 10G POS 和 2.5G POS 接口，也支持 GE 以太网接口；（C）便于使用1、基于浏览器方式进行操作，操作管理员使用方便；2、采用文件交换的方式，与其他系统进行数据交换；（D）便于管理1、系统为省、市两级分权分级处理模式，省中心可以对每个本地网数据操中太数据宽带用户行为分析系统技术方案第 4 页 共 35 页 中太数据通信（深圳）有限公司作、统计和监控分析，地市分公司只可以对本地网范围内的
7、相关数据进行操作、统计和监控分析；2、各地市的数据相对独立，对其中一个本地网设置的策略不会影响到另一个本地网；3、支持多级管理员并赋予不同的权限，管理员可以修改自己的密码；（E）便于维护1、系统提供实时监控，包括监控 CPU、内存、处理的网络数据、跟踪的帐号数等；2、具有多种维护及管理工具，能顺利地进行硬件系统的管理维护；3、在系统本身软件或硬件出现故障时，能够发出告警；4、日志管理功能，记录管理员的每一次登录操作；5、系统自身应具有足够的安全防范功能；中太数据宽带用户行为分析系统技术方案第 5 页 共 35 页 中太数据通信（深圳）有限公司第一部分 非法接入监控1.1 背景资料数据业务中的宽
8、带业务，是拉动电信业务增长的重要组成部分，由于目前宽带业务的计费主要还是采用计时长而不是计流量的方式，所以，一部分人利用宽带计费的这个缺陷，往往以个人的名义申请宽带而让黑网吧、企业使用，或者几户共用宽带而分摊费用，给电信运营商造成了巨大的经济损失，如果不尽快解决这些非法接入，将会有更多的人效仿而给电信运营商造成更大的损失。1.2 系统概要中太数据“非法接入监控”系统部署于电信骨干网旁，采用特有的分析方法，准确定位以个人名义申请宽带，实际却为网吧经营、公司经营或多个家庭共享宽带的情况，分析出宽带帐号与其所携带用户数之间的对应关系，便于电信运营商客户经理说服其到营业厅补办开户手续，并在必要的时候启
9、动个性化拦截技术，阻止宽带非法接入用户对网络的访问。中太数据“非法接入监控”系统准确性极高，已为相关电信运营商，查获了大量的黑网吧、个人申请企业使用、以及多个家庭共用宽带的情况，为电信增收、进一步提高宽带安装率提供了必要的技术保障。1.3 非法接入方法在所有宽带非法接入用户中，以个人名义的身份申请宽带，为黑网吧、企业或其他家庭共用，最普遍采用的方式如下图所示，左图采用 ADSL 拨号，右图采用 LAN 连接，包括固定 IP 或动态分配 IP、不认证、Web 认证、PPPoE 认证等中太数据宽带用户行为分析系统技术方案第 6 页 共 35 页 中太数据通信（深圳）有限公司各种情况。特别需要注意的
10、是，部分中小运营商由于带宽不足，往往“借用”主运营商的专线用户的宽带，进行非法桥接，获得廉价带宽，再采用低价策略与主运营商展开竞争。1.4 简要工作原理检测宽带非法接入的常规方法有如下几种： 标记法部分有害的监控系统，通过修改用户的 IP 数据报文，给所有的宽带用户“帖上标记”来进行检测。这种方法由于需要修改所有用户的 IP 数据，将损伤现有宽带网、大幅降低现有宽带网的可用性。 SNMP 扫描法部分 ADSL Modem 有默认管理员口令及密码，并且 SNMP 的 community 都采用默认的 public 或 private，可以得到其 arp 表而确定用户数。这种方法显然是一种“碰运气
11、” 、不全面的方法，同时不断地扫描，将损伤现有宽带网。 判断 IP_ID 法中太数据宽带用户行为分析系统技术方案第 7 页 共 35 页 中太数据通信（深圳）有限公司对于 Windows 用户，由于其 IP 包头中的 IP_ID 将随着用户发送的 IP 包的数量增加而逐步增加，如果在某个时刻，发现某个源 IP 地址，如下图所示，有两段 IP_ID 在连续变化，则说明该帐号此时有两个用户在同时使用宽带。这种方法有一定的功效，但目前市场上已经出现可修改 IP 包的 IP_ID 的NAT 设备，专门用于对付运营商的相关监控系统，仅使用这种方法的监控系统，很快将失去作用。中太数据“非法接入监控”系统，
12、不对外发送任何扫描数据，不修改用户的任何 IP 报文，而是从网络第三层到第七层对数据进行仔细分析，特别分析了操作系统生产厂商的非公开特性，通过对用户各种特性的多次分析和校正，准确判断出每个帐号下携带的用户数量。在覆盖 200 多万宽带用户的实际监控中，无论共用 NAT、共用 Proxy、或分时段共享帐号上网，中太数据“非法接入监控”系统都能准确报告，并为相关电信运营商“挖掘”出大量的宽带新用户。高度准确是中太数据“非法接入监控”与其他友商系统相比较，显示出的最显著特征。1.5 系统功能中太数据“非法接入监控”系统，具备以下主要功能：（A）无害要求1、系统不主动往宽带网用户发送任何扫描数据；2、
13、系统不修改正常使用宽带网的用户所发送和该接收到的数据包，不采用修改用户数据报文的“标记法” （这种方法将降低宽带网的可用性） ；（B）检测功能中太数据宽带用户行为分析系统技术方案第 8 页 共 35 页 中太数据通信（深圳）有限公司1、准确检测到多个用户共用一个帐号，利用 NAT/Proxy 同时上网；2、准确检测到多个用户共用一个帐号，利用 NAT/Proxy 分时上网；3、准确检测到多个用户共用一个帐号，利用可修改 IP 包 IP_ID 的设备上网；4、对用户数的检测，不依赖于操作系统类型，如 Windows、Linux 及其他UNIX 等；5、当用户启动防火墙，或者使用 BT、flash
14、get、NetAnt 等工具下载文件而产生大量 TCP 连接时，不会对系统检测的准确性造成影响；6、系统检测的准确性要求大于 95%，误判+漏判率小于 5%；（C）拦截和警告功能1、系统支持按不同的帐号或 IP 地址，实施不同的个性化拦截策略；2、系统可以选择，按时间段进行拦截；3、系统可以选择，只拦截 http 或拦截所有 TCP；4、系统可以选择随机拦截 TCP 或是拦截所有 TCP；5、系统可以选择，按事先定义的各种规则模板进行拦截；6、支持按事先设置警告的内容，在用户浏览网页时推送出警告页面；（D）统计和报表功能1、对于宽带帐号用户，按上网帐号提交“帐号携带用户数”对应表关系报表；2、
15、对于固定 IP 用户，按 IP 地址提交“IP 地址-携带用户数”对应关系报表；3、对于具有多个固定 IP 地址的用户，以 IP 地址集为单位，提交“IP 地址集-携带用户数 ”对应关系报表；4、提交非法接入帐号总数及其所携带的用户总数的变化图及比例图；5、提供非法接入帐号被打击后，挖掘出的新用户帐号与原非法接入帐号之间对应关系的报表；6、对于上述统计图表，可以按小时、日、月等不同的时间段提供；7、对于上述统计，可以曲线图或饼图显示，并可以生成 Excel 格式报表（E）其他功能1、支持合法用户功能，确保它们不被拦截；中太数据宽带用户行为分析系统技术方案第 9 页 共 35 页 中太数据通信（
16、深圳）有限公司2、支持批量增加需要拦截或不能拦截的帐号，减少维护量；3、支持对所监测到的帐号，进行查询、添加、删减功能；1.6 系统特点中太数据“非法接入监控”系统，采用密集计算、多机运行负荷分担工作方式，每个预处理单元设备实时处理 1000 Mbps 的流量，系统的特点如下： 设计合理采用被动监听工作方式，不会主动向用户发出任何扫描报文，不会修改用户的任何正常上网数据，不对现有宽带网造成任何影响； 高度准确从网络 3 层至 7 层进行综合分析，经过多级校正，准确识别每个帐号“携带”用户的数量； 成熟稳定系统在多个省运营商得到长期应用，并广泛吸取了运营商的建议而增加了许多功能； 抵御欺骗中太数
17、据宽带用户行为分析系统技术方案第 10 页 共 35 页 中太数据通信（深圳）有限公司对于使用可修改 IP 包的 IP_ID 的 NAT 设备携带多个用户，中太数据“非法接入监控”系统仍然能准确检测并进行拦截。中太数据宽带用户行为分析系统技术方案第 11 页 共 35 页 中太数据通信（深圳）有限公司第二部分 VoIP 监控2.1 背景资料话音收入是电信运营商收入的主要来源，由于宽带网和 VoIP 技术的发展，不少虚拟运营商特别是一些非法的虚拟运营商，开始分流电信运营商的话音业务，电信运营商出于保护自身的利益，需要从技术上对 VoIP 进行监控，让市场部门知道话音业务被分流的情况，以便按策略维
18、护话音收益。2.2 系统概要中太数据“VoIP 监控”系统设置于骨干网旁，实时分析网络上所有数据流，准确识别各类 VoIP 通话，包括 H.323 / SIP / MGCP 及其变种的 VoIP，区分出PC2PC 会话及 PC2Phone 会话，得到 VoIP 网关的 IP 地址、类型、通话时间及通话时长等详细信息，提交多种统计图表，并按需要切断 VoIP 通话或增加干扰噪音。2.3 VoIP 的隐蔽性目前虚拟运营商为防止主流电信运营商封堵其 VoIP 业务，基本上都不采用标准的 VoIP 协议，最典型的是在 H.323/SIP/MGCP 等协议的基础之上进行修改（这样开发量较小，系统的可靠性
19、也较高） ，例如，修改呼叫建立数据，在标准的 VoIP 数据包中增加了私有的“数据包头”之后将 VoIP 包改头换面，同时，也不采用标准的 TCP/UDP 端口等，极大地增加了对 VoIP 监控的技术成本。虚拟运营商按需要可将其 VoIP 网关部署在国内或国外。中太数据宽带用户行为分析系统技术方案第 12 页 共 35 页 中太数据通信（深圳）有限公司2.4 简要工作原理系统仔细分析每个 TCP 及 UDP 流前面的一部分 IP 包，逐个 byte 偏移后，尝试用 H.323 / SIP / MGCP 协议去解码（这是一个很消耗资源的运算） ，如果这个数据流没有 VoIP 的特征，系统将放弃对
20、它的跟踪以节省 CPU 资源，如果这个数据流是 VoIP 数据，系统将再进一步分析，得到 VoIP 网关的 IP 地址、类型、通话时间及通话时长等详细信息，此外系统还可以通过切断 VoIP 信令连接、发送挂机信号等方法，切断 VoIP 通话；也可在话音流中插入干扰 UDP 包来给 VoIP 通话增加噪音。2.5 系统功能中太数据“VoIP 监控”系统，主要具备了以下功能：（A）检测功能1、既能检测出在标准端口下，又能检测非标准端口下的 H.323 / SIP / MGCP 的通话；2、能检测出利用“私有隧道” ，在任意端口上透传 H.323 / SIP / MGCP 的通话；3、能够检测、拦截
21、“万人迷” 、 “Net2Phone”等纯私有 VoIP 应用；4、能够区分出 VOIP 的类别，将 VOIP 分为四类：第一类接驳传统电话网，包括呼叫固定和移动电话；第二类为企业内部 IP-BPX 之间的通话；第三类为 MSN、QQ 等之间的通话；第四类为其他 PC2PC 通话；5、能够区分出是来话还是去话，以及区分是国内还是国际通话；6、能够根据 IP 区分网关及网守的地区和运营商归属；（B）干扰、拦截功能1、按事先确定的比例，对每次 VoIP 通话增加噪音或不增加噪音；中太数据宽带用户行为分析系统技术方案第 13 页 共 35 页 中太数据通信（深圳）有限公司2、按事先确定的比例，切断
22、VoIP 通话；3、支持对于每个网关，每天按时段干扰其通话；4、支持对于每个网关，每天按时段切断其通话；（C）统计和报表功能1、对于第一、第二类 VOIP，提交通话详单报表，通话详单包括网关或网守的 IP 地址，主叫帐号或 IP 地址、被叫电话号码、通话时长、通话时间，来话/去话；2、对于第一类及第二类 VOIP 通话，提交每个用户每天使用 VOIP 时长的报表；3、提交所有四类 VoIP 各自的通话时长、呼叫次数报表；4、对于第一类 VOIP 通话，提供更详细的报表如下： 按地域（国内/国外）统计呼叫量和通话时长； 按呼叫方向（呼入，呼出）统计呼叫量和通话时长； 按用户帐号或专线用户地址提供
23、通话时长 TOP N 排行版； 按 VoIP 网关/网守地址提供通话时长 TOP N 排行版； 统计使用过第一类 VoIP 用户总数；5、对每个网关/网守，提交 VOIP 统计报表；6、对于上述统计图表，可以按小时、日、月等不同的时间段提供；7、对于上述统计，可以曲线图或饼图显示，并可以生成 Excel 格式报表（D）其他功能支持白名单功能，不对白名单内的 VoIP 网关进行干扰；中太数据宽带用户行为分析系统技术方案第 14 页 共 35 页 中太数据通信（深圳）有限公司2.6 系统特点中太数据“VoIP 监控”系统，采用密集计算、多机运行负荷分担工作方式，每个预处理单元设备实时处理 1000
24、 Mbps 的流量，系统的特点如下：1. 区分出与传统电话网有接驳的 VoIP 通话、企业内部 VoIP 通话， 中太数据宽带用户行为分析系统技术方案第 15 页 共 35 页 中太数据通信（深圳）有限公司PC2PC 和 PC2Phone 通话，突出真正分流电信运营商话音收入的 VoIP业务；2. 通过电话号码来区分是国内电话还是国际电话，而不是简单的按 VoIP网关 IP 地址的归属地、主叫 IP 地址及被叫 IP 地址的归属地来区分国内还是国际通话。中太数据宽带用户行为分析系统技术方案第 16 页 共 35 页 中太数据通信（深圳）有限公司第三部分 P2P 流量监控3.1 背景资料当前 P
25、2P 下载应用不断发展，它在繁荣互联网的同时，消耗了大量的网络带宽，部分地区由于 P2P 下载的泛滥，影响了浏览网页、收发电子邮件等常规网络应用，引发用户对电信运营商的不满，同时，由于 P2P 下载泛滥，迫使电信运营商投入巨额资金不断地扩容带宽，目前电信运营商被消耗带宽的增长，已经远超过了用户数及收益的增长速度，如果不对 P2P 下载进行适当的控制，它将直接影响到电信运营商的服务质量。3.2 系统概要中太数据“P2P 流量监控 ”系统设置于骨干网旁，准确跟踪各类 P2P 下载，包括 Bittorent、eDonkey、 eMule、Kazza、Gnutella、Xunlei 等国内外 99%以
26、上的 P2P 下载应用，实时统计出 P2P 的流量，当 P2P 下载消耗的带宽超过电信运营商预设的数值之后，中太数据“P2P 流量监控” 系统将自动启动其限速机制，确保 P2P 下载的速率回落到电信运营商所允许的范围，保证浏览网页、收发电子邮件等常规网络应用不受影响。3.3 P2P 下载分类P2P 下载应用种类繁多，中太数据 “P2P 流量监控 ”系统准确跟踪了国内外主流的 P2P 下载应用，包括如下各种协议类型：1. BitTorrent 协议：客户端包括 BitTorrent、BitComet、Azureus 、Shareaza、TurboBT 、 贪婪 BT、比特中太数据宽带用户行为分析
27、系统技术方案第 17 页 共 35 页 中太数据通信（深圳）有限公司精灵等；2. eDonkey 协议：客户端包括 eDonkey、eMule 等；3. GnuTella 协议：客户端包括Kazza、BearShare、Gnucleus、Morpheus 、Swapper 等；4. DirectConnect 协议：客户端包括 DC+等；5. Xunlei 协议：国内流行的 P2P 下载等；6. PPStream、PPLive 、QQTV 等 P2P 视频流。3.4 简要工作原理1. 系统跟踪并实时分析每个网络数据流，判断它是否属于Bittorent、eDonkey、eMule 、Kazza、
28、Gnutella、Xunlei 等 P2P 下载应用（由于部分 P2P 下载及其变种，已经不再象 Bittorent 那样具有明确的字符串标识，所以纯硬件设备在 IP 层已经无法识别它，必须依靠复杂的逻辑关联，通过软件来进行识别） 。2. P2P 下载所消耗的带宽，超过了电信运营商预设的数值之后，系统将会自中太数据宽带用户行为分析系统技术方案第 18 页 共 35 页 中太数据通信（深圳）有限公司动启动抑制策略，通过合成的 IP 包来切断一些 P2P 下载速率较高的数据流，从而实现包括限制速率或限制 P2P 下载数据流的比例，将 P2P 下载的带宽，抑制在运营商事先设定的范围之内。中太数据宽带
29、用户行为分析系统技术方案第 19 页 共 35 页 中太数据通信（深圳）有限公司3.5 系统功能中太数据“P2P 流量监控 ”系统，主要具备了以下功能：（A）检测功能1、支持对 BitTorrent 协议的实时检测及控制，检测出BitTorrent、BitComet、TurboBT 、贪婪 BT、比特精灵等 P2P 下载流量；2、支持对 eDonkey 协议的实时检测及控制，检测出 eDonkey、eMule 等P2P 下载流量；3、支持对 GnuTella 协议的实时检测及控制，检测出Kazza、BearShare、Gnucleus 等 P2P 下载流量；4、支持对 DirectConnec
30、t 协议的实时检测及控制，检测出 DC、DC+等 P2P下载流量；5、支持对迅雷 P2P 协议的实时检测及控制，检测出 XunLei 的 P2P 下载流量；6、支持对 P2P 视频流的实时检测及控制。（B）P2P 抑制功能1、支持按 P2P 下载应用消耗的总带宽，设置 P2P 抑制策略；2、支持按 P2P 下载应用消耗带宽与其他应用消耗带宽所占的比例，设置P2P 抑制策略；3、支持按不同的时间段，设置不同的 P2P 抑制策略；4、对 P2P 下载流量控制的精确度误差要求小于 5%；（C）分类策略1、支持将指定用户帐号或源 IP 地址归为一个组，系统支持多个组；2、对于每个组可实施不同的 P2P
31、 限制策略；3、P2P 控制策略既能全省统一设置，也可按地市分别设置；4、支持“白名单”帐号或 IP 地址，不限制其 P2P 下载应用；（D）统计和报表功能1、提供全省各种 P2P 下载流量及网络总流量的实时曲线图表；中太数据宽带用户行为分析系统技术方案第 20 页 共 35 页 中太数据通信（深圳）有限公司2、提供每个地市各种 P2P 下载流量及网络总流量的实时曲线图表；3、提供每个组各种 P2P 下载流量及网络总流量的实时曲线图表；4、对于指定的帐号或 IP 地址，提供 P2P 下载流量及网络总流量的实时曲线图表；5、对于上述统计图表，可以按小时、日、月等不同的时间段提供；6、对于上述统计
32、图表，可用曲线图或饼图显示，也可生成 Excel 格式报表；7、对于指定的帐号或 IP 地址，提供 P2P 下载流量 TOP N 排行版；（E）其他功能1、可以手工添加和批量导入需要监控的帐号或 IP 地址；2、可以手工添加和批量导入帐号或 IP 地址到某个组；中太数据宽带用户行为分析系统技术方案第 21 页 共 35 页 中太数据通信（深圳）有限公司3.6 系统特点中太数据“P2P 流量监控”系统，采用密集计算、多机运行负荷分担工作方式，每个预处理单元设备实时处理 1000 Mbps 的流量，系统的特点如下：1. P2P 流量抑制不影响正常上网，用户还可继续使用 P2P 下载，只是网络繁忙时
33、 P2P 下载速度会减慢，用户不易察觉。2. 可在网络繁忙的时候才对 P2P 下载进行抑制，确保浏览网页、收发EMAIL 等应用不受影响，在网络空闲的时候让 P2P 极速下载，充分利用网络带宽。3. 系统投资低廉，不改变现网的结构，不影响原有网络系统的可用性和可靠性。中太数据宽带用户行为分析系统技术方案第 22 页 共 35 页 中太数据通信（深圳）有限公司第四部分 互联网多业务分析4.1 背景资料互联网上的流量正在快速增长，除了 P2P 下载占据相当一部分带宽之外，还有其他什么应用比较受大众欢迎而消耗较多带宽呢？如果电信运营商市场部门能比较准确地知道宽带网上哪些应用比较受欢迎、每个大客户常用
34、的宽带业务，那么就可以比较科学地制订相应的营销策略。4.2 系统概要中太数据“互联网多业务分析”系统设置于骨干网旁，实时分析网络上的所有数据流，区分出视频、游戏、EMAIL、HTTP、VOIP 、FTP、P2P 等多种应用及其流量，从宏观上得到全网、各地市的多种网络应用流量曲线图表，精确分析出大客户的多种网络应用流量。4.3 系统功能中太数据“互联网多业务分析”系统，实时分析网络上的所有数据流、生成各种报表曲线，系统具有如下功能：（A）分析功能分析骨干网上，所有的网络流量，包括如下：1、P2P 下载所占的流量及比例；2、P2PStream 下载所占的流量及比例；2、HTTP 断点续传所占的流量
35、及比例；3、FTP 应用所占的流量及比例；4、HTTP 浏览网页所占的流量及比例；中太数据宽带用户行为分析系统技术方案第 23 页 共 35 页 中太数据通信（深圳）有限公司5、VOD 流媒体应用所占的流量及比例；6、视音频通信所占的流量及比例；7、Game 应用所占的流量及比例；8、Email 应用所占的流量及比例；9、Other 其他未知应用所占的流量及比例；由于只监控单向数据，不能鉴别的应用比例控制在总流量的 30%以内；（B）统计和报表功能1、 提供全省各种网络应用流量的实时曲线图表；2、 提供每个地市各种网络应用流量的实时曲线图表；4、 对于指定的大客户，提供各种网络应用流量的实时曲
36、线图表；5、 对于上述统计图表，可以按小时、日、月等不同的时间段提供；6、 对于上述统计图表，可用曲线图或饼图显示，也可生成 Excel 格式报表；中太数据宽带用户行为分析系统技术方案第 24 页 共 35 页 中太数据通信（深圳）有限公司中太数据宽带用户行为分析系统技术方案第 25 页 共 35 页 中太数据通信（深圳）有限公司第五部分 WEB 信息推送5.1 背景资料WEB 信息发布，目前主要依靠被动式发布，例如用户去看某个网页时，能看到在此页面上的信息。然而，作为宽带业务的提供者，电信运营商有时需要将一些重要的信息，例如网络割接通知、业务变更信息告知用户，需要“主动”式 WEB 信息推送
37、系统来实现这些需求，有时还需要用它来推送商业广告。5.2 系统概要中太数据 WEB 信息推送系统实时监测用户的每个 http 请求，依照电信运营商事先确定的策略，对用户的 http 请求进行处理后，将其转向相关的 URL，用户“被迫”看到相应的 WEB 信息。中太数据宽带用户行为分析系统技术方案第 26 页 共 35 页 中太数据通信（深圳）有限公司5.3 系统功能（A）WEB 广告信息管理功能1. WEB 广告信息提交：预览、提交，WEB 广告信息进入“待审核”状态；2. WEB 广告信息审核：管理人员确认后，系统对其生成数字签名，WEB广告信息的内容发生任何变化，系统将拒绝投放 WEB 广
38、告信息；3. WEB 广告信息审核结果，WEB 广告信息将处于“未通过审核” 、 “通过审核” 、 “失效”等几种状态，避免 WEB 广告信息内容，由于某种原因被篡改之后，带来不可预测后果。（B）用户及组群管理功能1. 组群管理：增加、删除、编辑用户组群，将用户分类；2. 用户管理：增加、删除用户（及 IP 地址） ，支持批量将用户（及 IP 地址）导入用户组群，支持将用户在不同的组群之间转移；3. 免投放用户管理：（批量）增加用户（及 IP 地址） ，这些用户（或 IP地址） ，将不会收到推送的 WEB 广告信息内容；（C）WEB 广告信息投放管理功能1. 对不同组群的用户，在其拨号上线后，
39、系统检测到其发送 http 请求时，发送不同的 WEB 广告信息；2. 支持根据用户在搜索引擎中键入的关键字推送不同的信息；3. 支持根据用户访问的 URL 推送不同的信息4. 推送信息应强制用户看到，避免用户阻截（D）统计功能：1. WEB 广告信息投放统计：以 WEB 广告信息内容，统计出其被投放的情况，提供相应的报表；2. 群组投放统计：以用户类别，统计出所有 WEB 广告信息被投放的情况，提供相应的报表 ；3. 用户投放统计：以每个用户，统计出所有 WEB 广告信息被投放的情况，中太数据宽带用户行为分析系统技术方案第 27 页 共 35 页 中太数据通信（深圳）有限公司提供相应的报表
40、；4. 对于每个用户，系统都提供详细的“WEB 广告信息详单” ，记录这个用户在什么时间被投递了哪些 WEB 广告信息。（E）分级分权限管理功能1. 分区分级管理：各地市公司管理自己的用户和 WEB 广告信息；省公司可以统一管理投递到全省用户的 WEB 广告信息；2. 分权限管理：普通管理员只有查看统计结果的权限，系统管理员除此之外还有设置的权限；中太数据宽带用户行为分析系统技术方案第 28 页 共 35 页 中太数据通信（深圳）有限公司第六部分 小带宽互联跟踪6.1 背景资料宽带收入作为固网运营商业务增收的主要增长点，目前受到他网竞争运营商的冲击，主要是因为他网竞争运营商，利用主运营商的用户
41、线路，暗中“借”用主运营商的带宽，透传他网运营商的宽带数据，我们称这些被非法“借”用的带宽，为非法小带宽互联，也被称为“假接入、真互联”或“非法带宽批发” ，目前主要网络运营商与其他竞争运营商大都采用网络流量结算费用，由于中国互联网上的资源，主要集中在国内几个主要网络运营商的 IDC 内，竞争运营商为节省结算费用，大量采用非法小带宽与主运营商互联。这种情况在国内多个省市普遍存在，但都没有一个很好的追踪监控手段。这种情况导致其他小运营商以很低的成本，利用非法获得的额外网路资源，提高了网络出口带宽，并反过来和主运营商竞争市场。另一方面，主要运营商不仅要面对这种不公平的竞争，而且还要为这些小运营商支
42、付国际出口的流量结算费用。6.2 系统概要中太数据小带宽互联跟踪系统，通过网络应用模拟、协议数据分析等技术手段，准确定位竞争运营商在主运营商的省内的宽带接入点、甚至部分在外省的接入点，为主运营商打击非法小带宽互联提供了可靠的技术侦察手段，同时还可评估竞争运营商的宽带质量。中太数据小带宽互联跟踪系统已经协助部分省份查获大量非法小带宽互联线路，为运营商带来巨大收益。 6.3 系统功能（A） 终端管理功能1、终端管理功能：主动登记用户唯一终端号，机器识别码，它网宽带类型，中太数据宽带用户行为分析系统技术方案第 29 页 共 35 页 中太数据通信（深圳）有限公司联系人，及电话号码，终端注册时间等，并
43、可集中管理终端的状态，删除和修改终端信息；2、数据加密：客户端和服务端的通信数据完全加密，以防止第三方窃听测试结果数据，从而破坏系统的正常运行；3、增强型终端唯一标识号：每个信任的测试终端都有第一次运行时生成的唯一标识，首次使用时需要服务段管理员开通，以保证终端及服务端的系统安全；4、终端登录时可选运营商类型：同一客户端可以对多个运营商网络进行测试跟踪，此功能可以灵活准确的区别结果数据，方便查询分析和发现可疑点；5、客户端“傻瓜” 运行方式：为了方便客户端的操作，尽可能不需要客户端做相关设置，管理端集中对客户端要布置任务；可以定制客户端界面，使之能以“共享软件”的方式下发给各测试人员，隐藏软件
44、本身功能，增加系统保密性。6、自动更新功能：由于各种游戏，证券软件客户端升级频繁，本系统客户端也具备自动升级功能，只要在管理机上放置最新版客户端，客户端启动时会自动检查更新并以新版本运行，保证最佳的跟踪效果，也方便今后的功能升级。（B） 系统管理功能1、IP 地址库管理：定义不同 IP 地址或地址段所属的运营商,可以添加，修改和删除；2、跟踪路由地址管理：指定终端要做路由跟踪的 IP 列表，可做添加和删除操作；3、信息港 URL 管理：指定可返回终端 IP 地址的 URL，探测用户实际使用的公网 IP；4、测速 URL 地址管理：指定终端要测试网速的 URL 列表，测试指标为：数据包时延，打开 URL 时长，下载速率；5、地区管理功能：终端位置地区信息集中维护功能，可添加，编辑和禁用；
