软件技术解决方案Word文档格式.docx

软件技术解决方案Word文档格式.docx

《软件技术解决方案Word文档格式.docx》由会员分享，可在线阅读，更多相关《软件技术解决方案Word文档格式.docx（55页珍藏版）》请在冰点文库上搜索。

3系统结构及特点

为了适应P2P技术及其应用发展迅速的特点，需要充分考虑整个系统的可扩展性、可管理性以及信息采集的效率等因素，该系统采用层次逻辑结构、功能模块化等结构来满足系统的可扩展性和灵活性。

3.1系统层次逻辑结构

系统采用分层逻辑结构，采用三层结构及一个统一调度平台的结构（系统结构图如图4.1－1所示），分为：

信息采集层、数据处理层、总控界面层。

其中，信息采集层为整个系统提供最基本的原始采集数据，数据处理层对采集到的信息进行后台数据分析、处理，总控界面层为用户（系统管理员、普通用户）接口，实现各类功能的操作界面。

信息采集层与数据处理层之间的功能模块通过接口相互作用，数据处理的结果反馈信息采集，使信息采集的准确性、效率大大提高；

同样，数据处理的结果也为用户提供各类有效的信息。

该层次结构的各层在统一任务调度平台的管理下协调工作，相邻层之间又相互作用，通过接口进行有效的信息交互，使系统可扩展性强，能根据应用规模、功能变化等因素灵活调整系统布局。

图4.1-1系统逻辑层次结构

1）信息采集部分

信息采集包括网站发现、Web爬行和客户端爬行三个模块。

网站发现模块的功能是要能够发现境内外的中文P2P文件共享和视频直播发布网站（如BT、eMule/eDonkey等的种子发布网站、论坛等），抓取能描述网站属性的信息，并将这些信息存入数据库并将网站列表提供给Web爬行模块、客户端爬行模块。

Web爬行模块从网站发现模块获取网站列表后，分别对列表中网站进行爬行搜索，获取该网站发布的所有P2P文件共享或直播节目，根据协议分析提取文件或节目的信息，并将这些信息提供给客户端爬行和数据分析模块。

客户端爬行根据Web爬行模块提供的信息与特定的P2P应用服务器建立连接，并从中获取资源服务器、资源列表、节目列表、Peer列表等信息。

2）数据处理部分

数据处理部分包括数据分析、数据库管理、统计分析及查询、资源信息特征提取等模块。

数据分析模块接收从Web爬行模块和客户端爬行模块送来的资源列表和节目列表等信息，根据文件下载/观看情况（下载/观看人数、下载完成人数、做种人数等）确定热点文件和节目，根据站点共享文件数或节目数、站点访问数或访问波动频率确定热点站点，由此得到特定信息列表。

自行构造一个违规关键词库，对资源列表和节目列表进行检查，对于疑似违规的信息加上违规标记，根据设定的阈值（其阈值低于普通的文件或节目）确定敏感信息，由此得到特定信息列表。

并由系统给出特定信息报警提示，以便管理人员对热点信息进行排查。

以上过程可以由自动、人工相结合的方式进行实现。

最后将处理过的信息提供给数据库管理模块，以存入数据库。

数据库管理模块的功能是维护数据库和其它模块与数据库的接口，并给查询及分析模块提供数据信息，如境内的P2P资源发布网站列表、热度最高的前N个P2P资源发布网站排名、热度最高的前N个下载文件排名、网站资源发布统计分析及趋势、特定P2P文件共享协议的资源列表、特定协议的P2P直播/点播节目列表及特定信息列表等，并提供用户可定制的信息查询功能，方便对网络管理人员了解整个网络中P2P资源的分布、发展动态和趋势。

资源信息特征提取模块从数据库中提取特定信息相关的信息，对特定信息列表的每个信息进行分析，包括扩散规模、传播节点地理分布、传播速度、传播时间分布等多个不同的层面的分析。

并通过GIS模块查看特定信息相关节点地理位置、分布密度、属性及服务器、节点之间的逻辑拓扑结构，这种图形形式可更直观地查看特定信息的扩散情况。

3）控制界面部分

控制界面部分包括GIS、系统管理、查询及分析和网络监控四个模块。

GIS模块需要实现根据搜索、采集到的服务器、节点、关注的节目源所在节点等信息，通过网络地址与地理位置的对应关系，将关注的节点显示在地图（世界地图、中国地图）上，能展示节点地理位置、分布密度、属性等信息，能展示服务器、节点之间的逻辑拓扑结构，并能对中国地图（展示省、市等有效信息）进行放大和缩小。

系统管理器主要是对整个监管系统进行管理、配置以及与用户的交互等。

管理器对各模块的管理主要以文件形式（配置文件）通过Web服务器网络分发到安装各模块的设备中（个别的可以使用一条命令来配置和运行模块相应设备中的相关程序），然后管理器再通过一条网络命令运行相关配置文件的对应应用程序。

网络监控模块能对给定种子或文件进行应急处理，如通过末端隔离、种子污染、分片欺骗等手段对违规的内容进行处理，实现对P2P文件共享网络有效控制。

此外，实现P2P文件共享视频内容监控（如BT视频文件），并对违规P2P文件共享视频监控实现边下载边播放（需要信息源编码支持）；

P2P直播/点播监控以B/S模式实现集成播放界面，并能以插件形式在线监控多路P2P视频流。

3.2系统拓扑结构

由于系统采用分层逻辑机构和功能模块化结构，可自由部署不同功能模块。

再根据系统中各功能的特点、安全性、可管理性等因素，系统实施的拓扑结构如图4.2-1所示。

后续可根据系统运行的数据、性能及功能扩展的需求，方便地进行扩展，从而最大化地优化投资。

●设立BT的采集、分析、控制服务器集群，每台服务器配置双网卡，一边通过局域网连接数据库服务器，一边与互联网高速连接，用于从互联网采集相关信息；

●设立eDonkey/eMule的采集、分析、控制服务器集群，每台服务器配置双网卡，一边通过局域网连接数据库服务器，一边与互联网高速连接，用于从互联网采集相关信息；

●设立P2P直播/点播的采集、分析、控制服务器集群，每台服务器配置双网卡，一边通过局域网连接数据库服务器，一边与互联网高速连接，用于从互联网采集相关信息；

●设立网络监控服务器集群，对指定种子、链接、节目源进行监控，如下载取证、遏制传播速度、降低扩散范围等；

特别说明：

以上几个部分均要求用户需要提供与互联网高速连接，以便能快速地从互联网上采集、获取有效信息。

●数据库服务器、WEB服务器、GIS服务器、网络存储是该系统的核心部分，需要有效地对信息进行保护，故采用高性能防火墙将该部分与以上部分逻辑隔离，使外网不能对核心数据进行非法访问。

图4.2-1系统拓扑结构

由于硬件采购不属于本投标书的范围，拓扑结构中的服务器集群中的具体服务器数量用户可根据业务量的变化、负载情况进行灵活配置和调整。

3.3系统特点

3.3.1结构性强

系统在设计上采用分层结构，总体由三层结构及一个统一调度平台组成，层次分明。

系统通过统一调度平台进行集中控制，整个系统结构清晰，业务逻辑与功能模块一一对应。

3.3.2扩展性好

系统在设计上考虑用户未来对业务发展的新需求，对于每个功能采用模块化设计，每个模块基于组建进行开发，便于系统统一控制和调度，系统具备良好的扩展性和升级。

3.3.3实用性强

本系统设计选用了目前在国际上较为先进且开放性好的技术，采用了模块化的组织方式，使系统具有良好的可扩展性，各个模块之间通过精心设计的接口进行通讯，并充分考虑到了未来业务扩展的需要，预留了大量的接口。

同时，我方在保证业务流的整体性和数据流的一致性方面做了大量的工作。

整个系统采用B/S架构，控制界面简介明了，通过Web浏览器便可以进行任务调度配置、服务器启动/关闭、各种查询操作。

此外，结果显示采用列表或图形的形式，让用户一目了然。

3.3.4安全性高

在系统设计上，主要采用了安全性高的开发平台、相应的加密措施、严格的权限管理体系，使非法用户无法进入本系统，而且合法用户也只能进行其权限允许范围内的操作。

在拓扑设计上采用高性能防火墙将信息采集服务器与互联网进行访问限制，采用安全网关将系统核心部分（数据库服务器、WEB服务器、GIS服务器、网络存储）与采集服务器逻辑隔离，使外网不能对核心数据进行非法访问，保证服务器和数据的安全性。

此外，系统设计上还增加系统日志记录功能，只允许特定的用户访问特定的业务数据或操作特定的程序，保障系统的正常运行。

我公司研发的系统具有完善的安全机制，可以保证国家广电总局信息网络视听节目传播监管中心面向P2P的网络广播电视节目源发现系统安全和信息保密，确保网络系统具有良好的稳定性和可靠性，能够实现有关保密要求。

并且制定了详细有效的查杀病毒计划，使系统免遭病毒的破坏。

4关键功能及技术特点

系统功能

系统主要包括P2P文件共享监管和P2P直播/点播监管两大功能子系统，另外还包括系统登陆、配置管理、任务调度、用户管理、查询及分析、信息预警、地理信息系统（GIS显示）、网络监控、系统监控及维护、日志管理等主要功能，详见图5.1-1。

图5.1-1系统功能图

4.1.1系统设置

1.查询及分析

该模块系统提供多角度多条件综合检索功能，并综合强大的统计分析功能，使用户更加深入的了解P2P直播/点播信息及趋势。

（1）可以按类别（直播点播、协议种类）、关键字等条件查询所有P2P直播/点播发布站点列表，并可以进行适当排序，如按种子/链接数排序等。

（2）可查看当日热点（TOPN）P2P直播/点播站点热度排名，并可查看网站下所有节信息，还可检索新增节目信息。

（3）可查看当日TopN节目热度排名，可查看当日TopN节目的观看用户信息、IP分布及地理位置分布等信息。

（4）提供查看当日新增节目列表的功能，并可对新增节目进行用户信息查看，可通过GIS查看用户分布情况等。

（5）系统提供7*24小时网站发现及验证情况，可查看当日新增发布站点列表，并可检索出新增发布站点的节目获取情况。

（6）系统通过自动初步匹配后，经用户确认获得当日节目黑名单，提供查看当日新增节目黑名单功能，并将该节目关联的网站设置为黑名单网站，提供查看功能。

（7）系统根据节目黑名单，关联得到黑名单网站，提供查看当日新增网站黑名单。

（8）提供站点综合检索功能，可查看特定发布站点的相关信息，包括网站域名、IP地址、ICP/ISP备案信息、联系人、联系方式及服务器所在具体省市，并可以进行GIS定位等。

（9）所在服务器信息、观看节点的信息（数量、IP地址及地理位置）、播放时间、播放频率、节目对应的文件信息（文件名、文件类型、图片及简介等）。

（10）提供多条件特定节目或发布站点的检索功能，可根据根据关键字、创建时间、热度阀值、发布站点、发布源IP地址等信息进行复合查询，对站点列出其拥有的节目数；

检索时间正常负载下不超过0.7秒，高负载情况下不超过2秒。

（11）提供节目的分类显示功能，根据数据分析中的粗分类，以及视听资源的实际分类来显示节目清单，如电影、动漫、综艺、情感等类型，并对疑似非法的节目人工标记或添加到舆情备选，以方便以后对次信息的查找及归类，每个分类为一个菜单，点击分类可直接显示该分类下的所有节目。

2.网络监控

主要包括一下几项功能：

（1）系统对于疑似违规的节目会在公告栏中进行滚动提示（预警），可点击查看节目详细信息。

用户也可在检索界面对疑似违规节目清单进行查询，包括当日疑似违规节目清单和总体疑似违规节目清单，并可查询相应的详细信息。

系统支持对疑似违规节目清单进行排序，如发现时间、上传时间、点击数、评论数等，以便用户对信息进行确认得到黑名单，并可关联至网站黑名单。

（2）系统支持特定节目的的在线播放功能。

（3）系统以B/S模式与C/S模式相结合的方式实现P2P直播/点播多路监控功能。

（4）多路监控界面可配置窗口显示个数，并可灵活拖拽显示界面位置，支持不同播放器的3*3个播放窗口监控。

（5）可将多路监控界面全屏显示，并集成播放界面的一个窗口节目。

（6）多路监控支持页面拖拽及固定位置功能。

（7）可实现对特定节目进行录制的功能。

（8）对违规节目链接页面进行快照取证，并与相应节目相关联；

（9）系统对下载的视频文件可进行抽取关键帧、生成全景图，把众多的关键帧内容集中在一张全景图上。

3.网络和传播信息查询

（1）系统可以通过GIS查询节点分布情况、扩散源分布情况及网络拓扑。

（2）对于热点网站，系统以曲线图形的形式显示指定网站的历史信息，包括节目信息数量变化趋势，疑似违规节目数量变化趋势，抓取数量变化趋势等。

（3）对一些突发的热点网站进行预警，包括节目数激增的网站，点击数激增的网站，疑似违规节目数激增的网站等。

（4）对于热点节目，系统给出用户数量变化趋势曲线，传播骨干节点变化趋势曲线，下载完成数变化趋势曲线等。

4.1.2客户管理

（8）提供站点综合检索功能，可查看特定发布站点的相关信息，包括网站域名、IP地址、ICP/ISP备案信息、联系人、联系方式及服务器所在具体省市，并可以进行GIS定位等；

（9）所在服务器信息、观看节点的信息（数量、IP地址及地理位置）、播放时间、播放频率、节目对应的文件信息（文件名、文件类型、图片及简介等）；

（10）提供多条件特定节目或发布站点的检索功能，可根据根据关键字、创建时间、热度阀值、发布站点、发布源IP地址等信息进行复合查询，对站点列出其拥有的节目数。

4.1.3RF卡管理

对系统整体各方面参数进行配置，主要包括系统总体参数配置、P2P文件共享应用配置、P2P直播/点播应用配置、分布式处理参数配置、系统运行参数配置。

（1）系统总体参数配置：

对网站发现、web爬行、客户端爬行的后台程序进行开启和关闭，对以上程序进行数据连接配置和运行参数的配置等。

（2）P2P文件共享应用配置：

对共享文件类型网站（BT、eDonkey/eMule）发现、web爬行、客户端爬行的后台程序进行开启和关闭。

（3）P2P直播/点播应用配置：

对直播/点播类型网站发现、web爬行、客户端爬行的后台程序进行开启和关闭。

（4）分布式处理参数：

以拓扑图形式对搜索机、爬虫等信息的增加、修改和删除，维护各服务器的相关信息（包括IP地址、用户名、密码和机器编号）等。

（5）系统运行参数配置:

对网站发现、web爬行、客户端爬行程序进行数据连接配置和运行参数的维护等。

4.1.4系统管理

系统支持协调统一的调度功能，具体如下：

（1）网站发现模块调度：

监控网站发现功能运行状态，包括程序运行时间，已扫描的IP数，平均扫描速度，平均扫描结果、网站爬行模块运行的剩余时间估计，系统资源占用情况，如CPU、硬盘、内存占用情况等。

即时获得网站发现的数据，包括已发现网站数等。

提供手动开启关闭网站发现的功能。

（2）Web爬行模块调度：

监控web爬行功能运行状态，包括程序运行时间，已爬取网页数，平均爬取速度，平均流量、web爬行模块运行的剩余时间估计，系统资源占用情况，如CPU、硬盘、内存占用情况等。

即时获得web爬行的数据，包括已爬行网站数等。

提供手动开启关闭web爬行的功能。

（3）客户端爬行模块调度：

监控客户端爬行功能运行状态，包括程序运行时间，已爬取资源数，平均爬取速度，平均流量、客户端爬行模块运行的剩余时间估计，系统资源占用情况，如CPU、硬盘、内存占用情况等。

4.1.5统计报表

提供BT、emule/edonkey、P2P直播/点播的站点分布显示，用户分布显示等，对于不同属性的站点采用不同的颜色标注。

支持拖拽及放大缩小功能。

1）BT、eDonkey/eMule、P2P直播/点播发布站点GIS显示：

在世界地图中采用“洲－国家”模式两级显示。

可以在世界地图上显示BT、eDonkey/eMule、P2P直播/点播站点的分布情况。

在中国地图中，按照省和直辖市进行两级显示。

可以在中国地图上显示BT、eDonkey/eMule、P2P直播/点播站点的分布情况。

在地图中，若选单个网站则提示网站信息，如URL、IP地址、地理位置和热度值；

选择多个则显示网站个数、地理位置和平均热度值；

并显示网站的ISP/ICP信息。

2）给定种子、链接、节目的发布者、下载者GIS显示：

显示给定种子、链接、节目的发布者、下载者分布；

系统可对只下载、只上传和既上传又下载三类Peer进行分颜色显示。

5场地及技术要求

对系统安装场地环境作出如下要求：

5.1环境要求

5.1.1室内设备运行环境

机房环境温湿度：

温度：

冬季：

20±

<

2℃>

夏季：

23±

温度变化率≤<

5℃>

/h

相对湿度：

30%±

5%

5.2场地要求

5.2.1室内设备场地

机房真实地面应平整光滑，不起尘。

机房内应铺设防静电活动地板，地板高度为300～400毫米，活动地板系统对大地的电阻为106～1010欧姆。

机房内墙面应刷乳胶漆或喷塑。

机房建议采用双层密封玻璃窗。

机房天花板应采用不起尘、不掉渣材料。

机房内所有装修材料应采用防火材料。

机房内如有水管、暖气管等，应采取防漏水措施。

机房内应装有温感、烟感报警装置，并配备灭火装备。

5.2.2供电要求

电源标准：

单相三线制

电压：

220V±

0.5%

频率：

50Hz±

0.5Hz

用电量：

1000W

成都广播电视局信息网传播视听节目监管子系统要确保24小时不间断供电。

建议采用双路供电。

照明用电应和动力分开。

电源插座要符合电工标准。

5.2.3接地要求

允许与其它系统共用接地极，但不能共用接地引线。

电源零线与安全保护地线之间的交流串扰电压不大于2V。

本要求未尽事宜请参照国家有关标准。

6工程进度安排

6.1总体目标

项目的总体目标是以国内外主要IC卡智能收费系统及应用为主要对象，高起点高目标。

产品设计开发评审、验证率达100%，申请软件著作权一项，验收一次通过。

6.2项目实施计划

项目的实施拟分为三个阶段进行。

具体安排如下（见下表）：

表7-1项目的实施计划

阶段

具体内容

时间安排

需求分析阶段

招标、方案设计、初步设计，编写详细的《需求分析说明书》，提出项目的新增需求建议书，对业务需求范围、技术指标、开发周期要求等方面做简要概述，进入项目启动阶段和需求分析阶段。

2008年11月～2008年12月

系统设计与升级V1.0版本阶段

将已经开发完成的华煜宏博IC卡智能控制器收费系统V1.0开发升级为V2.0

2008年12月～2009年2月

系统优化阶段

在此过程中，为确保项目按时、按量、保质完成，将控制任务和跟踪里程碑。

2009年3月～2009年6月

系统测试阶段

撰写测试报告，对系统进行测试

2009年7月～2009年12月

V2.0系统全线试运行阶段

系统试运行，系统软硬件调优。

继续跟踪和分析P2P协议，不断增加对不同协议的支持。

2009年12月～2010年5月

系统正式运行和交付阶段

系统试运行通过评审后，进入正式运行阶段。

2010年11月

6.3项目实施组织

为了做好面向华煜宏博IC卡智能控制器收费系统的实施工作，拟成立项目管理小组和项目执行小组，以有效的组织机构保证项目工作的顺利进展。

同时，要及时派出技术人员协同设备供应厂商的技术人