全面、高效的实现互联网P2P视频节目管理

网络 网络设备
P2P网络广播电视听节目监管是一项全新的管理任务,需要全新的管理手段。必须建立功能强大的监管系统,才有可能及时了解P2P网络视听节目的传播情况,也才有可能及时对问题做出处理。

【51CTO.com 综合报道】P2P的发展概况

信息网络传播视听节目, 是互联网等信息技术迅速发展而形成的新型视听节目传播方式,它使视听节目的广泛传播不再单纯依赖于传统的广播电视传输网络,从广电部门管理角度讲互联网视音频站点已经成为一种新型的播出机构。

但是随着P2P技术的成熟,并且广泛应用到视频共享和在线直播/点播视频节目上,使用P2P技术已经成为互联网视频文件传播的主流方式。由于P2P视频节目在技术实现上不同于以往的互联网视频节目,技术实现难度大,使用的协议复杂多样,而且视频节目源的传播多为网民的个人行为,节目的传播方式更加隐蔽,节目的内容更具危害性,加之网站的审核力度不大,给互联网节目的监管带来了更大的挑战,一些违规传播视听节目的P2P网站,为了屏蔽相关部门的监管,使用频繁更换域名和服务器地址、登录验证、限制用户权限、隐藏节目源链接等方式,来逃避程序对网站的自动监控,这就需要我们采用更加具有针对性的手段来获取这些节目的信息。

上述种种问题表明,P2P网络广播电视听节目监管是一项全新的管理任务,需要全新的管理手段。必须建立功能强大的监管系统,才有可能及时了解P2P网络视听节目的传播情况,也才有可能及时对问题做出处理。

实时的监管平台
 
深圳市任子行网络技术有限公司针对以上问题,鼎力研制出面向P2P的网络广播电视节目源监管系统,通过对境内利用BT、电驴等P2P协议进行文件共享和传播的重要互联网网站和论坛(以下简称P2P文件共享网站)的搜索和跟踪,对网站上的视听节目源发现、定位和传播追踪等功能。

主要目标包括:

◆ 及时发现境内互联网上的P2P文件共享网站;

◆ 对主要P2P文件共享网站上的种子和链接进行全面、周期性搜索和跟踪,发现共享的视听节目文件,并进行定位和传播跟踪,统计网站相关信息和视听节目文件资源信息;

◆ 对视听节目进行判别、分类和聚类,发现有害和违规节目进行报警,并进行重点定位、追踪、下载取证;

◆ 发现新增节目和热点节目,及时掌握网上传播动态;

◆ 建立P2P节目数据库,支持对视听节目信息的在线和离线查询,为管理部门提供有力的数据支持。 #p#

灵活的查询方式

任子行研制的该系统能提供灵活的查询方式,使用户可以方便地获取系统所采集到的各类信息,并在各类信息的基础上进行统计分析,使用户能获取各类统计分析结果,能了解P2P文件共享信息的详细和综合信息,是整个项目中用户了解各种应用发展趋势的关键功能模块。例如: 

◆查看所有P2P文件共享发布站点列表; 

◆查看当日TopN P2P文件共享发布站点(BT、eDonkey/eMule发布网站)热度排名; 

◆查看当日TopN种子/链接热度排名; 

◆查看当日新增种子/链接列表; 

◆查看当日新增发布站点列表; 

◆查看当日新增种子/链接黑名单(黑名单获取详见网络监控部分);  

◆查看当日新增网站黑名单;  

◆查看当日活跃用户列表(包括活跃度、共享资源数、拥有敏感资源数3种排名列表); 

◆查看当日资源、敏感资源传播的骨干节点列表; 

◆查看特定发布站点的相关信息,包括网站域名、IP地址、ICP/ISP备案信息、联系人、联系方式及服务器所在具体省市等; 

◆查看特定节点的信息,包括其共享的资源清单;

简单查询特定种子的相关信息,如所在发布服务器或tracker服务器信息、种子节点的信息(数量、IP地址及地理位置)、下载节点的信息(数量、下载进度、IP地址及地理位置)、做种时间、种子对应的文件信息(文件名、文件大小、文件类型、图片及简介等);

除了返回的节目表单外,用户还可以选中每一个节目源查看详细信息。如Tracker列表、文件清单等。当用户选中一个种子后,可以启动BT在线节点收集程序来收集这个种子的在线节点。 

◆简单查询特定文件的相关信息,如发布节点的信息(数量、IP地址及地理位置)、下载节点的信息(数量、下载进度、IP地址及地理位置)、发布时间、文件对应的文件信息(文件名、文件大小、文件类型、图片及简介等); 

◆复合条件查询特定种子/文件或发布站点:根据关键字、创建时间、热度阀值、发布站点、发布源IP地址等信息进行复合查询; 

◆分类显示所有视听资源:根据数据分析中的粗分类,以及视听资源的实际分类来显示节目清单,如电影、动漫、综艺、情感等类型,并对疑似非法的节目进行标注,管理员点击某一分类,就可以查看符合这一分类要求的节目清单。

注:以上功能分别针对BT、eDonkey/eMule协议。 #p#

全面的网络管理

P2P文件共享监控的功能主要是对疑似违规种子和文件进行相关处理,主要包括报警、下载存储、非法资源遏制等功能。

(1)报警

对于疑似违规的种子、文件系统会作出预警,向用户提供疑似违规种子和文件清单,并可查询相应的详细信息。系统也根据相关信息,对发出预警的种子和文件做排序,以便用户对信息进行确认得到黑名单,并关联至网站黑名单。

(2)下载存储

对疑似违规的种子和文件由管理员选择下载存储相应的文件,选择的方式包括对疑似违规的前N个资源进行存储,或用户手动选择存储内容。

在对种子或文件进行下载存储的同时,也对相关信息进行存储,以便对信息源进行追踪,起到一定的取证功能。同时进行存储的相关信息包括:种子源链接、历史Seeder、疑似违规种子所在网页的下载存储以及取证时间、疑似违规网页所在网站的ISP/ICP、违规文件下载存储以及取证时间、违规内容的存储及播放、违规文件的还原。具体含义及完成情况如下:

◆种子源链接     系统会自动记录每一个种子的下载源头,以供用户查阅 

◆热度资源扩散监控

该功能会定时(用户可以自行设置时间周期)自动启动数据收集程序,收集特定资源的Peer列表,获取特定时间下载进度达到过100%的Peer的IP地址和地理位置、下载Peer的数量等统计信息,从而对特定资源的扩散速度、扩散范围、扩散程度等详细信息进行掌握。

例如,对于某一种子A,第一次收集,有一个Peer达到过100%的下载进度,IP地址202.102.x.x,位置北京,第二次没有Peer达到过100%的进度,第三次两个peer达到100%的下载进度,则系统会向用户提供一个统计报表,分别展示在每次信息采集时的下载Peer总数,完成下载的Peer数量和其详细信息。

该功能可以很直观地了解特定资源的扩散情况,以便为管理者提供分析、决策依据。 

◆疑似违规种子的下载情况

用户可以关注疑似违规种子的下载情况,反映违规节目的扩散速度和范围,当用户需要使用时可以将其调出显示、打印,并可以根据历史数据统计分析图了解特定种子的扩散情况。

在违规种子中,下载进度超过90%的高威胁做种源以及100%的完全做种源应该被特殊标注。 

◆疑似违规种子所在网页的下载存储以及取证时间

除了将历史下载人员和做种人作为证据存储外,疑似违规种子的源链接页面也会在种子分析和判定后自动下载以及存储。 

◆疑似违规网页所在网站的ISP/ICP

在下载了疑似违规种子的链接页面后,传播该种子的所在网站的ISP/ICP信息也将被记录。有些网页在未下载种子前就已经带有违规信息,如反动,色情这样的网站也会被记录ISP/ICP信息。

◆违规文件下载存储以及取证时间

在获取了违规种子的下载人列表以及源链接页面后,另一个重要证据就是疑似违规文件的下载以及存储。在下载违规文件的同时,将记录文件的取证时间。
 
◆违规内容的存储及播放

作为违规种子取证的最后一步,将提供用户违规文件的下载和播放功能。 

◆违规文件的还原

除了将违规种子,违规种子的源链接页面,违规文件下载到本地硬盘作为证据以外,系统还将提供违规文件种子的还原功能。如果还原而成的种子与相应的违规种子完全一致,可以作为一项抗抵赖证据使用。#p#

拓展的信息资源

系统的硬件设备按照功能进行划分,后续可根据系统运行的数据、性能及功能扩展的需求,方便地进行扩展,从而最大化地优化投资。同时,可以在系统内部安装病毒安全防护软件,抵御外部病毒和网络攻击。

◆ 调用GIS显示特定信息的扩散源头、网络拓扑;

◆ 通过对热点网站的监控,以曲线图形的形式显示指定网站的历史信息;

◆ 对一些突发的热点网站进行预警;

◆ 通过热点种子、链接的监控,以曲线图形的形式显示指定热点种子、链接的历史信息.

◆ 查看特定节点的资源清单、以及该节点拥有资源的变化情况。

详细的地理信息显示

地理信息显示(GIS)模块提供直观的地理位置、拓扑结构展示,可以直接定位服务器(可以详细定位服务器所在机房)、节点的地理位置,并展示节点分布密度,使用户所关心的信息直观、清楚。该部分包括全世界及中国的与地理位置相关的信息展示。

(1)给定种子、链接、节目的发布者、下载者GIS显示 

◆在世界地图中,显示给定种子、链接、节目的发布者、下载者分布; 

◆在中国地图中,显示给定种子、链接、节目的发布者、下载者分布; 

◆在世界地图中采用两级显示,即“洲-国家”模式(例如:亚洲-中国); 

◆在中国地图中,按照省和直辖市进行两级显示,对直辖市采用“市-区”模式(例如:北京市-东城区),对省采用“省-市”模式(例如:四川省-成都市); 

◆地图的放大、缩小等操作; 

◆对给定种子的发布者、下载者分布进行拓扑分析,在P2P网络中无论是发布者还是下载者都是Peer,针对Peer下载和上传可分成三类:只下载的Peer、只上传的Peer和即上传又下载的Peer三类。为了表示它们的拓扑结构,使用三种不同的颜色对上述三种Peer进行标识;

在世界地图和中国地图中,选择点的信息提示。选择点由单个网站构成则信息URL、IP地址和地理位置;若选择点由很多网站构成显示网站个数和地理位置。

直观的日志管理

日志系统记录记录系统的所有操作日志,增强系统的安全性。系统管理员可以通过分析日志及时的发现网站中的问题。

良好的应用效果

深圳市任子行网络技术有限公司针对广电部门互联网视听节目管理需求,于2004年成功开发了《公共信息网络视音频节目监控系统》。在这几年,系统已在广电总局、广东、浙江、江苏、东北、福建等十几个节点应用,得到用户广泛好评。我们长期关注音视频节目搜索和监控,在互联网音视频节目监控方面有多年的经验积累,致力帮助全国各地更多的广电管理部门更加规范的实现网络信息的有效管理。

责任编辑:许凤丽 来源: 51CTO.com
相关推荐

2015-04-27 11:49:23

2021-09-02 19:45:21

P2P互联网加速

2016-04-25 13:02:00

2018-05-03 21:26:32

互联网保险理赔

2012-12-10 09:46:21

P2P云存储Symform

2023-03-14 12:43:57

2022-07-19 16:59:04

流媒体传输IPC物联网

2010-07-13 14:41:14

2010-03-22 15:27:40

云计算

2020-03-05 20:30:15

Syncthing文件同步工具开源

2009-07-22 15:08:34

2010-07-07 10:31:45

2009-05-18 09:11:00

IPTV融合宽带

2010-09-08 16:52:38

老板的烦恼上网行为管理

2015-04-27 14:29:53

C#UDP实现P2P语音聊天工具

2010-10-29 09:43:50

Wi-Fi DirecWi-Fi联

2012-09-25 13:47:43

C#网络协议P2P

2013-03-13 09:24:56

2013-12-12 13:46:40

大数据金融P2P大数据

2010-06-28 11:15:45

BitTorrent协
点赞
收藏

51CTO技术栈公众号