大数据监测监管是针对互联网视听节目、互联网舆情、移动互联网视听内容、网络出版物、手机APP内容等不同监测领域于一体的一套可扩展的智能监测解决方案，主要包括“全网无证网站视听节目监测系统”、“持证网站视听节目监测系统”、“'两微一端'视听节目监测系统”、“网络直播内容监测系统”、“网络文学监测系统&rdquo、“游戏APP监测系统&rdquo、“互联网舆情监测系统&rdquo、“手机APP内容监管系统&rdquo、“IPTV节目内容监管系统”等产品，分别针对不同监测范围和不同监测内容，充分考虑技术上应有的主动性和先进性，在自动发现、下载、取证各类互联网内容的基础上，充分利用现代计算机文本内容分类、自然语言处理、音视频内容分析等模式识别算法，对下载的互联网内容进行智能化的自动审核判定，通过良好的人机交互界面实现主动、高效的互联网内容综合监测。
（一）全网无证网站视听节目监测系统：
针对全网无证网站，主要面向各互联网信息发布平台进行违规视听节目的智能采集与内容分析研判，监测目标范围主要包括:各大主流搜索引擎、微博搜索、网盘搜索、磁力搜索、微信公众号等。系统综合利用视听节目链接有效性进行研判、文本分级词库（敏感词加密显示）检索、音视频图像内容分析技术等多种技术手段，较传统关键词的方式大幅提升违规研判的准确率。
传统的监测方式需要先搜集辖区内的无证视听网站，然后选择部分无证网站，由技术人员创建爬虫模板后才能完成数据的采集与监测；因此传统的监测方式不仅无法做到无证视听网站的全面覆盖，而且需要耗费大量的硬件资源以及网络带宽资源，同时搜索周期长，一般需要1至2天；互联网80%以上的信息来源于主流的传播平台与发布渠道，因此系统能够以小的代价在15分钟内完成辖区内敏感视听节目的全网搜集与准确过滤，此外多种技术手段进行违规复筛，能够保障自动将准确的敏感视听节目推送给用户；
（二）持证网站视听节目监测系统：
系统自动采集持证网站全站视听节目，对持证网站视听节目进行全方位的深入分析，主要包括：板块分布情况；日新增节目的发布趋势，节目发布时段分布；违规板块分布、违规发布者分布、违规类型分布；违规节目发布趋势、发布时段分布等。系统通过黑白名单及违规词反衍自学习、文本内容初筛、音视频图像内容复筛等多种研判手段，显著提升研判准确率。此外，系统独创的四画面监听监看模式，大幅提升了人工复审的效率，并提供日常监听监看工作量考核体系。
系统采用“后厂+前店”的工作模式，结合完备的敏感节目库以及内容智能分析技术，应用分析完全贴合广电总局的相关业务要求。
（三）“两微一端”视听节目监测系统：
系统通过网络爬虫自动搜集涉“我”的微博账号、微信公众号，涉“我”手机APP视听应用，微博、微信公众号中发布的视听节目，手机APP应用中发布的视听节目，通过违规专题配置与管理、违规视听节目监测、违规视听节目综合检索等核心功能，生成统计分析与报表。公司具备丰富的“两微一端”数据采集技术经验，能够确保数据的查全率，除广电领域外相关产品在安全领域也已实际落地应用。
（四）网络直播内容监测系统：
系统利用互联网爬虫对直播平台中的热门播主、直播房间等信息进行主动搜集，对于观众较为密集或数量呈激增趋势的播主或房间能够主动提醒用户实施关注，从而辅助用户在一定程度上实现网络直播服务平台的日常监管。系统核心功能包括：（1）热门主播自动发现与管理；（2）疑似违规播主分析研判；（3）敏感直播房间追踪分析。该系统兼容直播网站与直播APP应用中的直播内容监测；能够通过涉黄涉暴图像检测对直播视频中的违规图像自动追踪，主动发现直播过程中的违规情况并报警；能够对直播过程中的违规视频进行自动取证。目前，该系统已在两会期间发挥重要作用。
（五）网络文学监测系统：
网络文学监测系统针对互联网中传播的文学出版物，重点针对网络小说、漫画、有声小说等。系统首先采用先进的网络爬虫与下载技术，在自动发现、下载、取证各类出版物内容的基础上，然后充分利用涉黄涉暴图像识别、字符识别、语音识别、文本比对等技术，对下载的相关网络文学出版物内容进行智能化判定，实现主动高效的网络文学监测。系统自动对网站内的网络文学出版物中是否含有违规内容进行分析研判与自动下载取证。系统自动对含有违规内容的网络文学出版物进行持续监测，以检查违规内容的删除情况，如未删除，则督促其尽快删除。系统自动对网络文学出版物的传播热度、传播违规内容等情况进行统计分析。
系统采用语音识别技术将有声小说识别翻译为文本形式，能够自动发现有声小说中的敏感内容；
系统采用字符识别技术对图片中的文字进行识别，能够自动发现图片文字中的敏感内容；
系统采用涉黄涉暴图像识别技术主动发现网络出版物中的涉黄涉暴内容；
系统的涉黄图像识别支持“成人漫画”的自动识别，且识别准确率高。
（六）游戏APP监测系统：
网络文学监测系统针对互联网中传播的文学出版物，重点针对网络小说、漫画、有声小说等。系统首先采用先进的网络爬虫与下载技术，在自动发现、下载、取证各类出版物内容的基础上，然后充分利用涉黄涉暴图像识别、字符识别、语音识别、文本比对等技术，对下载的相关网络文学出版物内容进行智能化判定，实现主动高效的网络文学监测。系统自动对网站内的网络文学出版物中是否含有违规内容进行分析研判与自动下载取证。系统自动对含有违规内容的网络文学出版物进行持续监测，以检查违规内容的删除情况，如未删除，则督促其尽快删除。系统自动对网络文学出版物的传播热度、传播违规内容等情况进行统计分析。
主动搜集辖区内相关的游戏APP信息，并通过文本分析、视频图像分析等技术对于游戏的简介、宣传海报等内容进行分析，能够主动发现疑似含有违规内容的游戏APP，从而提醒用户进行关注，在一定程度上实现游戏APP违规内容的日常监管。主要包括两个核心功能：
（1）游戏APP自动发现与管理
针对游戏APP门户网站，系统主动搜集省辖区本地或用户指定条件的相关游戏APP信息，用户可通过游戏APP自动发现与管理模块对系统自动发现的游戏APP软件信息进行管理操作。可查询系统搜集到的游戏APP软件的相关信息。
（2）疑似违规游戏APP自动研判与审核
结合“违规知识库”以及淫秽色情图像识别技术，能够对游戏APP中的文本以及相关图片进行自动鉴别，将其自动研判为违规或非违规，由人工审核后提交系统保存。
（七）互联网舆情监测系统：
网络文学监测系统针对互联网中传播的文学出版物，重点针对网络小说、漫画、有声小说等。系统首先采用先进的网络爬虫与下载技术，在自动发现、下载、取证各类出版物内容的基础上，然后充分利用涉黄涉暴图像识别、字符识别、语音识别、文本比对等技术，对下载的相关网络文学出版物内容进行智能化判定，实现主动高效的网络文学监测。系统自动对网站内的网络文学出版物中是否含有违规内容进行分析研判与自动下载取证。系统自动对含有违规内容的网络文学出版物进行持续监测，以检查违规内容的删除情况，如未删除，则督促其尽快删除。系统自动对网络文学出版物的传播热度、传播违规内容等情况进行统计分析。
系统能够实时搜集互联网的海量舆情信息，包括各新闻门户网站、论坛、博客、微博、贴吧、播客、各搜索引擎、微信公众号、外媒、平媒等，也可定制本地化的目标网站，纳入舆情采集范围。
系统构建一个核心涉广电舆情知识库：具有完备的涉广电舆情知识库，内容涵盖涉广电人物、机构、政策法规、敏感节目、涉广电微博账号，涉广电微信公众号等各个方面。
系统基于成熟的舆情研判技术，自然语言处理技术（主要包括大规模文本排重、垃圾文本信息过滤、文本分类、聚类、文本情感分析、专题影响力分析、代表性话题聚类提取、人物/组织抽取技术），为互联网舆情智能化的整理分析、统计编报提供有效的技术保障；
系统将情感分析技术与代表性话题提取技术相结合，统计分析网民对某舆情事件的褒贬倾向分布情况以及正负面代表性观点，能够帮助用户更准确地了解关于某舆情专题的社情民意；
目前已广泛应用于国家新闻出版广电总局等各个舆情监测领域。
（八）手机APP内容监管系统：
手机APP内容监管系统综合利用互联网爬虫、文本分析、语音识别、关键词检索等信息采集与分析技术，实现对手机APP中的文本（包括文章、帖文、评论等文本内容）、视听节目内容进行自动采集抓取与分析，按照用户的各种业务要求，主动发现手机APP中发布的违规内容。
（九）IPTV节目内容监管系统解决方案：
系统支持来源合法性监测和内容合法性检测两个核心功能。
（1）直播节目来源合法性监测
分别在播控平台出口②和用户终端⑤分别对直播节目实时采集存储后，通过音频/视频模版比对技术对直播节目进行比对分析，以及时发现直播节目中被非法篡改的节目，进而对直播节目的来源是否合法进行监测。
（2）点播节目内容合法性监测
在用户终端⑤，对点播节目进行采集存储，进行智能分析，以便自动发现非法的IPTV点播节目内容，例如判断节目视频中是否含有淫秽、暴力、反动、危害社会稳定等各种违规内容。 |
