智慧民生融合服务平台中的大资料应用

摘要：浙江华数基于三屏融合的智慧民生融合服务平台研究了面向多屏终端的智慧民生业务。研发了一套支援三屏融合、多应用接入、综合服务管理的智慧民生融合服务平台专案，实现了应急广播、政务公开、资讯服务、平安监控、智慧预警 5 类典型功能应用。在市县子公司进行了示范应用。主要描述在智慧民生融合服务平台中大资料技术的应用。

关键词：智慧民生；三屏融合；资料储存

1 概述

智慧民生是人们日常生活不可或缺的一部分，智慧民生产业将会是一个新的投资热点。特别是在中国，经济的快速发展，带动了中国智慧民生产业的崛起。而中国-加大了对智慧民生产业的扶持力度，所以中国的智慧民生产业，将发展成为中国的支柱型产业，成为中国经济的又一个崛起点。

智慧民生服务是以现代服务与资讯网络融合，以智慧终端为载体，联通网络服务社会和现实生活需求，面向广大群众提供文化娱乐、生活消费、社群公益、安防监控、健康保健等综合服务的一种跨行业新兴服务形态。智慧民生服务产业是网络化、资讯化、智慧化与服务化融合发展的新兴战略产业，是服务业的重要组成部分，是服务解决方案研制与模式研究的重要内容。

三屏融合是一个新兴产业，指将电视、PC和移动装置端的内容联合起来，为内容的扩充套件、广告的投放、消费的促进、大资料探勘等提供更多可能。国内外市场正如火如荼地发展，三屏融合将把内容消费带入一个新的高潮，改变普通消费者的生活习惯。

2 智慧民生平台架构

智慧民生融合服务平台专案[1]基于服务架构体系，汇集覆盖民生基础资讯、监管资讯，通过智慧化服务终端进行多融联动展现，为居民及管理人员提供多元化智慧服务。平台架构图如下图1所示。

图1 智慧民生平台架构

3 大资料技术应用

3.1 目标

建立覆盖多应用、多埠、多格式的大资料融合与分析模组，负责采集、储存、整理、分析归纳多屏来源的业务资料，基于机器学习算法，过滤无关资讯，提取使用者业务行为特征，预测业务需求，支援相关服务。系统实时监测不同区域的摄像头、拾音器、人员定位以及其他感测器反馈的资讯，综合分析判断危险事件发生的可能性，及时释出预警，排程邻近区域的安全服务能力，提供监控、预警、指挥、协调服务。

支援主流的云平台、大资料技术，采用BS架构，方便使用者快速录入，呼叫方法快速获取。前端，界面风格统一，操作界面简洁、直观，符合使用者习惯。通过构建统一的资料界面平台，实现各类资料资源的融合。界面录入到界面上线或者界面作废，都有相应管理功能模组。安全高效的许可权管理系统，许可权管理可精确到具体的界面，不是开发者本人录入的界面其他使用者不可见或者无权进行修改和删除。支援多种界面型别：目前支援的界面型别有：WebService、REST。

建立全过程资料管理系统，涵盖资料采集、处理、管理、加工、服务等整个生命周期的管理，按照资料格式、来源、安全级别等分别进行规划、储存、使用。

3.2 关键技术

（1）资料采集技术：利用ETL工具将分布的、异构资料来源中的资料如关系资料、平面资料档案等，抽取到临时中间层后进行清洗、转换、整合，最后载入到资料仓库或资料集市中，成为联机分析处理、资料探勘的基础；或者也可以把实时采集的资料作为流计算系统的输入，进行实时处理和分析。

支援多种资料来源：

①格式化资料，包括数据库、资料档案等；

②非格式化资料，包括档案、图片等；

③多媒体资料，包括视讯、音讯等；

④流媒体资料，支援摄像头等实时视讯流的接入。

（2）资料储存和管理：利用分散式档案系统、资料仓库、关系数据库、NoSQL数据库、云数据库等技术，实现对结构化、半结构化和非结构化海量资料的储存和管理。相关示意如图2所示。

图2 资料储存和管理示意

使用FastDFS分散式档案系统储存、同步、访问（档案上传、下载）系统相关的图片、附件等档案。FastDFS是一个开源的轻量级分散式档案系统。它解决了大资料量储存和负载均衡等问题。FastDFS服务端有两个角色：跟踪器（Tracker）和储存节点（Storage）。跟踪器主要完成访问排程工作，在访问上起负载均衡的作用。

储存节点储存档案，主要完成档案管理的功能。通过储存、同步和提供存取界面，FastDFS完成对档案的Metadata进行管理。所谓档案的Meta Data就是档案的相关属性，以键值对（Key Value）方式表示，如：Width=1024，其中的Key为Width，Value为1024。档案Metadata属性主要包括档案属性列表，它可以包含一到多个键值对。

跟踪器和储存节点都可以由一台或者多台服务器构成。跟踪器和储存节点中的服务器均可以随时增加或下线而不会影响线上服务。其中跟踪器中的所有服务器都是对等的，可以根据服务器的压力情况随时增加或减少。为了支援大容量，储存节点（服务器）采用了分卷（或分组）的组织方式。一个或多个卷组成额储存系统，卷与卷之间的档案是相互独立的，整个储存系统中的档案容量就是所有卷的档案容量累加。一台或多台储存服务器组成了一个卷，一个卷中的储存服务器中的档案都是相同的，多台储存服务器起到了对于卷的冗余备份和负载均衡的作用。

如果储存容量不足，可以在卷中增加服务器，这时候已有的档案由系统自动同步完成。同步完成后，系统会自动将新增服务器切换到线上提供正式服务。当系统的储存空间不足或即将耗尽时，可以动态添加卷。只需要通过新增一台或多台服务器，并将它们配置为一个新的卷，就可以方便的扩大储存系统的容量。

（3）资料处理与分析：利用分散式并行程式设计模型和计算框架，结合机器学习和资料探勘算法，实现对海量资料的处理和分析；对分析结果进行视觉化呈现，帮助人们更好地理解和分析资料。

①采用索引技术，在界面数量增大之后仍然可以保证页面响应迅速，增强使用者体验，根据界面状态进行分类，便于快速定位界面。动态生成WebService，界面录入以后即在UAT环境中动态生成测试界面，方便发开者进行呼叫。

②优化流量资料分析，针对人流、客流、车流等，系统融合了影象处理、视讯分析、模式识别等多个领域的技术。这种技术要比人工、红外感应等传统的统计方式，具有统计准确、施工简便、功能多样、操作方便等特点。这种统计技术主要应用于对出入口的人流、客流、车流数等资料进行统计，得到该出入口进出的数量。

4 相关应用

应用场景举例：平安监控、智慧预警业务[2]中，对〖LL〗多来源的动态资讯（如监控音视讯、人员位置、车辆资讯等）进行实时追踪，结合历史资料和地理资讯系统，预测盗抢犯罪、群体冲突、拥挤踩踏等危险事件发生的可能性，启动应急机制，通过应急广播、手机端预警资讯释出来引导人群避难，释出灾害预警，震慑违法犯罪，协调救助支援等。应用如图3所示。

图3 相关应用示意

5 小结

浙江华数作为省级广电网络运营商，智慧化、服务化经营是浙江华数站稳市场，应对竞争的有力武器。以现代服务与资讯网络融合，以智慧终端为载体，联通网络服务社会和现实生活需求，通过应用示范，打通智慧民生服务领域，面向广大群众提供应急广播、政务公开、资讯服务、平安监控、智慧预警等智慧综合服务，实现多领域服务资讯的整合和共享。以数字电视机顶盒、PC、手机、其他智慧终端多屏为载体，构建以-、社群、市民为主体的资讯资源互动共享平台，实现社会事业与公共服务智慧化，让市民享受到智慧化带来的个性化服务。

参考文献：

［1］周芸.基于三屏融合的广电智慧民生平台研究[J].中国有线电视，2018，（03）：237-240.

[2]严奎，高春娟.基于广电智慧家庭面向多终端的可信网络互通共用技术的研究.[J]广播电视资讯，2017,（04）：62-64.

来源：中国有线电视 文：高春娟，王斌 (浙江华数广电网络股份有限公司)

阅读是一种智慧，分享是一种美德，更多精彩尽在广电视讯微信公众号（ccatvcom）。