【独家观察】从广电大数据公司筹备会看广电行业大数据面临的问题与解决

2015-10-26 16:08:34来源:DVBCN数字电视中文网 作者:DVBCN主编 李远东热度:
ICTC 2015前一天,2015年10月26日,广电大数据公司筹备会在杭州召开,此事件对于行业的发展具有重大的意义。
 
广电行业对于大数据分析的应用已经成为一种必然趋势,其发展势头非常强劲。大数据驱动不仅是广电网络运营商增强业务能力与网络能力的方式,更重要的是,大数据驱动能促使广电网络运营商切实学习和领会互联网的思维,真正实现以用户为中心、多维度了解用户,实现数据化运营,借助大数据中蕴含的价值和动力将转型发展落到实处。
 
1、发展优势
 
1)运营商掌握的数据完整、全面,多年运营的积累,数以亿计的用户基数,相比互联网公司,这些数据的用户数据有着明显的优势:一是用户实名与真实详细的个人基本信息等;二是家庭位置/地址信息;三是业务信息。保证了数据的海量性与多样性,为拓展基于大数据的业务提供良好的基础。
 
这些数据正是最具战略性的资产,使得广电网络运营商在利用大数据方面具有天然优势。但是,没有管理的数据就像埋藏在地下的矿产,价值无法体现。由于当前没有全局性大数据管理体系,广电网络运营商现存数据呈现出碎片、割裂和孤岛状的特点。
 
根据Gartner的预测,2015年中国大数据市场规模将达到100亿元。对于运营商来说,海量的用户业务数据,能够为各行各业提供末梢消费者的行为分析和结合地理信息的数据分布,从而衍生出形式多样的商务模式。
 
2)可持续地获得相关数据。双向宽带网络的建设与不断地升级,为数据收集提供良好实时性和持续性,可以为基于大数据的业务拓展提供持久的数据源。广电网络运营商可以对网络进行系统地建设、升级、维护,拥有了网络也就意味着拥有了网络上面实时的数据,这样就使运营商具有得天独厚的优势,只要在网络接口节点处加装采集系统,并通过DPI技术即可持续、实时地获取所有网络上面的数据。
 
3)海量数据处理技术日趋成熟,开源技术的应用使数据处理能力和处理效率大幅提高,而相关投入成本较传统数据处理技术大幅降低。近年来,以Hadoop为代表的开源数据处理技术得到众多大公司的推崇,核心技术日臻完善,并且在众多互联网公司中得到广泛的普及应用。
 
4)广电网络运营商已经进行了多年的信息化建设工作,相关业务的运营、支撑都已经基本实现自动化,并具有庞大的系统研发、运营和维护人员队伍,为发展大数据相关业务提供了良好技术环境和人才资源。
 
2、面临的挑战
 
1)运营商虽然拥有众多的优质数据,但由于早期建设模式等,数据虽多,但各类数据分散到多个平台中,同类数据又分布到不同的地域,彼此孤立,整体看来是为数众多的数据孤岛,资源无法共享。
 
2)数据处理种类多,单一技术难以实现。各数据系统数据模型不统一,只具备结构化数据处理能力,无法支持半结构化及非结构化数据处理,无法满足互联网业务发展要求。
 
3)目前,运营商缺少大规模的数据支撑平台,多数平台都是为特定业务定制搭建的,并且同一类业务的支撑平台又呈现出不同的分布地域态势,造成支撑平台处理能力有限,很难满足海量数据处理能力的要求,需要针对数据类型或业务类型进行整合,建立具有海量数据处理能力的全国性业务支撑平台来支撑大数据的发展。
 
4)用户隐私泄露问题。目前,人们对于隐私问题越来越重视,数据公司掌握大量数据和数据制造者要求隐私权之间的矛盾,使得大数据应用变得困难。由于运营商收集到的数据部分与用户自身相关,因此,隐私问题是必须考虑的,特别是在当今用户越来越重视自我保护的时代。如何提供可靠的安全机制,确保数据不会丢失、泄露,也是需要深入研究的问题。
 
5)尚未确立商业运营模式。运营商掌握的数据很多,但是这些数据应该怎样应用、给谁用、应用收益是否可以抵消数据开发分析的成本,这一系列问题也让运营商非常困扰。
 
3、可行的发展策略
 
运营商大数据策略的核心在于从这些数据中挖掘价值:
 
在市场层面:通过大数据分析用户行为,改进产品设计,并通过用户偏好分析,及时、准确且有针对性地开展营销与维系,不断改善用户体验,增加用户信息娱乐消费额度以及对运营商的黏度;
 
在网络层面:通过大数据应用来分析网络流量及流向变化趋势,及时调整资源配置,同时还可以分析网络日志,进行全网优化,不断提升网络质量与网络利用率;
 
在企业经营层面:可以通过业务、资源、财务等各类数据的综合分析,快速准确地确定公司经营管理和市场竞争策略;
 
在业务创新层面:在保障用户隐私的前提下,可以对数据进行深度加工,对外提供数据分析服务,为企业创造新的价值。这样,大数据将助力运营商实现从网络服务提供商向信息娱乐服务提供商的转变。
 
其中,大体上可从如下方面应对:
 
1)对数据进行集中。目前国内运营商传统的业务发展模式是分布式的,这样虽然具备地缘优势,但造成数据、很多、很杂、分散、无法聚类。数据集中是发展大数据需要解决的首要问题,对此,广电网络运营商可以参照互联网公司的方法,对数据进行聚类,然后从省分逐步上收,通过集中的数据中心集中存储,以为大数据平台所用。
 
2)建设大平台进行有效支撑。由于大数据属于海量数据的范畴,处理的数量级达到PB级别,因此,需要建立基于海量数据的高效的处理平台,而目前国内广电网络运营商的平台多为地域级平台,处理能力有限,难以达到支撑大数据的水平。所以,发展大数据需要集中建设数据处理平台,可以按照业务类别进行统一设计、集中建设,也可以参考国内互联网公司的方法,集中开发基础性大平台,实现多个业务共享基础数据,以最终实现大平台的统一支撑。
 
3)在管理流程与组织架构上进行支持,以保证大数据业务可以协调、稳定地开展。大数据对国内运营商而言属于新事物,海量数据处理、大数据的应用、大数据平台的支撑等方面均需有专业的团队去研究、探索,此方面,可以参考国外运营商,建立专业的研发中心,集中推动业务发展。
 
4)加强数据隐私保护,提高系统与业务的安全级别。
 
此方面可参考国外运营商的一些有效方法与成熟经验:
 
个人信息隐匿——把被认为是“个人”的数据通过处理,使之无法还原到用户本人,以此规避隐私保护的法律风险。
 
实现宏观统计数据的商业化。数据的提供者和使用者均按照规范的商业模式进行操作,同时接受监管,以避免引起争议和法律风险。
 
实现用户信息使用的授权化。对用户信息的使用,要建立在用户拥有选择权和知情权的基础上,用户可以通过授权使用来享受或拒绝相关服务。
 
此外,还可通过技术手段(比如可以提升系统软、硬件的安全等级,对重要的信息系统实施安全测试一票否决制,将网络漏洞带来的风险降低到最小程度)来规避泄露风险。另外,由于国内针对信息安全已经立法,运营商可以据此对内部以及其他相关人员进行普法宣教,以降低数据隐私泄露的风险。
 
综上,基于大数据信息服务成功的关键点有两个,一是确保个人行为数据中敏感信息的脱敏,二是在供需信息匹配时,要遵顺供方信息向求方发布,而不应该把求方信息发布给供方。目前,广电行业“海”量数据尚未形成有效的信息资产,其中蕴含的价值和机会还有待发掘。运营商可聚焦自身真实、特殊的数据资源,增强大数据分析挖掘技能,提升经营效率、提升网络质量、盘活战略资产,使数据价值最大化。大数据的发展需要产业链的开放和更大范围的数据聚合,为此,运营商可与产业各方共同合作,打造广电行业大数据生态圈,实现开放式的合作共赢,使大数据最终成为广电业发展的新引擎。

责任编辑:饶军

为您推荐

全国广电电子商务平台建设的构想(上)

概述目前,我国广播电视系统还没有完成网络整合,网络的规模效益难以形成,国家和省广电骨干网络的开发应用受到了很大的局限;各地的网络基本上是各自为政,节目平台建设缺乏统一的规划,网络及内容资源的优势没有发挥出来,网络的互联互通依赖于电信运营商。这种态势是非常危险的。一旦政策发生变化,广电系统的节目资源不再有垄断地位,那么广电的优势就会丧失殆尽。为此,本文做出构想:(1)启用全国及各省骨干网,建立统一的广电骨干传输平台,把它作为国家信息化基础设施网,在其上首先实现广电系统内部的互联互通;(2)建立各种应用平台,整合广电系统的内容(节目)和网络资源,建立统一的电子商务认证体系,建设广电系统的数字电视电

全国广电电子商务平台建设的构想(下)

本文作者毛卫兵先生,清华大学自动化系工程硕士研究生,莱州市广电网络信息服务有限公司总经理;周毅先生,中广影视传输有限公司总工程师;徐文立先生,清华大学自动化系教授。国家广电网络互联互通的实现鉴于IP将成为全球通用的传输协议,可以考虑在广电骨干网上统一采用IP技术,包括IPoverSDH、IPoverDWDM等。到达服务平台的中心机房后,用高端路由器实现和本地宽带多媒体综合业务网的无缝对接。在发达地区,SDH网络已经连通到了县。如果这些县的HFC网络具有相当的规模且拥有比较庞大的用户群,就可以考虑把服务平台建到县级。如果SDH网络没有延伸到县,则要视该县网络建设和用户数量的情况来确定,如果条件不

山西广电多媒体局视频直播系统方案

一、用户需求1、山西广电多媒体公司有下属四公司,因此需要通过该系统在Internet/Intranet上进行实时音视频传输。每个分公司都有众多的用户来收看公司直播节目。2、公司将利用这套系统实现新闻发布会、商贸展览、商业宣传、开业典礼、员工聚会、公司庆典等网上现场直播,使之被全公司员工以及外地客户资源共享。3、山西广电多媒体总公司希望能够通过本系统,可以对下属四公司员工以及自己的客户进行远程培训,从而降低公司的运营成本,提高网络投资价值。4、其它需求:·一期400路并发,二期扩充到1000路并发;·接收到音视频质量高,声音连续、不花屏、没有丢帧现象,系统资源的占用率低;·支持直播