云计算和大数据这两个词已经更多地被放在一起讨论,而从应用角度看,大数据更能挑动用户的神经。目前,并不是所有的企业都面临着大数据的困扰,但是拥有着几千万甚至几亿客户的运营商,大数据所带来的问题日益显现。日前在Teradata主持的第四届中国云计算大会云计算与大数据分论坛上,上海电信和广东移动的嘉宾就分享了其各自在大数据层面面临的挑战。
而云计算被运营商作为解决大数据问题的一个法宝,其中广东移动为此就带来了好几片云。在当天的论坛上,除了解决大数据问题,云计算还促进了运营商新业务的拓展。如上海电信的基于DPI的创新服务和基于OIDD数据开放提供的创新服务等。
运营商记录人们的行为 大数据带来挑战
电信运营商的行为与现代人们的生活、工作都已是紧密相连,在提供更多服务的同时,运营商也成为现代人行为的记录。中国电信上海公司资深经理兼副总工程师王思伟就用了一句话来形容运营商和人们生活的关系:电信运营详细记录了人在现代化社会的信息指纹。
从电话号码、通话记录和上网记录,到基于手机定位、流量和内容分析等,无一不记录着人们的行为。
对于这些数据背后所隐藏的价值,运营商并没有进行很好的挖掘。王思伟指出其实很多人都可以想象这些数据怎么去发挥价值:一、复合关联,即把分散在网络中各个环节的数据汇聚拼接处用户真正的全貌;二、泛在挖掘,把握单个用户的真正需求,挖掘潜在用户群的行为特征;三、快速实时,能及时的反映到对用户的服务上。
“但是理想很丰满,现实很骨感”王思伟用一个数据说明了实现以上三条的难度:现有DPI的分析仅仅是每天400GB数据仅用作几张报表。
据悉,上海电信每分钟有8万条位置更新信息、每小时近300万次移动电话呼叫、每天70-100TB及30亿次点击的互联网访问量。
这样的大数据量对于电信运营商会带来哪些挑战呢?王思伟指出这个挑战也是来源于如何更好地应用大数据中发现的,一是希望将数据汇聚形成信息资产,但是海量数据成本太高;二是进行数据挖掘以丰富资产内涵,但是目前数据挖掘的手段很匮乏;三是开放数据以提升资产的价值,但是事实是数据经营的困难重重。
其实王思伟所表现出的对于大数据的又爱又恨,是很多其他领域的企业也会面临的情况。一方面是会说话的数据可能会带来的价值,一方面又是让数据开口说话的难度和成本都过高。
云计算的有容乃大会解决这种矛盾吗?
面对大数据带来的如此多的挑战时,田思伟也依然强调大数据经营的重要性,“这也是电信转型的必然方向。”
以前的运营商更多的竞争是在管道层面,但是未来电影运营商应该会具备更多的角色,“智能管道主导者、综合平台提供者、信息服务参与者”这是田思伟描述的电信的目标。
这个转型方向也更多地体现在最大限度挖掘数据的价值,让数据进入商用。而云计算在其中的角色将尤为关键。因为云计算,大数据的广泛应用从而成为了可能。
分布式数据存储,使得基于复杂数据体系的数据应用成为可能。1、容量大,支持海量存储;2、扩展好,支持平滑扩容;3、安全高,不受制于硬件的损坏;4、易用强,VFS兼容层。
分布式计算,使得海量数据的及时处理成为可能。1、能力高,可线性扩容处理千兆字节数据;2、成本低,可应用普通服务机器群;3、效率高,可在数据所在的节点并行的处理;4、可靠强,可自动地维护数据的多份复制。
田思伟总结到:“云计算使得海量、非结构化大数据的流式实时处理成为可能。”
目前中国电信也在利用这些数据的价值可以提供更加创新的信息服务。在打造信息资产方面,需要更多地考虑资产规范化、资产显性化、资产价值化、资产经营化,“为做好这几个方面,需要制定数据资产规范、构建数据弹性汇聚平台、构建数据按需分析平台和构建数据开放经营平台。”
据介绍,目前中国电信有基于DPI的创新服务:公益服务,即基于用户位置的公众信息通知,如地铁信息;电子渠道,即基于客户行为分析结果针对性推送信息的客户服务,存量产品营销及新产品调研;咨询服务,即基于DPI统计数据的互联网指数,用户分析报告和市场分析报告;精准广告,即基于DPI的互联网精确推送和点击记录。
而在基于OIDD数据开放提供的创新服务上,中国电信也做了些相应的探索,诸如商圈信息、精准广告、绿色上网和防毒墙等。
电信运营商已在更多地利用云计算将大数据转化为自己的业务竞争优势。
当天的另一家运营商中国移动通信集团广东有限公司的董事长兼总经理徐龙则更加明显地将云的业务进行展开。一朵个人彩云,一方面整合了以往中国移动所提供的服务,同时根据云计算特点和利用数据的价值,衍生出更多的服务。
徐龙介绍指出,个人云服务发展思路主要包括:对内聚合,即通过飞信、社区、微博等多种业务将信息汇聚于彩云平台;对外开放,提供能力封装、第三方介入、运营等开放平台,构建开放的生态系统;特色发展,即发挥在管道、客户等方面的独特优势,走具有自身特色发展之路。
而这朵彩云又不仅仅是一个应用聚合的平台,对于用户而言,它是:一个网络存储空间、一个信息汇集中心、一个能力开放平台、一个数据挖掘的智库。
大数据是挑战也是价值,云计算是工具也是理念。
总结:在当天的论坛上,来自Teradata的通信行业解决方案资深总监姜欣也分享了其公司在数据分析层面引入云的建议,其中IDA方法论颇有代表性和实用性。“构建分析云IDA的方法论,即通过对信息的整合I、探索D,转化为行动A。”
其实运营商目前所做的很多工作也是基于此,挖掘数据的价值、经营[FS:Page]数据,让数据进入商用领域。但是随着大数据的到来、大数据的价值被开发、云计算的应用,很多风险也是不可回避的。如对于运营商而言掌握了如此众多的用户数据,如何做到保护隐私、不触犯法律,这需要运营商的全面规划,也需要法律的重视。同时,目前运营商对于数据的应用还更多地是停留在表象,如有针对性地推送服务等,而如何发挥其更深的价值则需要更多的探索,也需要更先进的技术支撑。