非结构化数据分析：大数据时代新价值
2014-01-28 11:00:38来源： 南方网 热度:
“大数据”是近两年来各界最热议的话题之一，和“大数据”相关的实践几乎成为所有行业在技术和商业两个方面最具创新意义的行动。在越来越多企业重视“大数据”价值的同时，新型数据的挑战也随之而来。
据IBM商业价值研究院和牛津大学赛德商学院共同发布的《分析：大数据在现实世界中的应用》显示，全球仅四分之一的受访者表示自己具备了分析高度非结构化数据的能力，而对大部分组织而言，掌握先进的非结构化数据分析能力仍是从“大数据”中获得价值的重大挑战。究竟 “非结构化数据” 与 “大数据”有何关联？哪些创新技术能够应对新型数据的挑战？
非结构化数据：新价值和新挑战
IDC研究表明，数字领域当前存在着 1.8 万亿 GB 的数据。在这之中，除了传统数据库的结构化数据，还有像文件、文献、表单、影像等无以计量的非结构化数据。
什么是“非结构化数据”？相较于记录了生产、业务、交易和客户信息等的结构化数据，非结构化的信息涵盖了更为广泛的内容，包括了如合约、发票、书信与采购记录等营运内容；如文书处理、电子表格、简报档案与电子邮件等部门内容；如HTML与XML等格式信息的Web内容；以及如声音、影片、图形等媒体内容。
目前，非结构化数据的内容占据了当前数据海洋的80%，并将在2020年之前以44倍的速度迅猛增长。同时，因为非结构化数据的信息量和信息的重要程度很难被界定，分析成为了难点。如果说结构化数据用详实的方式记录了企业的生产交易活动，那么非结构化数据则是掌握企业命脉的关键内容，所反映的信息蕴含着诸多企业效益提高的机会。因此，只有解决非结构化数据的分析困难，才能有效挖掘这些数据背后的价值，克服逐渐攀升的数据量和复杂性对企业生产发展的重大阻碍，驱动企业价值提升。
企业内容管理：突围非结构化数据
针对非结构化数据所呈现的新趋势，IBM近年来不断加深在企业内容管理（ECM）领域的实践，充分发挥信息全文检索、自然语言处理、和行业深入理解三大突出能力，为越来越多的企业找到了非结构化数据管理和分析之道。
- BJC Healthcare推进医疗研究：和大部分医疗服务提供商一样，BJC Healthcare面临大数据时代的挑战。现有的医疗信息资源与实际操作严重脱节，分散在非结构化的临床记录和诊断报告中的历史数据几乎闲置，只有少部分研究人员偶尔查阅，其隐藏的研究信息因此无法得以充分利用。通过使用IBM 企业内容管理解决方案，BJC和大学研究人员得以分析非结构化的历史存档来回答以前无法解决的关键问题。比如，患者吸烟吗？如果吸烟，那么他吸烟的频率和烟龄是多少？如果已经戒烟，那么戒烟多长时间了？患者自己用过哪些药物？患者自己对病情是如何判断的？医院曾经对患者执行了哪些治疗过程？——通过这些问题的梳理，BJC现在能够更深入地了解医疗信息，揭示病历内容中存在的趋势和模式，向患者提供更有效的医疗服务。
- 赫兹提升客户满意度：赫兹国际汽车租赁公司是全球最大并广受欢迎的租车品牌，准确识别客户关于产品、服务和员工的满意度是赫兹的关键业务。通过使用IBM 企业内容管理解决方案，赫兹能够通过分析客户的调查记录更好地识别汽车和设备租赁业绩水平，确定客户的满意水平并进行必要的调整，从而进一步改善流程。此外，内容分析结果页能够支持赫兹推出针对性的营销活动，不断调整其产品和服务来提升客户的满意度。
北卡罗来纳州立大学识别商业机会：北卡罗来纳州立大学认识到，大学的本质不仅仅是教育培训，而是以多种形式推进和传播知识。通过使用IBM企业内容管理解决方案，北卡罗来纳州立大学能够有效挖掘和分析庞大的数据，分析来自非结构化信息源的数千项内容，执行数据和文本分析，从而更好的识别哪些科研成果能够投入实际生产。通过分析所获取的洞察，它的技术转让办公室（Office of Technology Transfer）能够以更经济有效的方式将本大学研制的技术授权给企业。
以上仅是IBM企业内容管理（ECM）应对非结构化数据分析的几个案例，如今，ECM所带来的深刻洞察已经逐步成为金融、电信、保险、医疗、制造等行业的核心能力。此外，在多个增长市场ECM也扮演着重要角色。在智慧城市（Smarter City）中，非结构化数据分析成为政府、公安、消防、民政等多个部门的协同运营奠定基础；在智慧商务（Smarter Commerce）中，非结构化数据分析为产品信息管理、销售合同管理、服务管理、市场推广行动管理提供支持；在社交商务（Social Business）中，非结构化数据分析成为网络协同，信息挖掘的前提。
来源：比特网
责任编辑：封秀萍
为您推荐
HSDPA数据卡测试获得3.6 Mbps的速率Option和北电首次在产业界成功完成了HSDPA数据卡呼叫的演示，无线传输速率达到了3.6Mbps，比目前主要的宽带连接速率还快。测试呼叫是在北电在法国的研究机构的商用HSDPA网络设备上完成的，一台安装有基于高通核心MSM6280技术的Option3.6HSDPA数据卡的笔记本电脑和来自北电的商用HSDPA网络设备达到了上述下行速率。该测试包括使用一台笔记本电脑放置在移动的汽车中演示高质量的移动宽带业务，如实时电视、高分辨率的视频点播、MP3下载等。北电通过测试和演示验证了HSDPA终端设备与设备提供商如Option帮助运营商以更快的速度向市场推出高速宽带无线业务是可行的。宽带技术如HSD
平民价格、贵族功能的数字影音数据库(下)搭配外接式储存器(NeLDS近线磁盘柜)形成完整的数字内容影音片库，NeLDS的特点如下：1运用标准化SATA硬盘，速度快、容量高、成本低2电源供给容量充足，可供12个硬盘同时联机使用3可轻易扩充成16个机箱(如需使用Mirror备份，以每次扩充以复数单位计算，一个为储存数据、另一个为备份之用)4良好的通风设计，保证硬盘温升5专利的电源控管机制。硬盘不用时，由软件控制断电，耗电低、发热小、噪音低、寿命长6硬盘启动时，仅启动档案所存在的硬盘。各硬盘不在相同时间通电启动，瞬间启动电流低，故障机率少7每月定期诊断检查机制，使每一个硬盘每月至少会被启动暖机一次。8工业机箱设计，无移动、无碰撞、无电源线
平民价格、贵族功能的数字影音数据库(上)数字影音数据库的应用与未来前言过去在影像的制作环境中不论是新闻中心、广播传输设施、现场节目录像、后制单位、机关团体甚至是学校的媒体信息中心，许多的原始纪录（影片、录像带）在经年累月之下逐渐成为管理单位一个庞大的负担。为了节省空间以及淘汰老化的录像带，渐渐的越来越多的制作单位花费庞大的人力与时间将这所有宝贵的影像撷取并压缩成档案转存在不同的媒介之中，然而在一切数字化之后如何去管理数量日益增加的影音档案又是个令人头痛的问题。为了解决这个问题，各家厂商竞相推出不同的解决方案，储存媒介不外乎卡式磁带、磁带盘、DVD光盘、及硬盘，再搭配资产管理软件组合而成数字数据库。而以数据库的特性、大小、及用途的不同
