大数据分析 亟待具备的新能力
随着大数据逐渐走向各个行业,大数据分析需求正在快速增长
谁也无法否认,我们已经切切实实地迎来了一个大数据时代。现在对于大数据的属性如数量、速度和多样性等的描述,已经让人们在认识到这些数据中蕴含有价值信息的同时,看到了数据不断增长带来的复杂性;但由此仅仅看到大数据带来的挑战是远远不够的,如何满足人们对大数据的需求,或者说如何解决大数据问题的关键,即如何从大数据中实实在在获取潜在的好处,才是当前急需做的事情。
知名咨询公司Gartner研究副总裁Doug Laney表示,目前多数企业仍处于采用大数据的早期阶段,还未将其运用至业务层面,而真正认识到大数据对自身基础架构、企业运营所产生的全面影响的仅是少数企业。GigaSpaces的一项调查也同样表明,大多数企业仍然没有找到正确的数据分析解决方案来处理大数据问题。
显而易见,数据分析才是迎接大数据挑战的关键。
挖掘价值从数据分析开始
大数据最迷人之处不仅在于它汇集了来自各个方面的广泛数据,更重要的是通过数据分析可以让政府决定拿这些数据做些什么,即支撑政府决策。当前情况下数据产生及收集变得越来越容易,但是数据已经超越传统数据库或现有数据管理工具能够处理的范围。因此,如果政府部门要想利用好大数据,就需要不断提升大数据分析处理能力,实现信息为政务服务的根本目的。
经过二十几年的电子政务建设,政府的信息系统以及数据的采集处理已经覆盖了大部分业务部门和公共服务机构。针对大数据速度快、存在形式多样且关联性强的特点,如果能够对采集到的完整数据进行及时、准确的科学分析,提高数据分析结果的时效性、直观性和趋势性,将可以帮助政府部门及时掌握社会经济运行状况和公共服务能力,为政府科学决策和社会管理提供很好的支撑。
一个很典型的案例是在医疗行业,因其公共服务性质而服务于亿万民众,同时必须面对海量医疗健康数据处理的需求,这让其成为率先试水大数据应用的行业。据了解,通常一张CT扫描图像含有约150MB的数据,标准的病理图数据量则接近5GB。由此不难看出,医疗行业的数据量大并复杂繁复,当然其中蕴含的价值也非常丰富,如果能够对其进行有效的处理和分析,就可以辅助临床医生做出更为科学和准确的诊断和用药决策,也可以帮助医院根据患者需求开发出全新的个性化医疗服务,甚至能够帮助研究机构突破医疗方法和药物革新。
正确建立大数据分析流程
全国人大代表、安徽移动总经理郑杰表示,大数据将能够改变政府的运行方式,数据将成为政府决策和创新的基础、成为社会管理科学化的核心,在信息社会,科学发展的落脚点就是数据。具体而言,个人经验、长官意志将被系统数据和集体智慧所取代,虽然传统的考察调研工作方法仍有作用,但对决策来说,基于大数据的分析将发挥重要作用。
政府实施大数据,必须首先建立一个完善的实施计划,以确保分析过程切实可行。准备启动一个大数据项目时,正确建立将要使用的分析流程将事半功倍。一旦确定了正确的数据分析程序和分析工具,并开始将技术基础设施部署到位,就进入一个新的项目管理流程。当然,政府实施大数据前应决定要对哪些数据进行分析。虽然数据集量很大,但这并不意味着要对所有的数据源信息都进行分析,需要确定哪些信息是对政府部门有决策价值的战略性数据,或者是可以提升政府服务能力的关键数据。如此才能帮助政府进行精确分析,降低大数据分析成本。此外,还要建立一套有效的业务规则。政府部门的数据来源非常复杂,而应对这种复杂性则是大数据分析计划的关键能力。在这个过程中包括以政务业务为中心的数据是必不可少的,这就要求确保所有必要的业务规则都事先确定好,只有这样才能得到正确的分析结果。
从目前的情况看,政府部门虽然已经对大数据有了初步的认识,但在数据分析方面还会受到管理体制和职能的制约,并且由于传统管理习惯难以改变而导致业务流程与大数据不配套。因此,当务之急是建立与业务相匹配的数据分析程序,才能真正发挥大数据的作用,挖掘出其中的信息价值。
产业持续发力数据分析
对于大数据这个未来的重要战略业务,IBM预测到2015年大数据分析方面的收入将有望达到160亿美元。在近日举办的"2013 IBM大数据与分析高峰论坛"上,IBM以"行胜于言"为主题集中展现了其大数据及分析在中国及全球市场各行业的成功应用案例,同时还发布了一系列业界最新的大数据及分析技术,如IBM独有的大数据分析加速技术BLU Acceleration以及面向Hadoop的PureData版本,同时亮相的还有IBM大数据平台的旗舰产品BigInsights、Streams、DB2、Informix的升级版本。IBM全球副总裁兼IBM中国开发中心总经理王阳表示:"通过IBM中国开发中心,将IBM软件在大数据、信息管理、商业分析等相关领域的前瞻洞察和创新技术引入中国市场,帮助中国政府和企业在大数据时代对于快速转型和智慧成长的需求。"
EMC通过不断的技术创新和战略收购向大数据转型,仅在2013年的前两个月,EMC便推出了一系列用于大数据分析的产品,试图为其未来五年内在大数据上占据领先地位打基础。EMC统一的大数据分析平台UAP包括Green plum关系数据库、EMC Green plum HD Hadoop发行版和EMC Green plum Chorus。EMC副总裁、销售部全球首席技术官Patricia Florissi表示:"如果我们有足够的存储能力,但却没有解读和分析数据的能力,那么数据并没有什么价值。"
大数据分析和数据仓库解决方案厂商 Teradata一直在推动大数据分析平台的发展,并发布了Teradata Aster大数据综合分析平台。Teradata实验室总裁Scott Gnau表示:"Teradata Aster大数据综合分析平台能够快速实现从不同类型大数据的采集到丰富洞察力的形成,并且能够无缝地将洞察力交付给业务负责人。"
大数据市场正在爆炸性增长,政府部门需要密切关注这些大数据厂商,因为他们将带来创新、实用的大数据平台、应用以及服务。咨询公司IDC预测:随着大数据相关技术的发展,未来将会创造出一些新的细分市场,例如,以数据分析和处理为主的高级数据服务;还将出现以数据分析作为服务产品提交的分析即服务业务;将多种信息整合管理,创造对大数据统一的访问和分析的组件产品;甚至会出现大数据技能的培训市场,教授数据分析课程等。
数据将会成为一种资源,存在于政府部门的数据更是最重要的资源。如何将这些数据资源转化为有价值的数据资本,以及如何利用数据分析实现政府的科学决策,这不仅是政府部门自己的任务,也是包括IT企业在内都要迎接的挑战。各方在这个问题上都需要一个认识、成长和成熟的过程。
上一篇:混合交付的模式更贴近“云”应用
- 武警四川森林总队被装拆改竞争性谈判公告
- 厦门务实-公开招标-2015-WS313中洲滨海城配套学校学校视频监控等设备及安装招标公告公开招标公告
- 常德广电传媒有限责任公司全景演播室灯光、视频等设施及安装服务采购招标公告公开招标公告
- 平山县公安局执法场所音视频管理系统采购项目二次公开招标公告
- 江西省宏国招标代理咨询服务有限公司关于东乡县妇幼保健院全麻麻醉机、麻醉视频喉镜竞争性谈判采购公告
- 佛山市经济和信息化局关于采购无线电管理地理信息数据的中标结果公告
- 北京市经济和信息化委员会信息中心2016年市经济信息化委业务系统升级改造政府采购项目公开招标公告
- 盐池县农村合作经济经营管理站盐池县农村土地承包经营权确权登记档案整理、数字化加工服务采购项目公开招标公告
- 临汾市尧都区看守所、临汾市尧都区拘留所信息化设备购置项目(二次)中标公告
- 长乐市鹤上镇卫生院全数字高档彩色多普勒超声诊断仪公开招标公告