摘要:大数据分析在近几年发展的如火如荼,渗透到了社会的各个层面,应用面遍布商业、医疗、教育等各个行业,然而现在在大数据风靡全球的现状下仍隐藏着一些不可忽视的问题,在发展过程中这些问题将会慢慢地凸显其严重,并可能会严重影响到大数据分析行业的发展。大数据的前景与未来又将怎样。文章简要介绍了大数据分析的现状、应用以及发展趋势及前景。
关键词:
大数据分析、现状、应用、未来发展趋势
01
“大数据”的诞生
“大数据”现象的诞生得益于科技变革时代的背景和愈加庞大的市场需求,同时由于人们数据搜集、传输、存储、处理能力的极大发展,使得社会开始了信息生产方式与速度的变革。大数据分析是指对规模巨大的数据进行分析。大数据可以概括为4个V, 数据量大(Volume)、速度快(Velocity)、类型多(Variety)、价值(Value)。[1]大数据是当下最火的词汇之一,各行各业都在使用或准备使用大数据分析。放眼国内以及国际大数据分析的行业,可以从现状、应用以及未来发展趋势来对此行业进行分析。
02
“大数据”的现状
大数据已经应用到各行各业,发挥着不可替代的作用,创造着不可估量的价值。中国信息通信研究院日前发布的《中国大数据发展调查报告(2017)》称,2016年中国大数据市场规模达168亿元,预计2017年~2020年每年仍将保持30%以上的增长率。据调查,目前近60%企业已成立数据分析相关部门,超过1/3的企业已经将大数据分析应用于其日常运营和销售中。[2]大数据应用为企业带来的最明显的成果是实现了企业的智能决策和不断提升的运营效率,降低了失误决策的可能,结束了无方向的运营模式,使运营方向更加明确。很显然,大数据分析行业正在迅速占领经济市场,成为经济体系中不可或缺的一部分。但大数据分析在迅猛发展之下隐藏着许多问题,技术问题以及应用问题,都将在发展过程中或快或慢的显示出来。
大数据分析可以分为大数据和分析两个方面。如今大数据已经经常出现在报纸新闻当中,但大数据与大数据分析并不是同一概念。假如没有数据分析,再多的数据都只能是一堆储存维护成本高而毫无用处的IT库存。在Google中用中文搜索“大数据”与“大数据分析”,用英文搜索“big data”与“analytics”,可以看到,用英文搜索时,“big data”的搜索数据量比中文里的“大数据”搜索数据量要多了不少;而“analytics”的搜索量不仅仅高于“big data”,更是远高于“分析”在中文世界里的搜索数据量,大概是160多倍。这从侧面反映了一个现状:国外发达国家的大数据分析更注重分析,从分析出发去找数据,然后再有效地将从数据中得到的信息有效利用;而国内,对大数据的理解有失偏颇,盲目注重于大数据的采集而未能对收集到的数据有效利用,或许只是简单的画个图表得出表层结论而已,难以对数据的深层价值进行深入挖掘。
大数据分析目前存在的问题主要有以下三点。一、数据存储问题:随着技术不断发展,数据量从TB上升至PB,EB量级,如果还用传统的数据存储方式,必将给大数据分析造成诸多不便,这就需要借助数据的动态处理技术,即随着数据的规律性变更和显示需求,对数据进行非定期的处理。同时,数量极大的数据不能直接使用传统的结构化数据库进行存储,人们需要探索一种适合大数据的数据储存模式,也是当下应该着力解决的一大难题。二、分析资源调度问题:大数据产生的时间点,数据量都是很难计算的,这就是大数据的一大特点,不确定性。所以我们需要确立一种动态响应机制,对有限的计算、存储资源进行合理的配置及调度。另外,如何以最小的成本获得最理想的分析结果也是一个需要考虑的问题。三、专业的分析工具:在发展数据分析技术的同时,传统的软件工具不再适用。[1]但是,目前人类科技尚不成熟,距离开发出能够满足大数据分析需求的软件还有一定距离。[4]
如若不能对这些问题做出处理,在不久的将来大数据的发展就会进入瓶颈,甚至有可能出现一段时间的滞留期,难以持续起到促进经济发展的作用。
03
“大数据”的应用
大数据分析正在迅速的占领市场,各处都慢慢出现大数据分析的身影。数据正在逐渐影响我们对价值的判断,对自由意志的重新判断和选择,对惯有行为的改变和获取,而且渗透到我们生活的方方面面。其中最典型的运用就是最近迅速发展的电子商务领域,在网上交易时系统会记录买卖的数据,通过这些数据,系统可以将买方与卖方更好地匹配,也就是说,你会更多地接触到对你来说方便或者适合你需求的卖家,愈来愈多的消费者也能以更便宜的价格买到更满意的商品。淘宝数据魔方是淘宝平台上的数据应用方案,通过这一方案,商家可以了解淘宝平台上的行业宏观情况、客户行为情况、市场状况等等,从而可以进行科学的决策。阿里信用贷款系统通过分析已掌握的企业交易数据,由系统独立完成对企业贷款是否合理以及是否安全的判断。据透露,到目前为止,阿里巴巴放贷的坏账率仅为0.33%,这令很多商业银行望尘莫及。
更为深远的,大数据对能源的有效利用与整合同样起着举足轻重的作用。欧洲智能电网深入人们的生活,德国政府通过智能电网来收集用电数据,并预测未来需要的电量,从而提前购电,降低了成本。[5]维斯塔斯风力系统则是依靠BigInsights软件和IBM超级计算机收集数据并进行科学定位,确定各项装置的最佳安放位置,将过去长时间的精确分析工作压缩到不到一小时完成。
不仅是在商业领域,在政治领域,大数据分析也有重要的应用。2016年的美国总统大选中,相信不会有人想到特朗普的就任也会和大数据有着密切的关系。希拉里和特朗普都分别组建了大数据分析团队来赢得优势,在社交媒体上发布总统选举的宣传时,这些信息会潜移默化地影响人们的心理,进而影响他们做出的选择。当开始收集并加工来自民众的大数据时,系统会为不同的个体制定出针对性强的需求方案,民众自然而然落入了大数据团队精心谋划的圈套。借助大数据分析获得了很多摇摆不定的人的选票,让特朗普在开始落后的不利情形下迅速赶超,并赢得最终的选举。
市场需求的增长使大数据技术迅速崛起,大数据及时的迅速发展又促进了市场的发展和需求的进一步加深,人们越来越追求个性化和智能化的服务系统,这恰恰符合大数据团队对服务对象的数据分析及特性化服务。[6]
04
“大数据”的未来
一、技术研发面
经过近十年的发展,大数据行业本身的底层技术,如数据分析技术等已然趋于成熟。因此,与其他诸多学科一样在将来很长一段时间内大数据技术的发展方向都应当是与其他各学科的融合、交叉。例如,大数据与云计算结合为大数据分析提供弹性更大的储存空间和计算资源;大数据与深度学习结合助力AI发展……当然,在大数据行业本身也仍然有一些诸如:数据管理、数据安全、数据筛选、数据的即时处理等极有潜力的研究方向。
二、技术应用方面
在这个信息化的时代,每个行业每一天所产生的数据都是惊人的。可想而知随着信息化在各行各业的进一步推进和发展,在不远的将来将会有越来越多的行业会成为“大数据行业”。而在这个信息化的时代里,这些数据和它们所携带的信息无论是对于企业还是国家都蕴含着巨大的价值。对于企业来说,可以通过对“用户产生的数据”进行分析来增进对于用户的了解,更好的制定其生产经营策略,为用户提供更为个性化、更为优良的服务。从而增强用户的黏附力,以到达使企业自身利益最大化的目的。而对于国家来说,通过对国民健康状况数据进行分析,能为国民提供更为精确、优良的国民医疗服务;通过对自然环境数据进行分析,能更好地完成防灾减灾工作……然而,以上所有都离不开大数据行业的支撑。因此可以想象,在将来的很长一段时间里大数据行业会与其他行业不断融合发展,并且不断渗透到我们生活的方方面面。
04
总结
互联网时刻改变着人们的惯有行为与社会的经济体系,它催生的众多新兴产业发展地如火如荼,并推动着社会的快速发展。大数据时代已经到来, 国家的方针政策以及社会的结构必将有所改变。我们相信,在不远的将来大数据分析技术将成为众多行业不可缺少的一个,将成为众多人日常生活不可或缺的部分。将来国家经济的增长以及科技的进步,也必将会有大数据分析技术的支撑。
感谢大家阅读由大数据培训机构分享的“大数据分析的现状及未来”希望对大家有所帮助,更多精彩内容请关注大数据培训官网