什么是大数据?
“大数据是为机器准备的;小数据是为人类准备的。”
假设你家里的水管漏水了。
你拿一个桶和一些密封材料来解决这个问题,简单吧?但是过了一段时间,你发现漏的更大了,你需要一个专业的水管工来进行修理。过了一段时间,你发现到一条巨大的地下河流已经打开,你需要每秒处理数百万升的水。
你需要的不只是一个新的水桶,而是需要一种全新的方法来处理这个问题,因为水的体积和速度都在增长。为了防止这个城镇被洪水淹没,也许你需要政府来建造一个巨大的堤坝,这需要大量的土木工程专业知识和复杂的控制系统。更糟的是,水不知从哪里冒出来,每个人都被到处冒出来的水所吓到了。
同样的情况也发生在“数据”领域。数据变得如此庞大和复杂,以至于无法在一定时间范围内用常规软件工具进行捕捉、管理和处理,只有新的处理模式才具有更强的决策力、洞察发现力和流程优化能力,这样大数据才能变为我们的信息资产。
大数据是一个术语,它描述了大量的数据——包括结构化和非结构化数据——这些数据每天都在淹没着一家企业。但重要的不是数据量,重要的是组织如何处理数据。大数据可以被分析,以帮助企业做出更好的商业决策。
大数据特点
数据体量巨大:从TB级别,跃升到PB级别。
数据处理速度快:数据流以前所未有的速度涌入,必须及时处理。物联网、云计算、移动互联网、车联网、手机、平板电脑、PC以及遍布地球各个角落的各种各样的传感器无一不是数据来源或者承载的方式。
数据多样性:数据有各种各样的格式——从传统数据库中的结构化数据到非结构化数据,包含文本文档、电子邮件、视频、音频、股票行情和金融交易数据等。大数据不仅仅是数字、日期和字符串,大数据还包括地理空间数据、3D数据、音频、视频以及非结构化文本等。
准确性:所捕获数据的质量差异很大,影响了准确分析。
传统系统的局限性
大数据处理速度快的特性对底层基础设施提出了独特的要求。关系数据库管理系统和可视化软件等传统工具难以处理大数据。传统的数据库系统适合处理数据量小、数据结构一致的数据,而且传统的数据库系统是在服务器上运行,增加服务器也是一笔不小的开支。而且快速处理大量且种类繁多的数据所需的计算能力可能会让服务器崩溃。
大数据的应用场景
零售:零售商通过对用户的分析,提供差异化服务。
银行业:对用户投资理财和财产状况进行分析,从而将金融风险和金融欺诈降到最低。
公共事业:可以通过捕捉家庭能源使用情况,预测出断电情况,并提高能效。
能源行业:石油和天然气公司可以通过对钻井设备传感器传出的数据进行分析,做出更高效、更安全的钻井决策。
教育行业:通过对大数据的分析,可以监测学生的学习情况,确保每个学生都能取得进步,并可以实施更好的教学评价和支撑体系。
政府:政府利用大数据分析可以管理公共事业、提高政府运作效率、降低交通拥堵、预防犯罪……
医疗保健:找到大量病人相关的临床医疗信息,通过大数据处理,更好地分析病人的信息。
制造:通过对大数据的分析可以预估市场的容量,提前安排好产能,降低浪费。
大数据给我们生活带来的变化当然不止以上那些,会涉及到我们生活的方方面面,大数据和人工智能的蓬勃发展可以为制造业的升级赋能,从而完成供给侧的改革,实现中国制造2025!
评论(0)