滕达+卞晨阳+钱文阳
摘 要:根据最新调查显示,到2020年,人类产生的数据总量将達到40ZB,全球范围内服务器的数量将会增加10倍,由企业数据中心直接管理的数据量将会增加14倍,IT专业人员的数量将会增加1.5倍。互联网、移动互联网、物联网、云计算的快速兴起以及移动智能终端的快速发展,造成当前数据增长的速度比人类社会任何时候的发展都要快。数据的规模越来越大,内容越来越复杂,更新的速度也越来越快。数据的不断衍生和发展,意味着人类将进入一个数据的世界。本文主要从四个方面对其进行简析。
关键词:大数据;商业智能
1 大数据概念
大数据,又称海量数据,指的是以不同形式存在于数据库、网络等媒介上含丰富信息的规模巨大的数据,其是一个非常宽泛的概念。其中,大是一个最主要的特征,但远远不是全部,不能单纯根据数据的规模来定义大数据;由于数据存储能力的不同,人们衡量数据规模的尺度也是不一样的。大数据有4个基本特征。第一,Volume,数据体量巨大,可以是TB级别,也可以是PB级别。第二,Variety,数据类型繁多,如网络日志、视频、图片、地理位置信息等;物联网、云计算等各种各样的传感器,都是数据来源或承载的方式。第三,Value,价值密度低。以视频为例,连续不间断监控过程中,可能有用的数据仅仅有一两秒。第四,Velocity,处理速度快。
大数据不仅数量大,也拥有很多数据类型。按照数据结构分,数据可分为结构化数据与非结构化数据;非结构化数据又包括半结构数据和无结构数据。结构化数据的特点是不可再细分,并且所有关系型数据库(如SQL Server、Oracle、MySQL、DB2等)中的数据全部为结构化数据;半结构化数据是处于完全结构化数据和完全无结构化数据之间的数据,这些数据类型的格式一般较为规范,都是纯文本数据,可以通过某种特定的方式解析得到每项数据;无结构化数据,指那些非纯文本类型的数据,这类数据没有特定的格式,因此无法直接解析出其相应的值。
2 大数据与商业智能
2.1 商业智能
商业智能是描述一系列的概念和方法,通过应用基于事实的支持决策系统辅助商业决策的指定和实施。商业智能技术提供使企业迅速计算分析数据的技术和方法,包括收集、组织、管理和分析数据,并将这些数据转化为有用的信息,然后分发到企业各处。
商业智能可以从四个层面来论述。第一,信息系统层面。它是物理基础,是一个面向特定应用领域的信息系统平台,具有非常强大的决策分析能力。第二,数据分析层面。首先是获取数据,获取与所关心主题有关的数据或信息;然后分析信息、得出结论、形成假设和验证假设。第三,知识发展层面。可以直接将信息转变成知识或信息,借助大数据技术分析、挖掘、发现背后隐藏的东西,然后将信息变成知识。第四,战略层面。主要是将知识或信息应用在改善运营能力、提高决策能力以及企业建模上面。
2.2 商业智能与大数据的结合应用
商业智能与大数据结合,在各行各业中得到了广泛应用,其典型的应用主要现在四个方面。第一,产品销售管理。包括产品销售影响因素分析、销售量分析、销售策略、产品销售方案的预测四个方面。第二,事实管理。无论是目标管理还是例外管理,都要用事实予以支持。这个可以借助商业智能进行科学决策。第三,异常处理。企业在实际应用中总会出现一些偏差,商业智能系统可以监测偏差,并在第一时间通知企业。第四,客户关系管理。企业可以通过商业智能的客户关系管理子系统对顾客消费倾向进行分析,以提高客户的满意度。
3 大数据相关技术与应用概况
大数据技术,就是从各种类型的数据中快速获取有价值信息的技术。大数据领域已经涌现了大量新的技术,这些新的技术是大数据采集、存储、处理和呈现的有力武器。与大数据处理相关的技术包括大数据采集、大数据准备、大数据存储、大数据分析与挖掘以及大数据展示与可视化。这些大数据技术为大数据的使用提供了良好的便利条件,方便了企业的分析和使用。
大数据应用自然科学知识很好地解决了社会科学的知识,在许多领域具有重要的作用。早期的大数据技术主要应用在大型互联网企业中,用于分析网站用户数据以及用户行为等。如今,大数据应用基本上呈现出互联网领先、其他行业积极效仿的状态,而各行业数据的共享开放已逐渐成为趋势。
4 大数据的热点问题与发展趋势
目前,大数据时代已经到来,不管是在学术界还是产业界,人们都希望通过对大数据热点问题的研究,充分认识和了解大数据,以便更好地把握投入方向、提升自身的指导价值。数据科学与大数据的学科边界、数据计算的基本模式与范式、大数据特性与数据形态等都是大数据的热点问题,我们可以从小的方面入手,自行分析。
大数据的应用越来越广泛,有着良好的发展趋势,大数据正从概念化走向价值化,这将会成为当下的一大发展趋势;同时,大数据的安全与隐私问题也会越来越重要、越来越得到重视;大数据的分析会越来越广泛,随着数据科学的兴起,大数据会成为一种战略性产业。
大数据是一种新兴的技术与产业,它能帮我们切实地解决一些问题。随着科学互联网技术的快速发展,大数据逐渐崭露头角,并具有非常重要的实际意义。它的不断发展适应了信息经济时代的发展需要,符合科学技术的发展趋势,必将带领我们走进大数据时代。
参考文献:
[1] 陶雪娇,胡晓峰,刘洋.大数据研究综述[J].系统仿真学报,2013(8).
[2] 邹大斌.大数据动了谁的奶酪[J].计算机世界,2013(31).
[3] 于希国. Hitachi UCP融合基础架构解决方案[N].中国计算机报,2013.
[4] 伍永峰.商业智能及技术[D].贵州大学,2008.