理论教育 商务智能技术与数据分析

商务智能技术与数据分析

时间:2023-06-07 理论教育 版权反馈
【摘要】:商务智能技术是迅速分析数据的技术和方法,包括收集、管理和分析数据,并将数据转化为有价值的信息。数据仓库技术是商务智能系统的基础,是面向主题的、集成的、稳定的和随时不断变化的数据集成与处理技术,具有数据采集、数据分析、数据处理、数据描述的功能。商务智能系统的关键环节是数据分析,数据分析采用联机分析处理和数据挖掘技术。

商务智能技术与数据分析

商务智能(Business Intelligence)是指运用现代数据仓库技术、线上分析处理技术、数据挖掘和数据展现技术等进行数据分析,并将数据转化为有价值的信息和知识,以服务于决策与管理的智能系统。商务智能是一套完整的解决方案,它将企业中现有数据进行有效的整合,快速准确地提供决策信息,帮助企业做出正确的业务经营决策。商务智能一般由数据仓库、联机分析处理、数据挖掘、数据备份和恢复等部分组成,其关键是从企业运作各个系统的大数据中提取有价值的数据,并保证数据的正确性,然后经过抽取(Extraction)、转换(Transformation)和装载(Load),即ETL过程,整合到企业整体的数据仓库里,在此基础上利用相应的查询和分析工具、数据挖掘工具、OLAP工具等对数据进行分析和处理,经过分析处理的数据成为有价值的信息,为管理者的决策过程提供数据信息支持。

商务智能技术是迅速分析数据的技术和方法,包括收集、管理和分析数据,并将数据转化为有价值的信息。商务智能技术起始于不同数据源的数据收集,通过提取有用数据进行加工、分析和处理,保证数据的正确性,分析处理后的数据经过转换、重构存入数据仓库成为有价值的信息,通过对这些信息的查询、挖掘和分析,使其成为支持决策的知识。商务智能技术包括:

(1)数据仓库技术。数据仓库技术是商务智能系统的基础,是面向主题的、集成的、稳定的和随时不断变化的数据集成与处理技术,具有数据采集、数据分析、数据处理、数据描述的功能。数据仓库系统的数据来源主要是外部的操作性应用系统,这些数据源包括数据的业务含义和业务规则,表达业务数据的表、字段、视图、列和索引等。数据仓库能够从容量庞大的业务处理型数据库中抽取数据,处理、转换为新的存储格式。数据仓库技术首先对多个异构的数据源按照主题进行有效集成和整合,然后对集成数据进行分析处理。数据仓库的应用包括联机在线分析处理(OLAP)和数据挖掘(DM)。通过对数据仓库中多维数据的钻取、切片及旋转等分析处理,可以提供决策支持需要的数据查询及报表;通过数据挖掘,可以发现隐藏在数据中的潜在规则。

(2)OLAP技术。OLAP(联机分析处理)技术是多维数据分析与处理的技术工具,它通过快速、一致、交互访问各种可能的信息视图,帮助数据分析与管理者对数据进行深入了解。Bi-Pilot分析服务器是用于联机分析处理的中间服务器,提供了对数据仓库的快速访问。OLAP通过在多维结构中对数据仓库中的数据进行提取、整合和存储,可以对最终用户查询做出快速响应。Bi-Pilot分析服务器用以分析多维数据集,同时还提供对多维数据集信息的快速访问客户端。Bi-Pilot分析服务器将数据仓库中的数据组织成包含预先计算聚合数据的多维数据集,以便为复杂的分析查询提供快速的处理。OLAP技术致力于处理数据仓库中的大数据,通过对数据的分析、归纳和处理,将数据转化为有用的信息,帮助企业实现有效决策。OLAP技术支持最终用户进行动态多维分析,在不同层次、不同时间序列之间进行分析和建模。

(3)数据挖掘技术。数据挖掘(Data Mining)是指从数据仓库的大数据中揭示出隐含的、未知的并具有潜在价值的数据信息。数据挖掘技术支持从大量数据库中提取和发现新知识、新模式的过程。数据挖掘技术面对企业拥有的大量数据,通过抽取、转换、装载等数据处理技术,发现数据的相互关联性,探寻其中的业务规律和趋势,在关联数据库中存储多维数据集数据,以标准化XML格式存储数据元数据,提供数据抽取接口。数据挖掘是一种决策支持系统,它基于人工智能、机器学习等技术,智能化地分析企业原有数据,做出挖掘性预测,帮助企业调整经营策略。(www.daowen.com)

商务智能技术的综合运用形成的商务智能系统包括如下环节:①数据获取。将分布在异构数据源中的数据如关系数据、平面数据文件等抽取加载到数据仓库中,成为联机分析处理、数据挖掘的基础。数据获取的方式采用ELT方案来实现,ELT可以在短时间内抽取和加载海量数据,提高ELT数据量,缩短抽取和加载时间窗口。②建立数据仓库。商务智能系统的核心是数据仓库,其主要功能是支持决策的联机分析处理(OLAP)。数据仓库包括数据提取模块、数据清洗模块、数据转换模块,通过数据提取、过滤和转换实现数据标准化。③数据分析。商务智能系统的关键环节是数据分析,数据分析采用联机分析处理和数据挖掘技术。联机分析处理在进行数据汇总、整合的同时,提供切片、切块、下钻、上卷和旋转等数据分析功能。数据挖掘可以发现数据背后隐藏的知识和模式。④数据展现。通过数据分析,实现数据展现。数据展现的方式和内容主要有数据查询,包括定义查询、动态查询、OLAP查询、决策支持智能查询等;数据报表,包括关联数据表格、复杂表格、OLAP表格以及各种综合报表等;数据可视化,包括直方图、饼图、网状图、动态模拟、计算机动画等,用以表现复杂数据及其相互关系。商务智能系统通过数据获取、建立数据仓库、数据分析、数据展现等环节,实现对数据的快速分析和处理,经过分析处理的有用数据通过数据展现服务于决策和管理。商务智能系统结构模型如图6-9所示。

图6-9 商务智能系统结构模型

深蓝渔业产品3Is营销模式,其商务智能系统涉及的数据信息包括:①产品订单实时状态数据信息。产品订单实时状态是指顾客通过网络完成订单提交后发送给供应商的表单状态。数据信息包括顾客信息、生鲜产品定购信息、订单运行状态等信息。②产品养殖数据信息。包括种苗培育质量数据、养殖工船和深海养殖网箱运行状态数据、养殖环境水温与气象数据、养殖饵料数据、养殖排泄物处理数据、养殖品成长过程数据、养殖品捕捞数据、养殖品海上保鲜数据、养殖品海上运输数据等。③产品加工设备状态数据信息。主要包括加工设备的基本产品参数和运行状态数据。设备的基本产品参数包括设备的基本信息,如设备类型、设备性能等;设备运行状态数据,主要是指设备停止运行、正常开机、检修、保养等数据。④产品工艺技术数据信息。主要是指为满足顾客即时个性化订单的需求,生鲜原材料加工流程的规范性数据信息,包括生鲜原材料的种类、工艺过程、产品标准、产品包装等数据。⑤产品加工状态数据信息。包括生鲜原材料存放状态、等待状态、加工状态和完成状态等数据。⑥产品物流配送数据信息。主要包括产品冷藏、产品分拣、产品出库、产品运输、产品配送、产品交易等实时状态数据。深蓝渔业产品供应商对供应链中产生的各种复杂数据信息进行智能化的实时采集和分析处理,通过数据集成和转化,实现对顾客即时需求的即时响应,同时通过采用RFID电子标签来实时感知分布在供应链中的各类数据信息,从而实现对产品养殖、加工和物流配送过程实时监控与追踪的智能化。

免责声明:以上内容源自网络,版权归原作者所有,如有侵犯您的原创版权请告知,我们将尽快删除相关内容。

我要反馈