正文 基於上市公司財務數據的數據倉庫的構建研究(1 / 3)

基於上市公司財務數據的數據倉庫的構建研究

會計信息化

作者:車蕾

摘要:隨著企業資源計劃(ERP)的廣泛應用,各企業的財務數據量的不斷增大,原有的數據管理模式形成了大大小小的數據孤島,製約著企業財務數據分析工作。本文結合財務數據分析需求,以建築建材行業的上市公司財務數據為例,研究基於上市公司財務數據的數據倉庫模型的構建方案。依據DB-ODS-DW架構提出了數據倉庫模型的設計方案,並基於OLAP技術構建了數據倉庫模型,設計分區等數據倉庫的物理存儲結構,最後針對異構的數據特征闡述了填充數據倉庫的ETL模型。基於上市公司財務數據的數據倉庫模型的構建為企業決策者和計算機審計工作的決策支持都提供了堅實的數據基礎。

關鍵詞:財務數據 數據倉庫 在線聯機分析 數據操作存儲

一、引言

隨著數據庫技術的迅速發展以及企業資源計劃(ERP)的廣泛應用,企業積累的財務數據越來越多,同時也變得更為複雜,另外伴隨著係統的更新換代,原有的數據管理模式形成了大大小小的數據孤島。隨著計算機的發展,企業可以通過聯機線事務處理(OLTP)模式對數據進行簡單的查詢、修改等操作,但是很難從多個維度分析數據,很難根據已有數據預測未知數據。而在計算機應用研究中,隨著大數據的出現,數據挖掘、數據倉庫等麵向分析決策的計算機技術應運而生。這些技術無疑為現代企業的財務分析提供了新的思路和方法,也為財務審計信息化的發展提供了新的途徑。數據倉庫建設是開始多維數據分析和數據挖掘的第一步,也是最關鍵的一步。

“數據倉庫”的概念可以追溯到80年代中期。從本質上講,數據倉庫就是一個麵向主題的、集成的、不可更新的、隨時間不斷變化的數據集合,它用以支持企業或組織的決策分析處理。數據倉庫具有四個基本特征:數據倉庫的數據是麵向主題的,數據倉庫的數據是集成的,數據倉庫是不可更新的,數據倉庫是隨時間變化的。支持數據倉庫的商務智能產品眾多,根據規模、市場關注度和發展勢頭來看,SAP、Oracle、IBM、Microsoft、SAS這五大跨國商務智能供應商所提供的產品,占據了大部分的市場,也是商務智能的領跑者。作為業界主要的平台提供商之一,微軟已經在數據庫產品SQL Server當中提供了一體化的商業智能套件,包括相關的數據倉庫、數據分析、數據整合、報表、數據挖掘的全係列的設計、開發和管理工具。其中主要的BI架構工具為:Sql Server Integration Service、Sql Server Analysis Service、Sql Server Reporting Service。本文將基於微軟的商務智能產品討論基於上市公司財務數據的數據倉庫的構建方法。

二、數據倉庫總體架構設計

本課題的數據是基於上市公司的財務數據,該數據倉庫的總體架構。數據源涉及財政、金融等多個行業的數據。數據格式可以是結構化的、非結構化的,也可以是半結構化的。本文以建築建材行業的財務數據為例來說明數據倉庫模型的構建方法。該數據來源於官方網站公布的上市公司的財務數據,年度為2004-2012年,格式為EXCEL文件。該數據主要包括現金流量數據、資產負債數據、利潤數據、財務指標數據和企業信息。現金流量表指企業在一固定期間(通常是每月或每季)內,一家機構的現金(包含銀行存款)的增減變動情形。資產負債表指企業在一定日期(通常為各會計期末)的財務狀況(即資產、負債和業主權益的狀況)的主要會計報表。利潤表是反映企業在一定會計期間經營成果的報表。財務指標是指企業總結和評價財務狀況和經營成果的相對指標,我國《企業財務通則》中為企業規定的三種財務指標為:(1)償債能力指標,包括資產負債率、流動比率、速動比率;(2)營運能力指標,包括應收賬款周轉率、存貨周轉率;(3)盈利能力指標,包括資本金利潤率、銷售利稅率(營業收入利稅率)、成本費用利潤率等。基於該數據倉庫,通過分析企業財務狀況,可了解企業現金流量狀況、營運能力、盈利能力、償債能力等,從而有利於評價企業持續經營能力,同時也可以幫助審計人員從中發現審計疑點。

為了彌補業務係統和數據倉庫之間的數據同步差距,係統采用了DB-ODS-DW架構,即在數據源與數據倉庫之間加入了操作型數據存儲區(ODS,Operational Data Store)。ODS作為一個中間層,既滿足全局聯機操作處理,又適合於輔助企業完成日常決策的數據分析。在建立了ODS數據平台的基礎上,可以根據分析需求建立各類主題分析模型,數據倉庫主要存儲和管理從業務係統經一定的業務規則轉換並集中存儲的業務數據,包含了詳細的業務數據與各層次的彙總數據。數據集市是一種小型的數據倉庫,主要麵向部門級業務,並且隻麵向某個特定的主題,是為滿足特定用戶的需求而建立的一種分析環境。這裏根據不同的行業劃分大的分析主題,構建不同的數據集市。根據中國行業的最新分類,大致有如下幾大類:機構組織、農林牧漁、醫藥衛生、建築建材、冶金礦產、石油化工、水利水電、交通運輸、信息產業、機械機電、輕工食品、服裝紡織、專業服務、安全防護、環保綠化、旅遊休閑、辦公文教、電子電工、玩具禮品、家居用品、物資、包裝、體育、辦公。