公務(wù)員期刊網(wǎng) 精選范文 大數(shù)據(jù)庫建設(shè)方案范文

大數(shù)據(jù)庫建設(shè)方案精選(九篇)

前言:一篇好文章的誕生,需要你不斷地搜集資料、整理思路,本站小編為你收集了豐富的大數(shù)據(jù)庫建設(shè)方案主題范文,僅供參考,歡迎閱讀并收藏。

大數(shù)據(jù)庫建設(shè)方案

第1篇:大數(shù)據(jù)庫建設(shè)方案范文

關(guān)鍵詞:NoSQL 3.20工程 研判分析

一、前言

當(dāng)今世界是一個(gè)信息高速發(fā)展的時(shí)代,隨著網(wǎng)民參與互聯(lián)網(wǎng)產(chǎn)品和應(yīng)用的程度越來越深,互聯(lián)網(wǎng)將更加智能,互聯(lián)網(wǎng)的數(shù)據(jù)量也將呈爆炸式增長??梢灶A(yù)見公安行業(yè)信息化發(fā)展在未來幾年里,數(shù)據(jù)將以每年 30%到50%的速度爆炸式增長。

在大數(shù)據(jù)時(shí)代下對(duì)系統(tǒng)又提出了新的需求:1、高并發(fā)讀寫的需求,高并發(fā)、實(shí)時(shí)動(dòng)態(tài)獲取和更新數(shù)據(jù)。2、海量數(shù)據(jù)的高效率存儲(chǔ)和訪問的需求,類似SNS網(wǎng)站,海量用戶信息的高效率實(shí)時(shí)存儲(chǔ)和查詢。3、高可擴(kuò)展性和高可用性的需求,需要擁有快速橫向擴(kuò)展能力、提供7*24小時(shí)不間斷服務(wù)。

物聯(lián)網(wǎng)發(fā)展和互聯(lián)網(wǎng)應(yīng)用帶來了多源海量數(shù)據(jù)的存貯、管理、處理、融合、整合和挖掘分析問題,傳統(tǒng)的關(guān)系數(shù)據(jù)庫管理系統(tǒng)(SQL數(shù)據(jù)庫管理系統(tǒng))已不能完全適應(yīng)這些海量數(shù)據(jù)的管理與計(jì)算要求,NoSQL數(shù)據(jù)庫管理系統(tǒng)應(yīng)運(yùn)而生。NoSQL數(shù)據(jù)庫主要有鍵-值存貯(key-value stores)、 BigTable、文件存貯數(shù)據(jù)庫(document store databases)和圖形數(shù)據(jù)庫(graph databases)等類型,相關(guān)的數(shù)據(jù)庫軟件主要memcached, Redis, MongoDB, CouchDB, Apache Cassandra和HBase等等,都是開源的。

NoSQL數(shù)據(jù)庫與傳統(tǒng)的關(guān)系數(shù)據(jù)庫管理系統(tǒng)相結(jié)合,為智慧城市數(shù)據(jù)管理提供整體解決方案,應(yīng)用NoSQL并不是全盤否定SQL數(shù)據(jù)庫,而應(yīng)該是NoJustSQL依賴于SQL。

二、傳統(tǒng)數(shù)據(jù)庫在大數(shù)據(jù)處理中存在的問題

傳統(tǒng)數(shù)據(jù)庫,主要指關(guān)系型數(shù)據(jù)庫,在長期的實(shí)踐中體現(xiàn)出性能好、穩(wěn)定性高等特點(diǎn),在使用上也比較簡單,功能強(qiáng)大,在實(shí)際的數(shù)據(jù)庫工作和研究發(fā)揮了很好的作用。但關(guān)系數(shù)據(jù)庫在應(yīng)對(duì)大數(shù)據(jù)存在明顯的問題:

1、分庫分表缺點(diǎn):

(1)受業(yè)務(wù)規(guī)則影響,需求變動(dòng)導(dǎo)致分庫分表的維護(hù)復(fù)雜。

(2)系統(tǒng)數(shù)據(jù)訪問層代碼需要修改。

2、Master-Slave缺點(diǎn):

(1)Slave的實(shí)時(shí)性保障,在實(shí)時(shí)性要求很高的應(yīng)用中,可能需要進(jìn)行相關(guān)處理。

(2)在高可用性方面的問題,Master存在容易產(chǎn)生單點(diǎn)故障的致命弱點(diǎn)。

3、 MMM缺點(diǎn): 本身擴(kuò)展性差,一次只能一個(gè)Master可以寫入,只能解決有限數(shù)據(jù)量下的可用性。

三、NoSQL概念

1、什么是NoSQL NoSQL是Not Only SQL的縮寫,而不是Not SQL,它不一定遵循傳統(tǒng)數(shù)據(jù)庫的一些基本要求,比如說遵循SQL標(biāo)準(zhǔn)、ACID屬性、表結(jié)構(gòu)等等。相比傳統(tǒng)數(shù)據(jù)庫,叫它分布式數(shù)據(jù)管理系統(tǒng)更貼切,數(shù)據(jù)存儲(chǔ)被簡化更靈活,重點(diǎn)被放在了分布式數(shù)據(jù)管理上。

2、主流NoSQL數(shù)據(jù)庫--HBase簡介 HBase是Hadoop Database的簡稱,它是一個(gè)高可靠性、高性能、面向列、可伸縮的分布式存儲(chǔ)系統(tǒng),利用HBase技術(shù),可在廉價(jià)的PC Server上搭建起大規(guī)模、結(jié)構(gòu)化的存儲(chǔ)集群。

HBase是由Google Bigtable的開源實(shí)現(xiàn),類似于Google Bigtable利用GFS作為其文件的存儲(chǔ)系統(tǒng),HBase利用Hadoop HDFS作為其文件的存儲(chǔ)系統(tǒng);Google是通過運(yùn)行MapReduce來處理Bigtable中的海量數(shù)據(jù),HBase同樣是通過利用Hadoop MapReduce來處理HBase中的海量數(shù)據(jù)的;Google Bigtable利用 Chubby來作為協(xié)同服務(wù),HBase是利用Zookeeper來作為對(duì)應(yīng)的。

四、NoSQL的特點(diǎn)分析

1、NoSQL是易擴(kuò)展的

NoSQL數(shù)據(jù)庫的種類繁多,但是他們有一個(gè)共同的特點(diǎn),就是去掉了傳統(tǒng)關(guān)系數(shù)據(jù)庫的“關(guān)系型”這一特性,所以NoSQL數(shù)據(jù)庫的數(shù)據(jù)之間是無“關(guān)系”的,這樣的數(shù)據(jù)庫就非常容易擴(kuò)展,同時(shí),在架構(gòu)的層面上也具有可擴(kuò)展性,有多種NoSQL數(shù)據(jù)庫之間的整合能力。

2、NoSQL是靈活的數(shù)據(jù)模型

NoSQL數(shù)據(jù)庫不需要事先為要存儲(chǔ)的數(shù)據(jù)建立對(duì)應(yīng)的字段,隨時(shí)可以存儲(chǔ)自定義的數(shù)據(jù)格式。而在傳統(tǒng)的關(guān)系數(shù)據(jù)庫里,增刪字段是非常麻煩的,如果是大數(shù)據(jù)量的數(shù)據(jù)庫表,增加一個(gè)字段簡直是很麻煩的。

3、NoSQL是高可用的

NoSQL數(shù)據(jù)庫可以方便的實(shí)現(xiàn)高可用的架構(gòu),而且不太影響性能。比如Cassandra,HBase模型,就可以通過復(fù)制模型實(shí)現(xiàn)高可用。

4、NoSQL是具有大數(shù)據(jù)量的處理能力,具有高性能的特點(diǎn)

NoSQL數(shù)據(jù)庫都具有非常高的讀寫性能,尤其在大數(shù)據(jù)量下,這種讀寫能力體現(xiàn)更加突出,這得益于它的“無關(guān)系性”,數(shù)據(jù)庫的結(jié)構(gòu)簡單,NoSQL的 Cache是記錄級(jí)的,是一種細(xì)粒度的Cache,所以NoSQL在這個(gè)層面上來說就要性能高很多了。

五、“3.20”工程海量數(shù)據(jù)分析應(yīng)用

“3.20”工程是在江蘇省公安廳統(tǒng)一部署下開展的路面監(jiān)控建設(shè)工程,要求在市區(qū)主要道路每3公里記錄一次車輛軌跡,國道等城市道路每20公里記錄一次。

由于“3.20”工程每天產(chǎn)生海量過車信息,數(shù)據(jù)總量大、日均增量大、占用存儲(chǔ)空間多,僅僅依靠Oracle關(guān)系數(shù)據(jù)庫技術(shù)的存儲(chǔ)建庫模式,已不能完全滿足實(shí)戰(zhàn)應(yīng)用的需求。對(duì)于傳統(tǒng)的關(guān)系數(shù)據(jù)庫來說,在一張幾百億條數(shù)據(jù)記錄的表里面進(jìn)行SQL查詢,效率極其低下,用戶不可忍受。在傳統(tǒng)的關(guān)系數(shù)據(jù)庫系統(tǒng)中往往采用分庫、分表的策略進(jìn)行數(shù)據(jù)存儲(chǔ),這種方式使得單表的查詢效率得到提高。然而在能耗監(jiān)測(cè)系統(tǒng)中往往需要對(duì)全局?jǐn)?shù)據(jù)進(jìn)行綜合統(tǒng)計(jì)查詢,往往涉及到幾十上百個(gè)表,查詢效率無法保證。

這就需要在“大平臺(tái)”總體數(shù)據(jù)庫體系下,深入研究“大數(shù)據(jù)”應(yīng)用處理問題,引進(jìn)HDFS分布式文件系統(tǒng),采用Hadoop架構(gòu)的NoSQL數(shù)據(jù)庫技術(shù),科學(xué)規(guī)劃設(shè)計(jì)數(shù)據(jù)存儲(chǔ)、傳輸、建庫的模式,滿足“3.20”工程車輛數(shù)據(jù)應(yīng)用需要。NoSQL數(shù)據(jù)庫采用“鍵-值”對(duì)的方式對(duì)數(shù)據(jù)進(jìn)行存儲(chǔ),該存儲(chǔ)方式是不需要固定的表結(jié)構(gòu)的,也就不存在連接操作,具體操作時(shí)效率就比較高。在大數(shù)據(jù)存取上具備關(guān)系型數(shù)據(jù)庫無法比擬的性能優(yōu)勢(shì)。

Hadoop應(yīng)用場景

基于Hadoop HDFS等分布式文件系統(tǒng)存儲(chǔ)結(jié)構(gòu),能夠有效解決海量數(shù)據(jù)快速讀寫的性能瓶頸問題,是開展“大數(shù)據(jù)”應(yīng)用訪問、統(tǒng)計(jì)分析很好的解決方案

對(duì)于需要分析的大數(shù)據(jù),特別是對(duì)于日均增量達(dá)4000萬的過車信息數(shù)據(jù)等,采用NoSQL數(shù)據(jù)庫技術(shù),運(yùn)用Hadoop的HDMS結(jié)構(gòu)方式進(jìn)行存儲(chǔ)建庫,搭建多個(gè)“3.20”工程大數(shù)據(jù)專題庫,并利用MapReduce功能來進(jìn)行數(shù)據(jù)分析,多臺(tái)機(jī)器組成集群進(jìn)行并行計(jì)算,以此提升全省“3.20”工程大數(shù)據(jù)的處理和分析能力。

在匯集整合全省道路監(jiān)控網(wǎng)“3.20”工程相關(guān)信息資源的基礎(chǔ)上,結(jié)合各警種業(yè)務(wù)部門實(shí)戰(zhàn)需求,充分利用“大數(shù)據(jù)”技術(shù),以人車案關(guān)聯(lián)分析為建設(shè)重點(diǎn),實(shí)現(xiàn)全省一體化查詢服務(wù)、人車案關(guān)聯(lián)分析、重點(diǎn)車輛電子檔案、重點(diǎn)車輛積分預(yù)警、警務(wù)地理信息系統(tǒng)對(duì)接應(yīng)用、指揮調(diào)度系統(tǒng)對(duì)接應(yīng)用等功能,面向全省基層單位、專業(yè)部門、各級(jí)公安機(jī)關(guān)領(lǐng)導(dǎo)提供系統(tǒng)服務(wù),為開展深度研判應(yīng)用奠定基礎(chǔ)。

參考文獻(xiàn)

[1]黃富潔.公安決策支持系統(tǒng)的研究與設(shè)計(jì)[D].濟(jì)南:山東山東大學(xué),2004

[2]張嵐.淺析數(shù)據(jù)庫技術(shù)的發(fā)展趨勢(shì)[J].信息與電腦(理論版).2012

第2篇:大數(shù)據(jù)庫建設(shè)方案范文

顛覆性改變

由于醫(yī)院數(shù)據(jù)具有數(shù)據(jù)量總體偏小,并以結(jié)構(gòu)化數(shù)據(jù)為主,以及管理工具以O(shè)RACLE、SQLserver等數(shù)據(jù)庫管理系統(tǒng)為主等特點(diǎn),使得醫(yī)院信息系統(tǒng)仍然以提高工作效率、提升精細(xì)管理和優(yōu)化診療流程為主,醫(yī)療質(zhì)量主要體現(xiàn)在對(duì)醫(yī)療過程的環(huán)節(jié)控制上,真正以提高診斷水平和診療技術(shù)為目的的信息系統(tǒng)還屈指可數(shù)。另外由于醫(yī)院管理總體上還比較粗放,對(duì)于這些有限的數(shù)據(jù)利用率也還不夠高,因此有人得出醫(yī)院沒有大數(shù)據(jù)的結(jié)論。

但作者認(rèn)為盡管大數(shù)據(jù)目前在醫(yī)院還沒有得到充分應(yīng)用,卻已越來越表現(xiàn)出大數(shù)據(jù)的特征。首先區(qū)域醫(yī)療的發(fā)展使得一個(gè)地區(qū)的醫(yī)療數(shù)據(jù)完全達(dá)到PB級(jí),即使是在醫(yī)院內(nèi)部,10多年的數(shù)據(jù)也接近乃至達(dá)到PB級(jí)。其次醫(yī)療數(shù)據(jù)越來越多樣化,臨床的深入應(yīng)用必然要采集包括數(shù)值、文字、影像、文本、語音等各種類型的診療數(shù)據(jù)。另外,云計(jì)算、移動(dòng)互聯(lián)網(wǎng)、可穿戴設(shè)備、基因治療、大型影像設(shè)備的發(fā)展讓醫(yī)療領(lǐng)域快速積累了大量蘊(yùn)含極大價(jià)值的診療數(shù)據(jù)。這些海量數(shù)據(jù)依靠原有的數(shù)據(jù)庫或數(shù)據(jù)倉庫技術(shù)已經(jīng)難以得到充分的利用,必須引入新的技術(shù)才能解決。

利用這些“大數(shù)據(jù)”將對(duì)醫(yī)療服務(wù)模式產(chǎn)生巨大影響。首先在臨床決策支持上,通過全面分析同類型患者的體征數(shù)據(jù)和療效數(shù)據(jù),比較多種干預(yù)措施的有效性,找到最佳治療途徑。精確分析包括患者體征數(shù)據(jù)、費(fèi)用數(shù)據(jù)和療效數(shù)據(jù)在內(nèi)的大型數(shù)據(jù)集,幫助醫(yī)生確定臨床上最有效和最具有成本效益的治療方法。

利用規(guī)則和數(shù)據(jù)進(jìn)行實(shí)時(shí)分析,給出藥物過敏重點(diǎn)人群、慢病患者等各類警示信息以及重復(fù)檢查檢驗(yàn)提示,提醒醫(yī)生防止?jié)撛诘腻e(cuò)誤,降低醫(yī)療事故率。對(duì)數(shù)據(jù)的深入分析和挖掘,能給醫(yī)生提供診療建議,從而提高工作效率和診療質(zhì)量。

其次,基于海量的臨床和分子生物學(xué)數(shù)據(jù)、信息與知識(shí)的整合與分析,個(gè)性化醫(yī)療逐漸進(jìn)入臨床實(shí)踐。通過高級(jí)算法和分布式計(jì)算加快基因測(cè)序計(jì)算效率,加速基因序列分析,讓疾病的發(fā)現(xiàn)過程變得更快、更容易和更便宜。根據(jù)基因信息,制定專門的疾病治療方案。考察遺傳變異對(duì)特定疾病的易感性和對(duì)特殊藥物的反應(yīng)的關(guān)系,針對(duì)不同患者采取不同的診療方案,提供個(gè)性化治療服務(wù)。

另外,大數(shù)據(jù)分析技術(shù)對(duì)非結(jié)構(gòu)化數(shù)據(jù)的分析能力更加強(qiáng)大,以此可以發(fā)展智能化診療技術(shù)。比如可以使用圖像分析和識(shí)別技術(shù)識(shí)別醫(yī)療影像(X線、CT、MRI)數(shù)據(jù),或者挖掘醫(yī)療文獻(xiàn)數(shù)據(jù)建立醫(yī)療專家數(shù)據(jù)庫,從而通過操作計(jì)算機(jī)就基本可以對(duì)大部分常見病和多發(fā)病做出診斷。另外大數(shù)據(jù)分析、海量醫(yī)學(xué)影像檢查、三維重建技術(shù)和機(jī)器人手術(shù)等將顛覆手術(shù)模式,未來醫(yī)院的手術(shù)也許將按如下路徑展開:智能診斷->海量影像檢查->三維重建->手術(shù)導(dǎo)航->機(jī)器人手術(shù)。

同時(shí),大數(shù)據(jù)采集管理結(jié)合可視化技術(shù),可以有效提升醫(yī)療效率和質(zhì)量。如西雅圖兒童醫(yī)院的醫(yī)護(hù)人員通過使用iPad上的數(shù)據(jù)可視化和分析工具Tableau來分析遍布醫(yī)院各處的服務(wù)器和數(shù)據(jù)庫里的數(shù)億TB數(shù)據(jù),并以數(shù)據(jù)可視化方式展現(xiàn)數(shù)據(jù)之間的關(guān)系和趨勢(shì)。可視化數(shù)據(jù)分析不但幫助醫(yī)護(hù)人員減少醫(yī)療事故,制定臨床試驗(yàn)計(jì)劃,而且還幫醫(yī)院節(jié)省了供應(yīng)鏈成本。

此外,在健康管理和流行病檢測(cè)以及疾病預(yù)防方面,大數(shù)據(jù)也將大有作為。通過對(duì)健康傳感器采集的如睡眠質(zhì)量數(shù)據(jù)、日?;顒?dòng)數(shù)據(jù),以及大量公共衛(wèi)生和健康行為數(shù)據(jù),還有來自社交網(wǎng)絡(luò)上的各種相關(guān)數(shù)據(jù)進(jìn)行關(guān)聯(lián)分析,提供一個(gè)可針對(duì)個(gè)人的健康行為分析平臺(tái),協(xié)助將健康傳感器和移動(dòng)數(shù)據(jù)轉(zhuǎn)換為個(gè)人健康建議和指導(dǎo)。

另一方面,公共衛(wèi)生部門可以通過覆蓋全國的患者電子病歷數(shù)據(jù)庫,快速檢測(cè)傳染病,進(jìn)行全面的疫情監(jiān)測(cè),并通過集成疾病監(jiān)測(cè)和響應(yīng)程序,快速進(jìn)行響應(yīng)。大數(shù)據(jù)幫助確定哪些人是某類疾病的易感人群,如應(yīng)用高級(jí)分析可以幫助識(shí)別哪些患者有患糖尿病的高風(fēng)險(xiǎn),使他們盡早接受預(yù)防性保健方案。這些方法也可以幫患者從已經(jīng)存在的疾病管理方案中找到最好的治療方案。

總而言之,通過對(duì)大數(shù)據(jù)的深度挖掘利用,不僅能夠改變?cè)\療模式,還會(huì)使患者服務(wù)、決策方式和精細(xì)化管理等方面都發(fā)生質(zhì)的改變。

積極應(yīng)對(duì)

面對(duì)大數(shù)據(jù)帶來的機(jī)遇和挑戰(zhàn),作者認(rèn)為首先要轉(zhuǎn)變對(duì)大數(shù)據(jù)的態(tài)度?,F(xiàn)在業(yè)內(nèi)對(duì)新技術(shù)往往存在不正確的認(rèn)識(shí),一種是盲目追隨,不管是否符合實(shí)際,不管是否能夠產(chǎn)生效益,盲目引進(jìn)新技術(shù),導(dǎo)致不必要的浪費(fèi);另一種是盲目拒絕,覺得大數(shù)據(jù)還很遙遠(yuǎn),高掛免戰(zhàn)牌。

對(duì)待像大數(shù)據(jù)這類新技術(shù),一定要樹立大數(shù)據(jù)意識(shí)。首先要熱情擁抱,不要排斥,要跟進(jìn)、學(xué)習(xí)和體驗(yàn),并思考大數(shù)據(jù)與行業(yè)的結(jié)合點(diǎn),努力應(yīng)用創(chuàng)新。其次是要科學(xué)對(duì)待,思考并創(chuàng)新應(yīng)用新技術(shù)解決現(xiàn)實(shí)問題。

之后,還要有效組織大數(shù)據(jù)。大數(shù)據(jù)不是憑空而來的,醫(yī)療大數(shù)據(jù)完全是在互聯(lián)網(wǎng)、物聯(lián)網(wǎng)、云計(jì)算和可穿戴設(shè)備等深入應(yīng)用到醫(yī)療行業(yè)各個(gè)領(lǐng)域后聚集而來的,應(yīng)用大數(shù)據(jù)還必須學(xué)會(huì)有效組織大數(shù)據(jù)。醫(yī)療領(lǐng)域的信息系統(tǒng)不少還是離散的、垂直的業(yè)務(wù)和單一的應(yīng)用。通過云計(jì)算可以搭建一個(gè)扁平化的信息云平臺(tái),在此之上可以把原來離散的信息系統(tǒng)整合起來,進(jìn)而促進(jìn)業(yè)務(wù)的有效協(xié)同??梢园央x散在各個(gè)系統(tǒng)、各個(gè)機(jī)構(gòu)甚至各個(gè)醫(yī)療器械中的健康信息提取出來,形成完整的診療信息,從而形成完整的臨床診療數(shù)據(jù)中心。

第3篇:大數(shù)據(jù)庫建設(shè)方案范文

關(guān)鍵詞:大數(shù)據(jù);BIM系統(tǒng);基礎(chǔ)數(shù)據(jù);施工企業(yè)

大數(shù)據(jù)時(shí)代,建筑行業(yè)無可回避。那么,大數(shù)據(jù)對(duì)建筑行業(yè)到底會(huì)帶來哪些影響呢?“大數(shù)據(jù)”的標(biāo)簽已經(jīng)開始引領(lǐng)建筑業(yè)。但“大數(shù)據(jù)”的真正含義是什么[1],它如何影響建筑行業(yè)?在最簡單的形式中,大數(shù)據(jù)是一個(gè)龐大而復(fù)雜的數(shù)據(jù)集的集合。管理數(shù)據(jù)的能力成為關(guān)鍵。許多建筑公司開始為業(yè)務(wù)和技術(shù)進(jìn)行大數(shù)據(jù)定義,將大數(shù)據(jù)與BIM結(jié)合,管理與BIM相關(guān)的數(shù)據(jù)和其他協(xié)作流程[2]。

大數(shù)據(jù)技術(shù)的戰(zhàn)略意義在于借助于專業(yè)軟件,對(duì)這些含有意義的數(shù)據(jù)進(jìn)行專業(yè)化處理。提高對(duì)數(shù)據(jù)的“加工能力”,通過“加工”實(shí)現(xiàn)數(shù)據(jù)的“增值”。建筑行業(yè)是數(shù)據(jù)最多的行業(yè),但也是數(shù)據(jù)最不透明的行業(yè)。建筑行業(yè)中,掌握數(shù)據(jù)能力強(qiáng)的企業(yè),必然產(chǎn)生極大的競爭優(yōu)勢(shì),并形成核心的競爭能力。那么,大數(shù)據(jù)時(shí)代,施工企業(yè)該如何構(gòu)建企業(yè)的基礎(chǔ)數(shù)據(jù)庫?企業(yè)基礎(chǔ)數(shù)據(jù)又該如何利用呢?

1 建筑施工企業(yè)基礎(chǔ)數(shù)據(jù)定義

施工企業(yè)在施工全過程中產(chǎn)生的資料,將其電子信息化后產(chǎn)生的數(shù)據(jù),就可以成為基礎(chǔ)數(shù)據(jù);基礎(chǔ)數(shù)據(jù)包括:預(yù)算數(shù)據(jù),建筑施工模型,企業(yè)定額,企業(yè)指標(biāo)庫、企業(yè)知識(shí)經(jīng)驗(yàn)庫;其中,企業(yè)定額庫是企業(yè)所獨(dú)特的,通過設(shè)計(jì)階段的建筑實(shí)物模型得到的計(jì)劃量,根據(jù)各個(gè)企業(yè)的管理水平和技術(shù)力量不同,資源實(shí)際的消耗量也不一樣。施工過程中發(fā)生的人、材、機(jī)、稅、費(fèi)、技術(shù)、消耗量、價(jià)格等,都屬于施工企業(yè)的基礎(chǔ)數(shù)據(jù)中的預(yù)算數(shù)據(jù)。對(duì)于施工企業(yè)來講,最核心的基礎(chǔ)數(shù)據(jù)就是企業(yè)定額。通過搜集、分析、歸納、反饋、再收集這一循環(huán)來制定一個(gè)企業(yè)的基礎(chǔ)數(shù)據(jù)庫;施工企業(yè)的基礎(chǔ)數(shù)據(jù)有很多種類:工程數(shù)據(jù)、企業(yè)消耗量指標(biāo)、價(jià)格庫、構(gòu)件庫等,只有工程項(xiàng)目本身的數(shù)據(jù)來源于設(shè)計(jì),其它的數(shù)據(jù)另有解決方案來收集、處理、共享、應(yīng)用。

2 基礎(chǔ)數(shù)據(jù)構(gòu)建基本條件

2.1 共同平臺(tái),相同規(guī)范

上下層級(jí)協(xié)同歸集,創(chuàng)建一個(gè)共同開發(fā)的平臺(tái);最好能有一個(gè)和清單計(jì)價(jià)規(guī)范一樣的整體分類;建筑企業(yè)基礎(chǔ)數(shù)據(jù)要在BIM平臺(tái)發(fā)揮使用價(jià)值,首先要?dú)w集成大家認(rèn)可的企業(yè)定額庫、指標(biāo)庫等。平臺(tái)的構(gòu)建是關(guān)鍵,一定要由懂得施工流程與控制相關(guān)的專業(yè)人員和系統(tǒng)軟件建立數(shù)據(jù)庫。

2.2 需求出發(fā),部門配合

首先要從需求出發(fā),再分析自己的需求應(yīng)該來源于哪些數(shù)據(jù);由對(duì)應(yīng)的各部門提供,專門部門管理;基礎(chǔ)數(shù)據(jù)庫要開發(fā)對(duì)應(yīng)的應(yīng)用,讓數(shù)據(jù)流動(dòng)起來。

2.3 做好規(guī)劃,管理先行

做好大數(shù)據(jù)規(guī)劃,信息細(xì)度的劃分等數(shù)據(jù)管理規(guī)范是基礎(chǔ)數(shù)據(jù)庫的基石。在管理手段上提出符合專業(yè)數(shù)據(jù)的要求;在技術(shù)手段上和云、BIM等先進(jìn)系統(tǒng)軟件結(jié)合;在理念上基礎(chǔ)數(shù)據(jù)是需要的;在制度上規(guī)定必須用;在技術(shù)保障上推廣BIM等手段[3]。

不同的建筑數(shù)據(jù)來源,必定對(duì)應(yīng)不同的管理出處和管理目標(biāo),整合是關(guān)鍵,但還要進(jìn)行必要的區(qū)分和歸類;基礎(chǔ)數(shù)據(jù)協(xié)同、共享的基礎(chǔ)是數(shù)據(jù)的結(jié)構(gòu)化;建筑企業(yè)的目標(biāo)是將項(xiàng)目流程化,模塊化,規(guī)范化。這樣整理出的大數(shù)據(jù),才能為行業(yè)所用;建筑過程中發(fā)生的所有數(shù)據(jù),都要能自動(dòng)化、低成本、高效率收集起來,并能將數(shù)據(jù)盡可能結(jié)構(gòu)化,并與行業(yè)業(yè)務(wù)系統(tǒng)對(duì)接,可隨時(shí)再利用,并可分享給全行業(yè)。

3 目前存在的數(shù)據(jù)構(gòu)建難點(diǎn)

3.1 數(shù)據(jù)難以收集

建筑企業(yè)長期處于手工時(shí)代,基礎(chǔ)數(shù)據(jù)都存放于業(yè)務(wù)人員的大腦中。

3.2 數(shù)據(jù)無法實(shí)現(xiàn)共享

尤其是中小施工企業(yè),各職能部門的數(shù)據(jù),都是為自己部門服務(wù),沒有統(tǒng)一口徑的數(shù)據(jù);企業(yè)編碼不統(tǒng)一,建筑企業(yè)信息化數(shù)據(jù)難以共享,缺乏一個(gè)大的數(shù)據(jù)平臺(tái)。

3.3 基礎(chǔ)數(shù)據(jù)庫對(duì)專業(yè)要求太高

數(shù)據(jù)庫的專業(yè)化程度太高,非數(shù)據(jù)專家不能應(yīng)用;建立數(shù)據(jù)庫考驗(yàn)企業(yè)人員的業(yè)務(wù)能力;基礎(chǔ)數(shù)據(jù)庫的創(chuàng)建與運(yùn)維,考驗(yàn)信息化部門的信息管理能力。最關(guān)鍵的問題是,建筑行業(yè)管理層次的困難,就是對(duì)這海量數(shù)據(jù)的掌控能力不夠,因此必須要借助BIM這樣的工具。同時(shí)基礎(chǔ)數(shù)據(jù)庫需要一個(gè)緩慢積累過程。

4 BIM系統(tǒng)在基礎(chǔ)數(shù)據(jù)構(gòu)建方面的作用

4.1 基礎(chǔ)數(shù)據(jù)提升管控力度,改善管理效率

基于BIM的基礎(chǔ)數(shù)據(jù)庫,數(shù)據(jù)被處理后的信息,是支持決策的關(guān)鍵,可以派生管理所需的信息;數(shù)據(jù)的歸集主要是將數(shù)據(jù)結(jié)構(gòu)化,管控就是通過對(duì)結(jié)構(gòu)化數(shù)據(jù)的應(yīng)用,完成特定的任務(wù)與工作;基礎(chǔ)數(shù)據(jù)庫的建立實(shí)際是可以認(rèn)為是我們施工企業(yè)管理理念的更新,提升管理的效率。

4.2 借助基礎(chǔ)數(shù)據(jù),提升經(jīng)濟(jì)價(jià)值

基于BIM的基礎(chǔ)數(shù)據(jù)庫,為我們規(guī)范管理,帶來經(jīng)濟(jì)利潤的提高;基礎(chǔ)數(shù)據(jù)可以歸納、分析、提煉出一些KPI指標(biāo),應(yīng)用于企業(yè)內(nèi)部的考核和外部溝通;還能促進(jìn)建筑工廠化建設(shè),減少耗材和浪費(fèi),控制人工支出等。

4.3 實(shí)現(xiàn)數(shù)據(jù)共享,提升項(xiàng)目和企業(yè)協(xié)同能力

輕松管理軟件資產(chǎn),過程數(shù)據(jù)留在企業(yè)數(shù)據(jù)服務(wù)器,不再擔(dān)心數(shù)據(jù)流失;工程問題照片實(shí)時(shí)收集和監(jiān)管處理;知識(shí)積累和共享、建立企業(yè)標(biāo)準(zhǔn):企業(yè)指標(biāo)庫、企業(yè)自動(dòng)套、企業(yè)定額庫、企業(yè)構(gòu)件庫,讓企業(yè)中的每位員工都能成為行業(yè)專家,企業(yè)專家建設(shè),全公司員工共享,大幅提升團(tuán)隊(duì)專業(yè)水平;共享、協(xié)同、應(yīng)用:輕松建立基于BIM的企業(yè)級(jí)項(xiàng)目基礎(chǔ)數(shù)據(jù)庫,實(shí)現(xiàn)BIM圖形數(shù)據(jù)、報(bào)表數(shù)據(jù)共享,實(shí)現(xiàn)產(chǎn)值統(tǒng)計(jì)、生產(chǎn)計(jì)劃、材料用量分析、成本分析等多項(xiàng)企業(yè)應(yīng)用。

5 結(jié)束語

大數(shù)據(jù)時(shí)代,BIM技術(shù)不僅在處理項(xiàng)目級(jí)的基礎(chǔ)數(shù)據(jù)方面發(fā)揮了作用,在支撐企業(yè)級(jí)海量數(shù)據(jù)方面,同樣具備強(qiáng)大的能力。建筑業(yè)項(xiàng)目管理主流模式至今還是以承包制為主,集約化運(yùn)營難以做到。其根源就在于企業(yè)級(jí)數(shù)據(jù)集約化還無法實(shí)現(xiàn),但基于大數(shù)據(jù)時(shí)代的需求,借助于BIM的企業(yè)級(jí)項(xiàng)目管理系統(tǒng)的發(fā)展,解決這一問題將不再是難事。

參考文獻(xiàn)

[1]孟小峰,慈祥.大數(shù)據(jù)管理:概念,技術(shù)與挑戰(zhàn)[J].計(jì)算機(jī)研究與發(fā)展,2013,50(1):146-169.

[2]侍干霞.建筑企業(yè)信息化建設(shè)[J].城市建設(shè)理論研究(電子版),2014(7).

第4篇:大數(shù)據(jù)庫建設(shè)方案范文

Gartner報(bào)告預(yù)計(jì),2013年全球各大企業(yè)用于大數(shù)據(jù)業(yè)務(wù)的投資總額將增至340億美元,同比增長8倍;2013年年初IDC預(yù)測(cè),大數(shù)據(jù)技術(shù)與服務(wù)市場將從2010年的32億美元攀升至2015年的169億美元,實(shí)現(xiàn)高達(dá)40%的年增長率,并將是整個(gè)IT與通信產(chǎn)業(yè)增長率的7倍。大數(shù)據(jù)的發(fā)展趨勢(shì)毋庸置疑。

數(shù)據(jù)越發(fā)龐大,積累的商業(yè)信息越多,價(jià)值也就越大。以海量、多樣、快速為顯著特征的大數(shù)據(jù),不像傳統(tǒng)數(shù)據(jù)庫的數(shù)據(jù)那么易于管理和分析,在為整個(gè)IT及通信行業(yè)帶來機(jī)會(huì)的同時(shí),也提出了更高的要求。大數(shù)據(jù)時(shí)代的戰(zhàn)略意義已超越如何掌握龐大的數(shù)據(jù)信息,而是實(shí)現(xiàn)對(duì)這些數(shù)據(jù)的深層挖掘,進(jìn)而讓其“增值”。

驅(qū)動(dòng)大數(shù)據(jù)發(fā)展的重要因素主要來自兩個(gè)方面:一是消費(fèi)領(lǐng)域,如網(wǎng)購及社交媒體應(yīng)用產(chǎn)生的大量數(shù)據(jù);另一方面來自城市基礎(chǔ)設(shè)施建設(shè),安防便是其中之一。建設(shè)平安城市的過程伴隨大量數(shù)據(jù)的產(chǎn)生,尤其是以視頻監(jiān)控為主要特征的數(shù)字安全監(jiān)控(Digital Security Surveillance, DSS)。我們所居住的城市中有無數(shù)的高清攝像頭,涉及治安監(jiān)控、指揮通信、偵查破案、規(guī)范執(zhí)法、社會(huì)服務(wù)等,視頻接入規(guī)模從幾千到幾十萬,隨著安防監(jiān)控對(duì)高清、智能、聯(lián)網(wǎng)的要求越來越高,每天產(chǎn)生的數(shù)據(jù)規(guī)模正以驚人的速度不斷增長。

安防大數(shù)據(jù)

從全省、市視頻監(jiān)控,交通卡口監(jiān)控,到運(yùn)營商機(jī)房和基站的環(huán)境量監(jiān)控,原有的系統(tǒng)數(shù)據(jù)查詢?cè)絹碓铰?,寫入的?shù)據(jù)越來越多,需要配置的存儲(chǔ)也越來越大,原先使用的關(guān)系型數(shù)據(jù)庫性能壓力激增,IO陷入瓶頸,不得不承認(rèn)安防領(lǐng)域的大數(shù)據(jù)時(shí)代已經(jīng)來臨。然而,一直以來,由于安防行業(yè)的自身業(yè)務(wù)特點(diǎn)以及國內(nèi)廠商受研發(fā)方向所限,大數(shù)據(jù)技術(shù)在安防領(lǐng)域并不如在IT、互聯(lián)網(wǎng)行業(yè)那樣得以深入應(yīng)用。隨著科技巨頭的入駐,這一市場格局正在發(fā)生巨變。

基于安防的大數(shù)據(jù)同樣引起了計(jì)算機(jī)和服務(wù)巨頭IBM的注意。2012年10月,IBM了專為大數(shù)據(jù)處理打造的專家集成系統(tǒng)PureData,并和南京有關(guān)部門達(dá)成建設(shè)“智慧南京”的戰(zhàn)略合作,綜合應(yīng)用智慧交通、智慧醫(yī)療、智慧數(shù)據(jù)系統(tǒng),提高南京市民的生活水平。

云計(jì)算解決方案供應(yīng)商浪潮緊隨其后,于同年年底宣布推出用于大規(guī)模部署的公共云數(shù)據(jù)中心——“模塊化數(shù)據(jù)中心”。 “數(shù)字安全監(jiān)控遠(yuǎn)非安裝幾個(gè)攝像頭那么簡單。除了捕獲數(shù)據(jù),還要從中充分挖掘新知,在此基礎(chǔ)上開發(fā)更多應(yīng)用。傳統(tǒng)安防廠商和IT廠商合作是未來的發(fā)展趨勢(shì)。安防廠商對(duì)業(yè)務(wù)的熟悉度與IT公司的大數(shù)據(jù)檢索和分析能力是絕佳的互補(bǔ)?!庇⑻貭柟救驍?shù)字安全監(jiān)控市場總監(jiān)Todd Matsler如此評(píng)價(jià)。

智能計(jì)算至關(guān)重要

隨著政府部門大力推動(dòng)“平安城市”、“和諧社會(huì)”建設(shè),各行各業(yè)對(duì)安防產(chǎn)品的需求全面爆發(fā)。金融、交通、政府等傳統(tǒng)領(lǐng)域的安防應(yīng)用更加深入,新生領(lǐng)域如教育、衛(wèi)生、體育、能源飛速發(fā)展,社區(qū)、居民相關(guān)應(yīng)用也在不斷升溫。根據(jù)《安防產(chǎn)業(yè)“十二五”規(guī)劃》所提到的目標(biāo),到“十二五”末期,安防產(chǎn)業(yè)規(guī)模將翻一倍,年均增長率達(dá)到20%左右,2015年總產(chǎn)值達(dá)到5000億元。從高端市場如軍隊(duì)、政府、司法、金融、交通、核電站、機(jī)場與港口,到中端市場如工業(yè)設(shè)施、教育、醫(yī)療,再到居民小區(qū)、零售店鋪、倉庫管理、物流等民用市場,安防需求將全面爆發(fā)。

與此同時(shí),安防行業(yè)在國內(nèi)的發(fā)展表現(xiàn)出一個(gè)重要特點(diǎn),即由政府主導(dǎo)的大型項(xiàng)目推動(dòng),如智能交通系統(tǒng)。以視頻監(jiān)控為主要特征的數(shù)字安全監(jiān)控扮演著無可替代的重要角色,在城際間、城市中的各類設(shè)施及行業(yè)中不斷部署、滲透。隨著視頻監(jiān)控與IT、電信行業(yè)的聯(lián)系日益緊密,數(shù)字化、高清化、網(wǎng)絡(luò)化和智能化成為其發(fā)展方向。

如何從前端攝像頭獲得的數(shù)據(jù)中挖掘出有用的信息,最終服務(wù)于智慧城市、智能交通?我們需要構(gòu)建一個(gè)復(fù)雜而精致的系統(tǒng),并考慮互聯(lián)性、安全性和可管理性。英特爾在構(gòu)建這個(gè)系統(tǒng)時(shí),利用主動(dòng)管理技術(shù)實(shí)現(xiàn)了設(shè)備之間的互聯(lián),并提出了分布式智能計(jì)算的構(gòu)想。后者包含三個(gè)重要概念,一是如何從瀚如煙海的數(shù)據(jù)中挖掘出對(duì)各行業(yè)有用的知識(shí),二是保證基礎(chǔ)架構(gòu)及設(shè)備與設(shè)備間的數(shù)據(jù)流動(dòng),三是降低數(shù)據(jù)對(duì)來自于不同用戶或者不同系統(tǒng)的訪問障礙?!?/p>

這套系統(tǒng)化解決方案,從數(shù)據(jù)獲取、存儲(chǔ)到分析及應(yīng)用各個(gè)層面均有覆蓋,包括軟件。這些基于IA架構(gòu)的技術(shù),不僅廣泛應(yīng)用于后端運(yùn)算系統(tǒng)以及開發(fā)系統(tǒng),也在前端和邊緣設(shè)備中發(fā)揮著巨大作用,可以幫助設(shè)備開發(fā)商大幅縮短產(chǎn)品上市周期,降低開發(fā)成本,同時(shí),其強(qiáng)大的計(jì)算能力以及基于互聯(lián)網(wǎng)應(yīng)用的開放平臺(tái)也將進(jìn)一步促進(jìn)安防行業(yè)的多樣化發(fā)展。

而博康智能副總裁田廣表示,安防行業(yè)的數(shù)字化、高清化、網(wǎng)絡(luò)化和智能化轉(zhuǎn)變,也契合了國家的物聯(lián)網(wǎng)政策。數(shù)字安防監(jiān)控行業(yè)的現(xiàn)狀是缺乏標(biāo)準(zhǔn)卻要謀求大發(fā)展,這對(duì)企業(yè)產(chǎn)品兼容性、未來的可擴(kuò)展性、產(chǎn)品性能、安全性以及穩(wěn)定性是個(gè)很大的挑戰(zhàn),需要企業(yè)在軟件、上層平臺(tái)等方面都有很強(qiáng)的規(guī)劃和實(shí)施能力。

安防的可期未來

全國政協(xié)委員、南京政協(xié)主席沈健就大數(shù)據(jù)時(shí)代政府的公共基礎(chǔ)建設(shè)需求這一主題曾說過:在大數(shù)據(jù)時(shí)代,政府要做的事情,第一應(yīng)該高度重視數(shù)據(jù)的采集和生成;第二做好數(shù)據(jù)的公開工作;第三,數(shù)據(jù)的整合;第四,建立我們的數(shù)據(jù)文化;第五,數(shù)據(jù)安全。這意味著在智慧城市的基礎(chǔ)建設(shè)中,大數(shù)據(jù)將承擔(dān)更多信息的挖掘和整合工作。

當(dāng)數(shù)據(jù)全面實(shí)現(xiàn)聯(lián)網(wǎng)、共享,得到有效存儲(chǔ),并予以充分分析和挖掘,安防領(lǐng)域的大數(shù)據(jù)時(shí)代將真正深化。那時(shí)警察可以輕松地搜索某一時(shí)段某一顏色或某一品牌汽車的所有視頻并快速識(shí)別違章行為;在沒有人為干擾的情況下,視頻監(jiān)控設(shè)備通過自動(dòng)分析對(duì)動(dòng)態(tài)場景中的目標(biāo)進(jìn)行定位、識(shí)別和跟蹤,在異常情況發(fā)生時(shí)做出反應(yīng),進(jìn)行自動(dòng)報(bào)警;現(xiàn)在每年社會(huì)走失的老人、小孩成千上萬,開發(fā)“人員走失查詢系統(tǒng)”,聯(lián)網(wǎng)共享這些視頻資源,將為更多的老百姓服務(wù)……

大數(shù)據(jù)究竟可以帶給安防一個(gè)怎樣的未來,我們拭目以待!

-李育新

LSI SAS力挺新型服務(wù)器

LSI 公司日前宣布,其12Gb/s SAS存儲(chǔ)解決方案將用于100多款新型服務(wù)器,這些服務(wù)器均采用日前宣布的IntelXeon處理器E5-2600 v2產(chǎn)品系列。包括Asustek、Fujitsu、Gigabyte、Huawei、Intel、Supermicro等在內(nèi)的領(lǐng)先服務(wù)器制造商,均已選用LSI12Gb/s SAS和MegaRAID解決方案,為其新一代服務(wù)器平臺(tái)提供存儲(chǔ)性能加速和企業(yè)數(shù)據(jù)保護(hù)功能。

LSI 12Gb/s SAS技術(shù)能將存儲(chǔ)I/O性能提升50%。Intel Xeon 處理器E5-2600 v2產(chǎn)品系列采用22nm工藝技術(shù),大幅降低了功耗,同時(shí)提升了性能。這樣的組合解決方案將為新一代服務(wù)器提供強(qiáng)大的平臺(tái)。

今年,針對(duì)服務(wù)器和外部存儲(chǔ)OEM廠商,LSI宣布推出業(yè)界首批12Gb/s SAS 片上RAID(RAID-on-Chip)和I/O控制器。7月,LSI率先宣布向市場推出12Gb/s SAS主機(jī)總線適配器系列產(chǎn)品。

自SAS誕生以來,LSI推出了眾多領(lǐng)先的產(chǎn)品。LSI SAS解決方案能提供同類最佳的SAS技術(shù),確?;ゲ僮餍院徒y(tǒng)一的廠商支持,現(xiàn)已應(yīng)用于業(yè)界最廣泛的服務(wù)器平臺(tái)之上。

昆騰改變數(shù)據(jù)存儲(chǔ)、共享和保護(hù)方式

昆騰公司近日宣布正在與CommVault一同擴(kuò)展其對(duì)象存儲(chǔ)產(chǎn)品,以便為數(shù)據(jù)中心融合備份與歸檔提供獨(dú)一無二的解決方案。這個(gè)經(jīng)過驗(yàn)證的解決方案基于昆騰Lattus對(duì)象存儲(chǔ)技術(shù)以及CommVaultSimpana 10 軟件,能夠?qū)崿F(xiàn)全面數(shù)據(jù)保護(hù)和歸檔戰(zhàn)略,從而降低了主存儲(chǔ)成本并優(yōu)化了備份性能,同時(shí)在多 PT 級(jí)環(huán)境中最大程度降低了管理復(fù)雜性、管理成本和資本支出。

在一個(gè)高度可擴(kuò)展、高成本效益,并且不需要“叉車式”升級(jí)的一種永久性磁盤歸檔的磁盤解決方案中,Quantum Lattus可近線訪問全球各地的歸檔數(shù)據(jù)。Lattus提供比傳統(tǒng) RAID 產(chǎn)品更優(yōu)異的耐用性,其中包括真正的自我修復(fù)和自我保護(hù)功能,并且無需復(fù)制就能自動(dòng)進(jìn)行多站點(diǎn)保護(hù)。最終實(shí)現(xiàn)一個(gè)無需備份的高彈性、容災(zāi)、可擴(kuò)展的歸檔庫。CommVaultSimpana將備份、歸檔、報(bào)告和災(zāi)難恢復(fù)(DR)統(tǒng)一到一個(gè)軟件平臺(tái)上,提供一個(gè)融合數(shù)據(jù)管理解決方案來控制成本和風(fēng)險(xiǎn)。通過昆騰Lattus-D 與CommVaultSimpana的整合,企業(yè)現(xiàn)在可以放心地在Lattus上存儲(chǔ)單一歸檔數(shù)據(jù)實(shí)例。這種方式超出了傳統(tǒng)冗余副本數(shù)據(jù)保護(hù)計(jì)劃所提供的保護(hù)措施。客戶還能得益于全球規(guī)模所實(shí)現(xiàn)的低延遲訪問。

Emulex光纖通道助力HP StoreFabric

第5篇:大數(shù)據(jù)庫建設(shè)方案范文

關(guān)鍵詞:大數(shù)據(jù);管理會(huì)計(jì)信息系統(tǒng);項(xiàng)目管理

引言:大數(shù)據(jù)時(shí)代,能否從海量信息中獲取關(guān)鍵或相關(guān)信息,進(jìn)而獲得客戶,成為企業(yè)盈利的重要環(huán)節(jié)。對(duì)大數(shù)據(jù)的分析和應(yīng)用是管理會(huì)計(jì)的職能之一。傳統(tǒng)管理會(huì)計(jì)重視財(cái)務(wù)信息的分析和應(yīng)用,忽略了海量非結(jié)構(gòu)化的業(yè)務(wù)數(shù)據(jù),與業(yè)務(wù)脫節(jié)嚴(yán)重,管理會(huì)計(jì)報(bào)告質(zhì)量不高。2016年,財(cái)政部《會(huì)計(jì)改革與發(fā)展“十三五”規(guī)劃綱要(2016-2020)》,提出“提高企業(yè)會(huì)計(jì)信息化水平”,“推動(dòng)基層單位會(huì)計(jì)信息系統(tǒng)與業(yè)務(wù)系統(tǒng)的有機(jī)融合,推動(dòng)會(huì)計(jì)工作從傳統(tǒng)核算型向現(xiàn)代管理型轉(zhuǎn)變”,并“密切關(guān)注大數(shù)據(jù)、“互聯(lián)網(wǎng)+”發(fā)展對(duì)會(huì)計(jì)工作的影響”。這表明管理會(huì)計(jì)信息化已上升成為國家戰(zhàn)略層面的高度。管理會(huì)計(jì)信息化成為企業(yè)的基本要求,數(shù)字化、信息化、智能化轉(zhuǎn)型勢(shì)在必行。如何構(gòu)建大數(shù)據(jù)管理會(huì)計(jì)信息系統(tǒng)并應(yīng)用,是本文研究的重點(diǎn)。

一、大數(shù)據(jù)對(duì)管理會(huì)計(jì)的要求

1.大數(shù)據(jù)和大數(shù)據(jù)技術(shù)

自媒體和多渠道電商平臺(tái)的興起,產(chǎn)生了海量大數(shù)據(jù)。大數(shù)據(jù)是指與目標(biāo)群體相關(guān)的存儲(chǔ)類型多樣化的海量數(shù)據(jù),具有短時(shí)間體量巨大、類型多樣化、價(jià)值密度低、時(shí)效性高等特征。大數(shù)據(jù)分為結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)兩種。結(jié)構(gòu)化數(shù)據(jù)是指能夠以一定的邏輯結(jié)構(gòu)進(jìn)行呈現(xiàn)的數(shù)據(jù),通常指以文字、數(shù)字和表格形式存儲(chǔ)的財(cái)務(wù)數(shù)據(jù)、人事數(shù)據(jù)、供應(yīng)商和客戶數(shù)據(jù)等,這些數(shù)據(jù)便于使用者運(yùn)用傳統(tǒng)技術(shù)方法進(jìn)行計(jì)算和分析。非結(jié)構(gòu)化數(shù)據(jù)是指不能以一定的結(jié)構(gòu)呈現(xiàn),以圖片、動(dòng)畫、音頻、視頻等多樣化存儲(chǔ)形式存在的數(shù)據(jù),這些數(shù)據(jù)難以使用傳統(tǒng)技術(shù)方法提取有效信息,且產(chǎn)生時(shí)效短,數(shù)量巨大,因此,需要大數(shù)據(jù)技術(shù)及時(shí)對(duì)數(shù)據(jù)進(jìn)行挖掘、清洗和分析,才能提取經(jīng)營決策有效信息。

大數(shù)據(jù)技術(shù)包括大數(shù)據(jù)信息平臺(tái)構(gòu)建、數(shù)據(jù)挖掘和清洗、數(shù)據(jù)分析和處理等技術(shù)。大數(shù)據(jù)挖掘是對(duì)數(shù)據(jù)的全覆蓋式搜索,通過關(guān)鍵詞的精準(zhǔn)和模糊搜索,全面搜索含關(guān)鍵詞的字段、圖片、動(dòng)畫、網(wǎng)頁、音頻、視頻等數(shù)據(jù),按一定規(guī)則對(duì)數(shù)據(jù)進(jìn)行描述、分類,歸入數(shù)據(jù)倉庫。數(shù)據(jù)清洗是依據(jù)一定規(guī)則對(duì)分類數(shù)據(jù)提取關(guān)鍵信息,清洗無用數(shù)據(jù)和信息,歸集至相應(yīng)的數(shù)據(jù)庫。數(shù)據(jù)分析和處理是指運(yùn)用聚類分析、回歸分析、決策樹分析等大數(shù)據(jù)分析方法對(duì)數(shù)據(jù)進(jìn)行分析,發(fā)現(xiàn)數(shù)據(jù)的變化趨勢(shì),為經(jīng)營決策提供數(shù)據(jù)佐證。

2.大數(shù)據(jù)與管理會(huì)計(jì)信息系統(tǒng)的關(guān)系

大數(shù)據(jù)的發(fā)展為管理會(huì)計(jì)信息系統(tǒng)提供了共享云平臺(tái),提高了會(huì)計(jì)信息化處理效率,降低了會(huì)計(jì)信息化成本。應(yīng)用大數(shù)據(jù)技術(shù)數(shù)據(jù),能夠做好市場預(yù)測(cè)幫助企業(yè)抓住先機(jī),提高財(cái)務(wù)決策的科學(xué)性,提升了管理會(huì)計(jì)分析預(yù)測(cè)的精準(zhǔn)度和效率。同時(shí),大數(shù)據(jù)對(duì)管理會(huì)計(jì)提出了大數(shù)據(jù)思維、分析能力、工具應(yīng)用能力等更高的要求。

管理會(huì)計(jì)信息系統(tǒng)是助力管理會(huì)計(jì)實(shí)現(xiàn)增值目標(biāo)的應(yīng)用工具,其構(gòu)建的原則和框架,不僅應(yīng)基于項(xiàng)目單位的建設(shè)需求,還應(yīng)符合大數(shù)據(jù)時(shí)代的要求。管理會(huì)計(jì)信息系統(tǒng)基于大數(shù)據(jù)技術(shù)進(jìn)行搭建,對(duì)結(jié)構(gòu)化數(shù)據(jù)和非結(jié)構(gòu)化數(shù)據(jù)進(jìn)行全面搜索,歸集到基礎(chǔ)數(shù)據(jù)庫中,采用信息技術(shù)對(duì)數(shù)據(jù)進(jìn)行挖掘和清洗、分析處理形成可視化數(shù)據(jù)庫,提供專業(yè)化、可視化的數(shù)據(jù)處理報(bào)告、專項(xiàng)報(bào)告、項(xiàng)目決策報(bào)告。

二、大數(shù)據(jù)時(shí)代管理會(huì)計(jì)信息系統(tǒng)構(gòu)建原則和框架

1.構(gòu)建原則

(1)安全性原則

管理會(huì)計(jì)信息系統(tǒng),是多部門協(xié)同建設(shè)和使用的數(shù)據(jù)系統(tǒng),應(yīng)從用戶級(jí)別和使用權(quán)限、信息搜集和處理、跨庫數(shù)據(jù)提取等方面保證數(shù)據(jù)庫的安全性。首先,建設(shè)單位應(yīng)依據(jù)管理層級(jí)和權(quán)限設(shè)置用戶級(jí)別和權(quán)限,確保在用戶登陸和使用范圍的安全性;應(yīng)設(shè)置信息的重要性等級(jí)標(biāo)準(zhǔn),便于數(shù)據(jù)讀取部門能夠依據(jù)數(shù)據(jù)等級(jí)標(biāo)準(zhǔn)判斷數(shù)據(jù)來源的重要性。其次,管理會(huì)計(jì)為了做出戰(zhàn)略決策、財(cái)務(wù)決策、項(xiàng)目決策,需要從內(nèi)外部搜索、接收大量數(shù)據(jù)。信息搜索過程面臨較大風(fēng)險(xiǎn),應(yīng)建立高標(biāo)準(zhǔn)的防御措施,抵抗病毒和黑客的入侵。最后,管理會(huì)計(jì)信息系統(tǒng)內(nèi)部跨庫數(shù)據(jù)的訪問和提取環(huán)節(jié),是安全保障的重要環(huán)節(jié),應(yīng)在確保安全性的前提下提升跨庫訪問和提取的速度。

(2)開放性原則

管理會(huì)計(jì)信息系統(tǒng)應(yīng)按照開放性原則,建立開源云平臺(tái),架設(shè)開放性結(jié)構(gòu),滿足大數(shù)據(jù)處理的需求。未來的稅務(wù)征管系統(tǒng)、銀行系統(tǒng)、工商系統(tǒng)等平臺(tái)都將實(shí)現(xiàn)數(shù)據(jù)開放查詢。架設(shè)開放性結(jié)構(gòu)的管理會(huì)計(jì)信息系統(tǒng),能夠滿足外部環(huán)境和信息復(fù)雜多變的管理需求,多端口設(shè)計(jì)可以為企業(yè)后續(xù)擴(kuò)容提供便利。

(3)統(tǒng)一性原則

管理會(huì)計(jì)信息系統(tǒng)包括人力資源系統(tǒng)、財(cái)務(wù)信息系統(tǒng)、供應(yīng)鏈系統(tǒng)、銷售信息系統(tǒng)等多個(gè)數(shù)據(jù)庫。各個(gè)數(shù)據(jù)庫相互獨(dú)立,具有不同的數(shù)據(jù)代碼和標(biāo)準(zhǔn)。要建設(shè)管理會(huì)計(jì)信息系統(tǒng),需要整合各獨(dú)立數(shù)據(jù)庫的序號(hào)、代碼、標(biāo)準(zhǔn)和轉(zhuǎn)換規(guī)則,按照統(tǒng)一性的原則,實(shí)施整體統(tǒng)一代碼規(guī)則。只有依據(jù)統(tǒng)一性原則建設(shè),各獨(dú)立數(shù)據(jù)庫才能實(shí)現(xiàn)跨庫搜索和查詢,形成統(tǒng)一的數(shù)據(jù)庫資產(chǎn),才能為實(shí)現(xiàn)管理會(huì)計(jì)目標(biāo)提供數(shù)據(jù)支持。

2.構(gòu)建框架

管理會(huì)計(jì)信息系統(tǒng)是由多個(gè)數(shù)據(jù)系統(tǒng)組成的復(fù)雜系統(tǒng)。依據(jù)系統(tǒng)論的理論,多個(gè)要素組成的復(fù)雜系統(tǒng),具有開放性、自組織性、整體性、關(guān)聯(lián)性、等級(jí)結(jié)構(gòu)性、動(dòng)態(tài)平衡性等共同特征。根據(jù)系統(tǒng)論的觀點(diǎn)和方法,管理會(huì)計(jì)信息系統(tǒng)可按照基礎(chǔ)設(shè)施層、基礎(chǔ)數(shù)據(jù)層、分析應(yīng)用層和綜合報(bào)告層進(jìn)行構(gòu)建。管理會(huì)計(jì)信息系統(tǒng)構(gòu)建框架見下圖。

(1)基礎(chǔ)設(shè)施層

基礎(chǔ)設(shè)施層是系統(tǒng)的平臺(tái),是數(shù)據(jù)存儲(chǔ)的媒介,由互聯(lián)網(wǎng)、服務(wù)器、云服務(wù)器、計(jì)算機(jī)軟硬件等組成。企業(yè)應(yīng)根據(jù)戰(zhàn)略發(fā)展的需要和實(shí)際財(cái)務(wù)狀況,系統(tǒng)化設(shè)計(jì)管理會(huì)計(jì)信息系統(tǒng),明確項(xiàng)目建設(shè)預(yù)算,制定合理的實(shí)施方案。基礎(chǔ)設(shè)施層的構(gòu)建不僅要滿足現(xiàn)有的系統(tǒng)管理需求,還應(yīng)保留足夠的可拓展空間,便于未來的開放性結(jié)構(gòu)擴(kuò)容。

(2)基礎(chǔ)數(shù)據(jù)層

基礎(chǔ)數(shù)據(jù)層是管理會(huì)計(jì)信息系統(tǒng)的數(shù)據(jù)輸入層,分為結(jié)構(gòu)性數(shù)據(jù)和非結(jié)構(gòu)性數(shù)據(jù)。其中,結(jié)構(gòu)性數(shù)據(jù)由人力資源部門、財(cái)務(wù)部門、業(yè)務(wù)部門、研發(fā)部門等分別在相應(yīng)系統(tǒng)端口輸入源數(shù)據(jù);非結(jié)構(gòu)性數(shù)據(jù)則由系統(tǒng)采用大數(shù)據(jù)挖掘技術(shù)從外部獲取,包括從政府網(wǎng)站、工商、稅務(wù)、銀行、電商平臺(tái)、論壇等多渠道獲得實(shí)時(shí)數(shù)據(jù)。基礎(chǔ)數(shù)據(jù)層存儲(chǔ)各種類型的源數(shù)據(jù),為分析應(yīng)用提供數(shù)據(jù)依據(jù)。

(3)分析應(yīng)用層

分析應(yīng)用層包括兩部分,第一部分是預(yù)算管理、戰(zhàn)略管理、資金管理、成本管理、投融資管理、風(fēng)險(xiǎn)管理、績效管理等管理會(huì)計(jì)工作任務(wù);第二部分是大數(shù)據(jù)技術(shù)工具和管理會(huì)計(jì)工具。分析應(yīng)用層的職能是通過大數(shù)據(jù)挖掘、分析技術(shù)、管理會(huì)計(jì)工具,對(duì)基礎(chǔ)數(shù)據(jù)進(jìn)行分析和應(yīng)用,完成管理會(huì)計(jì)工作任務(wù)。系統(tǒng)運(yùn)用大數(shù)據(jù)挖掘、清洗技術(shù),對(duì)非結(jié)構(gòu)化數(shù)據(jù)的圖片、音頻、視頻、動(dòng)畫、網(wǎng)站信息進(jìn)行描述、歸類,挖掘有效信息;并通過聚類分析、決策樹分析、回歸分析等技術(shù)對(duì)有效信息進(jìn)行分析,為管理會(huì)計(jì)的預(yù)算管理、資金管理、投融資管理、成本管理、風(fēng)險(xiǎn)管理、績效管理等職能管理提供清洗后有效信息。管理會(huì)計(jì)應(yīng)對(duì)結(jié)構(gòu)化和轉(zhuǎn)化后的非結(jié)構(gòu)化數(shù)據(jù)進(jìn)行綜合處理,才能做出精準(zhǔn)的決策。

(4)綜合報(bào)告層

綜合報(bào)告層是管理會(huì)計(jì)經(jīng)過分析處理后提供的可視化報(bào)告,包括預(yù)算報(bào)告、戰(zhàn)略報(bào)告、經(jīng)營管理報(bào)告和績效報(bào)告等。綜合報(bào)告層是管理會(huì)計(jì)信息系統(tǒng)的核心,其機(jī)密程度、訪問權(quán)限和修改權(quán)限應(yīng)為最高級(jí)。綜合報(bào)告可以不設(shè)置固定匯報(bào)格式,依據(jù)管理層的需求,提供有針對(duì)性的管理報(bào)告。

三、管理會(huì)計(jì)信息系統(tǒng)在項(xiàng)目管理中的應(yīng)用

在阿米巴經(jīng)營理念下,每個(gè)業(yè)務(wù)部門都是一個(gè)獨(dú)立經(jīng)營、自負(fù)盈虧的主體。各獨(dú)立核算主體按業(yè)務(wù)類別劃分項(xiàng)目制進(jìn)行運(yùn)營。每個(gè)業(yè)務(wù)部門或每個(gè)項(xiàng)目配備一名業(yè)務(wù)伙伴(以下簡稱BP)。企業(yè)設(shè)置BP崗位,是對(duì)業(yè)務(wù)的支持。BP是將財(cái)務(wù)職能提升到業(yè)務(wù)前端,與業(yè)務(wù)同步,為業(yè)務(wù)提供預(yù)算編制和調(diào)整、風(fēng)險(xiǎn)識(shí)別和防控、資金結(jié)算與費(fèi)用控制、財(cái)務(wù)分析和評(píng)價(jià)等管理會(huì)計(jì)服務(wù)和支持。BP的職能,一是輔助業(yè)務(wù)部門跟進(jìn)全流程,為業(yè)務(wù)提供專業(yè)的財(cái)務(wù)建議和服務(wù),二是為管理會(huì)計(jì)提供全過程鏈的分析數(shù)據(jù)。BP崗位能力,除了具備管理會(huì)計(jì)能力和信息系統(tǒng)使用能力,還需要掌握宏觀經(jīng)濟(jì)基礎(chǔ)、行業(yè)生命周期、產(chǎn)業(yè)鏈、企業(yè)的經(jīng)營戰(zhàn)略和策略、采購模式、生產(chǎn)工藝流程、營銷模式等信息。本文以項(xiàng)目管理中BP的工作流程來介紹管理會(huì)計(jì)信息系統(tǒng)在項(xiàng)目管理中的應(yīng)用。

項(xiàng)目管理中,BP的工作主要分為事前預(yù)測(cè)和服務(wù)、事中控制和支持、事后評(píng)價(jià)和反饋三部分。BP進(jìn)入項(xiàng)目組,需要掌握項(xiàng)目實(shí)施區(qū)域環(huán)境和風(fēng)險(xiǎn)評(píng)估、項(xiàng)目業(yè)務(wù)流程、主要競爭對(duì)手、項(xiàng)目預(yù)算等情況,才能為項(xiàng)目提供全流程專業(yè)預(yù)測(cè)和支持。管理會(huì)計(jì)信息系統(tǒng)是BP快速掌握項(xiàng)目情況的優(yōu)質(zhì)工具。項(xiàng)目階段BP和業(yè)務(wù)的工作成果表如下。

1.事前預(yù)測(cè)和服務(wù)

事前,BP的職責(zé)是對(duì)項(xiàng)目區(qū)域宏觀環(huán)境、法律規(guī)章、行業(yè)生命周期、項(xiàng)目競爭程度進(jìn)行風(fēng)險(xiǎn)評(píng)估,完成項(xiàng)目預(yù)算計(jì)劃。BP可以運(yùn)用大數(shù)據(jù)挖掘技術(shù),搜集項(xiàng)目實(shí)施區(qū)域最新的政策文件、稅收優(yōu)惠條件、項(xiàng)目實(shí)施最新規(guī)定、同類項(xiàng)目案例文書等資料,錄入管理會(huì)計(jì)信息系統(tǒng)的基礎(chǔ)數(shù)據(jù)層;通過對(duì)比分析,生成該區(qū)域項(xiàng)目實(shí)施的外部環(huán)境可視化報(bào)告;結(jié)合企業(yè)過去存儲(chǔ)的同類或相同區(qū)域的區(qū)域環(huán)境風(fēng)險(xiǎn)評(píng)估報(bào)告,生成本項(xiàng)目的可視化風(fēng)險(xiǎn)評(píng)估報(bào)告。風(fēng)險(xiǎn)評(píng)估報(bào)告應(yīng)包括項(xiàng)目流程圖和風(fēng)險(xiǎn)識(shí)別點(diǎn)標(biāo)識(shí),有利于項(xiàng)目業(yè)務(wù)執(zhí)行的風(fēng)險(xiǎn)防控。BP編制項(xiàng)目預(yù)算,應(yīng)在公司年度總預(yù)算內(nèi)控制項(xiàng)目預(yù)算額度。BP編制項(xiàng)目預(yù)算計(jì)劃,應(yīng)依據(jù)項(xiàng)目執(zhí)行方案,按照時(shí)間序列和項(xiàng)目進(jìn)度,填制預(yù)算資金支付計(jì)劃表,并按預(yù)算調(diào)整因素確定預(yù)算調(diào)整金額幅度。經(jīng)項(xiàng)目負(fù)責(zé)人調(diào)整和確定后,確定項(xiàng)目預(yù)算計(jì)劃。

2.事中控制和支持

事中,BP的職責(zé)是對(duì)項(xiàng)目執(zhí)行的風(fēng)險(xiǎn)識(shí)別和控制,提供財(cái)務(wù)支持和服務(wù)。BP的風(fēng)險(xiǎn)識(shí)別和控制主要體現(xiàn)在對(duì)項(xiàng)目合同的成果交付和支付等條款議定,以及財(cái)務(wù)結(jié)算風(fēng)險(xiǎn)控制。項(xiàng)目按產(chǎn)品和服務(wù)類型可分為常規(guī)項(xiàng)目和新增項(xiàng)目。對(duì)于常規(guī)項(xiàng)目,BP可以通過管理會(huì)計(jì)信息系統(tǒng)獲得以往期間同類項(xiàng)目的風(fēng)險(xiǎn)評(píng)估報(bào)告和項(xiàng)目風(fēng)險(xiǎn)控制表,可對(duì)同產(chǎn)品項(xiàng)目的風(fēng)險(xiǎn)點(diǎn)識(shí)別和控制有清晰認(rèn)知。對(duì)于新增項(xiàng)目的風(fēng)險(xiǎn)識(shí)別,BP可以運(yùn)用大數(shù)據(jù)挖掘技術(shù)搜索項(xiàng)目風(fēng)險(xiǎn)評(píng)估因素,并通過與項(xiàng)目負(fù)責(zé)人的溝通,明確項(xiàng)目風(fēng)險(xiǎn)識(shí)別和控制環(huán)節(jié),提升項(xiàng)目風(fēng)險(xiǎn)防控水平。BP對(duì)項(xiàng)目的財(cái)務(wù)支持主要體現(xiàn)在對(duì)結(jié)算票據(jù)的核算處理環(huán)節(jié)。BP將票據(jù)掃描錄入后,系統(tǒng)調(diào)用合同庫數(shù)據(jù),自動(dòng)比對(duì)開票人、票據(jù)金額、產(chǎn)品名稱、發(fā)票號(hào)碼、發(fā)票專用章等信息要素。通過比對(duì)審核后,項(xiàng)目的業(yè)務(wù)流、資金流、信息流進(jìn)入相應(yīng)分析應(yīng)用層的專項(xiàng)管理系統(tǒng)。資金流信息進(jìn)入資金管理系統(tǒng),完成資金收付和會(huì)計(jì)記賬等核算工作。業(yè)務(wù)流信息進(jìn)入項(xiàng)目管理系統(tǒng),動(dòng)態(tài)顯示項(xiàng)目進(jìn)度。供應(yīng)商、客戶、產(chǎn)品工藝、產(chǎn)品流程、采購費(fèi)用等信息流信息進(jìn)入信息管理系統(tǒng),豐富項(xiàng)目信息數(shù)據(jù)。

3.事后評(píng)價(jià)和反饋

事后,BP的職責(zé)是對(duì)項(xiàng)目績效、人員績效和往來單位進(jìn)行評(píng)價(jià),并完成項(xiàng)目績效報(bào)告、員工績效報(bào)告、往來單位評(píng)價(jià)報(bào)告和項(xiàng)目總結(jié)報(bào)告。項(xiàng)目績效報(bào)告不再是過去對(duì)項(xiàng)目的經(jīng)驗(yàn)總結(jié),而是依據(jù)管理會(huì)計(jì)信息系統(tǒng)的預(yù)算計(jì)劃、執(zhí)行、調(diào)整、項(xiàng)目盈利等情況進(jìn)行針對(duì)性的科學(xué)評(píng)價(jià)。員工績效報(bào)告,依據(jù)項(xiàng)目方案,按進(jìn)度和時(shí)間節(jié)點(diǎn),對(duì)員工完成項(xiàng)目任務(wù)的質(zhì)量和進(jìn)度進(jìn)行評(píng)價(jià),既利于項(xiàng)目員工成長,也利于項(xiàng)目管理。往來單位評(píng)價(jià)報(bào)告,從信息管理系統(tǒng)導(dǎo)出基礎(chǔ)數(shù)據(jù),按照項(xiàng)目評(píng)價(jià)標(biāo)準(zhǔn)對(duì)供應(yīng)商和客戶進(jìn)行級(jí)別評(píng)價(jià),并列出評(píng)價(jià)依據(jù)。評(píng)價(jià)依據(jù)應(yīng)按照往來單位規(guī)模、管理制度、人員能力、預(yù)算執(zhí)行、合同議價(jià)等因素進(jìn)行客觀列示。項(xiàng)目總結(jié)報(bào)告是從財(cái)務(wù)角度對(duì)項(xiàng)目方案、預(yù)算執(zhí)行、盈利能力、發(fā)展能力等進(jìn)行總結(jié)。

綜上,可以看出,大數(shù)據(jù)時(shí)代,管理會(huì)計(jì)信息系統(tǒng)運(yùn)用大數(shù)據(jù)信息技術(shù)和管理會(huì)計(jì)技術(shù)進(jìn)行大數(shù)據(jù)信息處理、財(cái)務(wù)支持和風(fēng)險(xiǎn)防控,在事前、事中、事后三個(gè)環(huán)節(jié)能夠有效降低項(xiàng)目的風(fēng)險(xiǎn)水平,提高項(xiàng)目執(zhí)行效率,提升項(xiàng)目盈利能力。

四、管理會(huì)計(jì)信息系統(tǒng)的安全保障

第6篇:大數(shù)據(jù)庫建設(shè)方案范文

關(guān)鍵詞:大數(shù)據(jù) SAP HANA 電力大數(shù)據(jù) 電力系統(tǒng)

中圖分類號(hào):TP311.13 文獻(xiàn)標(biāo)識(shí)碼:A 文章編號(hào):1007-9416(2016)11-0150-01

近年來,國內(nèi)許多電力企業(yè)的業(yè)務(wù)不斷發(fā)展,除了傳統(tǒng)的火電發(fā)電,還涉及風(fēng)力發(fā)電、光伏發(fā)電、電站檢修和運(yùn)營服務(wù)等方面業(yè)務(wù)。為了加快兩化融合,促進(jìn)企業(yè)管理及信息化雙提升要求是建設(shè)企業(yè)運(yùn)營管理系統(tǒng)的大數(shù)據(jù)平臺(tái)的關(guān)鍵驅(qū)動(dòng)因素,大數(shù)據(jù)平臺(tái)的建成將成為企業(yè)管理及信息化運(yùn)轉(zhuǎn)的驅(qū)動(dòng)引擎,是加快電力信息化規(guī)劃實(shí)現(xiàn)步伐。

通過大數(shù)據(jù)平臺(tái)建設(shè),形成全公司范圍的運(yùn)營管理解決方案,保障企業(yè)管理工作標(biāo)準(zhǔn)化、規(guī)范化、精細(xì)化、高效化,真正為決策服務(wù)。電力企業(yè)大數(shù)據(jù)平臺(tái)具有業(yè)務(wù)數(shù)據(jù)量大,分析模式復(fù)雜,數(shù)據(jù)讀取頻繁,等諸多特點(diǎn),如何利用最前沿的軟硬一體的大數(shù)據(jù)庫應(yīng)用支撐是擺在電力企業(yè)運(yùn)營管理系統(tǒng)建設(shè)面前的重要難題。

1 大數(shù)據(jù)定義與特征

大數(shù)據(jù)又稱海量數(shù)據(jù),指的是所涉及的數(shù)據(jù)規(guī)模巨大,以至于目前已有的軟件工具無法在合理時(shí)間內(nèi),處理、管理、挖掘這些數(shù)據(jù),并將其整理成為幫助企業(yè)經(jīng)營決策更積極目的的信息。大數(shù)據(jù)的4V特征:數(shù)量(Volume),即數(shù)據(jù)巨大;多樣性(Variety),即數(shù)據(jù)類型繁多;速度(Velocity),即處理速度快;價(jià)值性(Veracity),即追求高質(zhì)量的數(shù)據(jù)。

2 SAP HANA技術(shù)

SAP HANA提供多用途的內(nèi)存應(yīng)用設(shè)備,企業(yè)可以利用它即時(shí)掌握業(yè)務(wù)運(yùn)營情況,從而對(duì)所有可用的數(shù)據(jù)進(jìn)行分析,并對(duì)快速變化的業(yè)務(wù)環(huán)境做出迅速響應(yīng)。

通過SAP HANA,企業(yè)可以在業(yè)務(wù)運(yùn)作期間基于海量實(shí)時(shí)詳細(xì)信息分析業(yè)務(wù)運(yùn)營情況。企業(yè)可以探索和分析來源于所有數(shù)據(jù)源的全部交易數(shù)據(jù)和分析數(shù)據(jù)。運(yùn)營數(shù)據(jù)在產(chǎn)生時(shí)由內(nèi)存獲取,并通過靈活的視圖迅速將分析信息呈現(xiàn)給用戶。外部數(shù)據(jù)可輕松的被添加至分析模型,與整個(gè)企業(yè)的數(shù)據(jù)進(jìn)行整合。

3 電力大數(shù)據(jù)平臺(tái)的架構(gòu)設(shè)計(jì)

電力大數(shù)據(jù)平臺(tái)系統(tǒng)具有業(yè)務(wù)數(shù)據(jù)量大,分析模式復(fù)雜,數(shù)據(jù)讀取頻繁,等諸多特點(diǎn),如何利用最前沿的軟硬一體的大數(shù)據(jù)庫應(yīng)用支撐是擺在電力企業(yè)運(yùn)營管理系統(tǒng)建設(shè)面前的重要難題。

3.1 電力大數(shù)據(jù)平臺(tái)架構(gòu)

將數(shù)據(jù)平臺(tái)總體架構(gòu)劃分為三大層:采集層,存儲(chǔ)層以及分析/展現(xiàn)層。這種架構(gòu),是對(duì)傳統(tǒng)標(biāo)準(zhǔn)企業(yè)級(jí)數(shù)據(jù)倉庫架構(gòu)的擴(kuò)展,既能滿足一個(gè)數(shù)據(jù)中心平臺(tái)層面的所有需求,又具備充分的前瞻性,為未來EOM提供實(shí)時(shí)、兼具廣度和深度的大數(shù)據(jù)應(yīng)用提供支撐。

3.2 數(shù)據(jù)采集層設(shè)計(jì)

數(shù)據(jù)抽取、轉(zhuǎn)換、加載的任務(wù)將在此處完成。整個(gè)平臺(tái)的數(shù)據(jù)整合能力將由SAP HANA Smart Data Integrator來提供,通過開放的數(shù)據(jù)接口連接各種類型的底層數(shù)據(jù)源,并且在數(shù)據(jù)加載的同時(shí)進(jìn)行第一輪的數(shù)據(jù)清洗任務(wù),提高保證數(shù)據(jù)的規(guī)范性。

3.3 數(shù)據(jù)存儲(chǔ)層設(shè)計(jì)

數(shù)據(jù)存儲(chǔ)管理是本方案的核心部分。在整個(gè)方案設(shè)計(jì)中,SAP建議把數(shù)據(jù)按照數(shù)據(jù)的時(shí)效性分層管理,即歷史數(shù)據(jù)和活動(dòng)數(shù)據(jù)。歷史數(shù)據(jù)部分包含所有的分析數(shù)據(jù),存放電力企業(yè)歷年來的數(shù)據(jù)?;顒?dòng)數(shù)據(jù)(熱點(diǎn)數(shù)據(jù))部分包含日常分析中最常使用的數(shù)據(jù),所有的前端分析數(shù)據(jù)都將在活動(dòng)數(shù)據(jù)中命中,在活動(dòng)數(shù)據(jù)中將進(jìn)行保證最大的數(shù)據(jù)分析并提高和數(shù)據(jù)檢索效率。

3.4 數(shù)據(jù)分析/展現(xiàn)層

SAP建議使用SAP BusinessObject作為整體的數(shù)據(jù)展現(xiàn)平臺(tái)。BO中的語義層工具Information Designer Tool(IDT)將負(fù)責(zé)業(yè)務(wù)數(shù)據(jù)模型的整體管理,通過IDT中的數(shù)據(jù)調(diào)用,把需要展現(xiàn)的數(shù)據(jù)輸送給前端工具進(jìn)行報(bào)表展示。

4 關(guān)鍵技術(shù)及方案優(yōu)勢(shì)

高性能內(nèi)存計(jì)算技術(shù):數(shù)據(jù)分析應(yīng)用,對(duì)實(shí)效性往往要求極高,對(duì)數(shù)據(jù)存儲(chǔ)平臺(tái)提出了更高的要求:高速的數(shù)據(jù)裝載的同時(shí),提供毫秒級(jí)的查詢響應(yīng)。全面的數(shù)據(jù)集成能力:本方案ETL工具將利用SAP數(shù)據(jù)采集系統(tǒng)SAP Data Integrator,這是一個(gè)專門面向企業(yè)信息管理的應(yīng)用平臺(tái),幫助企業(yè)遷移、轉(zhuǎn)變和提升數(shù)據(jù)。實(shí)時(shí)數(shù)據(jù)流分析能力:SAP在信息集成過程,增加了獨(dú)一無二的架構(gòu)――基于內(nèi)存的實(shí)時(shí)數(shù)據(jù)流處理機(jī)制,把需要處理的數(shù)據(jù)在內(nèi)存中流動(dòng)起來,高效地輸送到各個(gè)處理環(huán)節(jié),實(shí)現(xiàn)高頻次、小批量的數(shù)據(jù)處理調(diào)度,到達(dá)高吞吐量、低延時(shí)的理想效果。

5 結(jié)語

本文提出了一套針對(duì)電力系統(tǒng)的解決方案和基于SAP HANA的大數(shù)據(jù)平臺(tái)架構(gòu),大數(shù)據(jù)平臺(tái)架構(gòu)包括對(duì)電力數(shù)據(jù)采集層,數(shù)據(jù)存儲(chǔ)層和數(shù)據(jù)分析/展現(xiàn)層,該平臺(tái)在高性能,數(shù)據(jù)集成,實(shí)時(shí)數(shù)據(jù)流分析和可靠性上具有很大的提高。對(duì)電力大數(shù)據(jù)平臺(tái)的研究還存在很多不足之處,還有待在今后的學(xué)習(xí)和工作中進(jìn)一步研究。

參考文獻(xiàn)

[1]Liu Qingyun, Gao Shu, Cao Xiufeng, Chen Liangchen.Research Of The Security Situation Visual Analysis For Multidimensional Inland Navigation Based On Parallel Coordinates. The Third International Conference on Cyberspace Technology[C].EI: 20161802313580.

第7篇:大數(shù)據(jù)庫建設(shè)方案范文

百尺竿頭

推動(dòng)基礎(chǔ)軟件平臺(tái)建設(shè)

中國信息化周報(bào):您如何看待南大通用2014年的發(fā)展?

崔維力:2014是公司成立十年來發(fā)展最快的一年。首先員工人數(shù)從年初的300人發(fā)展到年末的近500人,并建立了一套有效的技術(shù)人員任職資格評(píng)價(jià)體系;其次,我們自主研發(fā)的支撐大數(shù)據(jù)應(yīng)用的新型數(shù)據(jù)庫GBase 8a集群規(guī)模突破120節(jié)點(diǎn),在電信、金融等領(lǐng)域應(yīng)用不斷突破,市場營收增長40%以上,特別是中國農(nóng)業(yè)銀行基于GBase 8a構(gòu)建的總行數(shù)據(jù)倉庫正式上線,可以說是國產(chǎn)基礎(chǔ)軟件在金融領(lǐng)域應(yīng)用的一個(gè)里程碑。我們還專門搭建了PB級(jí)的結(jié)構(gòu)化大數(shù)據(jù)測(cè)試平臺(tái),來驗(yàn)證GBase 8a產(chǎn)品,這應(yīng)該也是國內(nèi)數(shù)據(jù)庫廠家獨(dú)有的。另外,今年我們還通過和IBM戰(zhàn)略合作獲得了Informix數(shù)據(jù)庫技術(shù)授權(quán),我們將基于Informix最新源代碼自主構(gòu)造一款面向高端行業(yè)復(fù)雜事務(wù)處理的數(shù)據(jù)庫產(chǎn)品GBase 8t,這樣通過引進(jìn)、消化吸收、再創(chuàng)新,GBase 8t將與GBase 8a一起構(gòu)成公司“雙子星”產(chǎn)品,分別在OLTP和OLAP領(lǐng)域?yàn)槟洗笸ㄓ玫母咚侔l(fā)展提供有力支撐。2014年的這些發(fā)展,使公司上下樹立了打造國產(chǎn)數(shù)據(jù)庫龍頭的信心。

中國信息化周報(bào):中國擁有數(shù)據(jù)庫龍頭企業(yè)也是用戶、產(chǎn)業(yè)、政府所期望的。

崔維力:是的。數(shù)據(jù)庫具備平臺(tái)屬性,平臺(tái)需要龍頭。國際上無論軟硬件平臺(tái),都是圍繞龍頭構(gòu)建產(chǎn)業(yè)鏈,龍頭需要一定規(guī)模的用戶、配套工具、人才來支撐。我們國家硬件平臺(tái)的龍頭效應(yīng)好一些,比如服務(wù)器、PC機(jī),甚至手機(jī)等,但CPU、OS、數(shù)據(jù)庫尚缺乏真正龍頭,很難形成良性格局。

中國信息化周報(bào):在當(dāng)前環(huán)境下,推動(dòng)基礎(chǔ)軟件平臺(tái)的龍頭打造,需要政府哪方面的引導(dǎo)?

崔維力:南大通用2014年的高速發(fā)展離不開政府部門的支持。今年,工信部電子發(fā)展基金、發(fā)改委云專項(xiàng)都支持了南大通用打造面向關(guān)鍵行業(yè)的大數(shù)據(jù)處理平臺(tái),我們將基于GBase 8a集群與Hadoop的“混搭架構(gòu)”構(gòu)建支撐我國電信、金融、安全等領(lǐng)域的大數(shù)據(jù)處理平臺(tái)解決方案。另外,今年天津市也把南大通用列為重點(diǎn)支持企業(yè),何樹山副市長及各委辦局領(lǐng)導(dǎo)都專程到公司調(diào)研指導(dǎo),濱海新區(qū)領(lǐng)導(dǎo)更是多次到南大通用指導(dǎo)工作。

中國信息化周報(bào):但是,龍頭可能帶來壟斷的問題。

崔維力:這個(gè)問題需要辯證的看。追求商業(yè)目標(biāo),龍頭往往會(huì)帶來壟斷。打破壟斷則往往靠創(chuàng)新,然后新的一代龍頭形成。正是在這個(gè)不斷打破的過程中,技術(shù)、社會(huì)在進(jìn)步和發(fā)展。當(dāng)前環(huán)境下,培育龍頭是支撐國產(chǎn)化及自主可控戰(zhàn)略的抓手。這個(gè)龍頭首先是催生類似CPU、OS、數(shù)據(jù)庫等基礎(chǔ)平臺(tái)產(chǎn)品的龍頭。參照IBM、MS等從軟硬一體化上打造全鏈條也許是可行的,鏈條上產(chǎn)品選擇不開放,也許會(huì)帶來整個(gè)鏈條的“木桶效應(yīng)”。

布局OLTP市場

實(shí)現(xiàn)數(shù)據(jù)庫國產(chǎn)化替代

中國信息化周報(bào):前面您提到農(nóng)行數(shù)據(jù)倉庫案例,您說它是國產(chǎn)基礎(chǔ)軟件在金融領(lǐng)域應(yīng)用的一個(gè)里程碑?

崔維力:南大通用今年在行業(yè)營銷上取得持續(xù)增長態(tài)勢(shì),這得感謝我們中興、榮之聯(lián)、浪潮、東軟等合作伙伴,不斷拓展我們GBase 8a產(chǎn)品在電信、金融、安全等領(lǐng)域的應(yīng)用,更把它帶出國門。農(nóng)行數(shù)據(jù)倉庫項(xiàng)目是一個(gè)十分典型的案例。農(nóng)行數(shù)據(jù)倉庫建設(shè)選用的是我們GBase 8a集群產(chǎn)品,目前已經(jīng)上線的數(shù)據(jù)存儲(chǔ)與管理平臺(tái),數(shù)據(jù)量達(dá)到500TB、每日新增數(shù)據(jù)800G,支撐包括貸記卡、信用卡、網(wǎng)絡(luò)銀行、資金轉(zhuǎn)移定價(jià)等多個(gè)業(yè)務(wù)需求。

此項(xiàng)目成功實(shí)施,使農(nóng)行成為國內(nèi)首家在核心系統(tǒng)中進(jìn)行數(shù)據(jù)庫國產(chǎn)化部署的銀行,破除了對(duì)國外昂貴產(chǎn)品的依賴心理,而且節(jié)約建設(shè)成本70%以上。該項(xiàng)目能成功實(shí)施與農(nóng)行領(lǐng)導(dǎo)重視國產(chǎn)化及安全可控信息技術(shù)應(yīng)用,保障金融數(shù)據(jù)安全可控,并從響應(yīng)國家戰(zhàn)略角度,以一種使命感、頂著巨大壓力支持國產(chǎn)化應(yīng)用分不開。正是這種敢“吃螃蟹”的勇氣,不僅幫助了國產(chǎn)數(shù)據(jù)庫產(chǎn)品的成熟,堅(jiān)定了金融領(lǐng)域?qū)崿F(xiàn)數(shù)據(jù)庫國產(chǎn)化替代的信心,而且也成就了國產(chǎn)基礎(chǔ)軟件在金融領(lǐng)域應(yīng)用的一個(gè)里程碑。

中國信息化周報(bào):GBase 8a在金融、電信領(lǐng)域的主要競爭對(duì)手是國外產(chǎn)品嗎?

崔維力:GBase 8a定位數(shù)據(jù)分析類應(yīng)用,也就是OLAP應(yīng)用,它的價(jià)值點(diǎn)在高速。我們?cè)趪鴥?nèi)市場上直面競爭的是EMC、HP、Teradata等國際一線產(chǎn)品。經(jīng)過我們5年多的產(chǎn)品打造,GBase 8a在技術(shù)上與國際同類產(chǎn)品保持同步,這兩年我們與國際上競爭對(duì)手同臺(tái)竟測(cè),一直名列前三甲。GBase 8a集群定位于支撐行業(yè)大數(shù)據(jù)或結(jié)構(gòu)化大數(shù)據(jù),我們很多應(yīng)用實(shí)踐表明它與Hadoop的混搭架構(gòu)是復(fù)雜大數(shù)據(jù)應(yīng)用場景下的理性選擇,Hadoop的非結(jié)構(gòu)化大數(shù)據(jù)處理能力強(qiáng)大,而GBase 8a集群使用SQL進(jìn)行結(jié)構(gòu)化大數(shù)據(jù)處理和分析,并具有高并發(fā)、支持多表聯(lián)合復(fù)雜查詢、高安全等優(yōu)勢(shì)。

當(dāng)前我們的研發(fā)團(tuán)隊(duì)正在進(jìn)一步完善在大數(shù)據(jù)存儲(chǔ)管理平臺(tái)中GBase 8a計(jì)算引擎和Hadoop計(jì)算引擎的深度融合,并實(shí)現(xiàn)相互間的數(shù)據(jù)透明交換。構(gòu)建全數(shù)據(jù)統(tǒng)一存儲(chǔ)、統(tǒng)一計(jì)算、統(tǒng)一分析、統(tǒng)一服務(wù)接口、統(tǒng)一監(jiān)控管理的大數(shù)據(jù)應(yīng)用平臺(tái)。明年我們將創(chuàng)新突破200節(jié)點(diǎn)以上更大規(guī)模的集群部署,以及跨數(shù)據(jù)中心的數(shù)據(jù)同步與統(tǒng)一管理等很有挑戰(zhàn)性的問題,從而保持市場競爭力。

中國信息化周報(bào):國內(nèi)基礎(chǔ)軟件領(lǐng)域,包括操作系統(tǒng)和數(shù)據(jù)庫,大多采用基于開源軟件的發(fā)展模式。GBase 8a這種引進(jìn)商業(yè)源代碼授權(quán)的模式,其差異化何在?

崔維力:首先一個(gè)不同之處在于我們基于Informix源代碼進(jìn)一步開發(fā)的功能,包括對(duì)國產(chǎn)CPU的支持、安全功能模塊、集群功能模塊等源代碼的知識(shí)產(chǎn)權(quán)完全屬于南大通用,我們是可以不反饋給IBM的。當(dāng)然,和IBM協(xié)同發(fā)展Iinformix源代碼體系是另外一個(gè)問題。開源軟件已成為一種主流的軟件開發(fā)模式,軟件服務(wù)化也已成為一種趨勢(shì),我們也在計(jì)劃在適當(dāng)時(shí)間把我們GBase 8a的源代碼以及我們基于Informix的增值開發(fā)模塊的源代碼開源到社區(qū)里。南大通用希望推動(dòng)國產(chǎn)數(shù)據(jù)庫領(lǐng)域軟件開發(fā)上的參與分享模式。

中國信息化周報(bào):南大通用今年發(fā)展很快,您目前的感受是什么?

第8篇:大數(shù)據(jù)庫建設(shè)方案范文

1檔案數(shù)據(jù)采集安全

檔案數(shù)據(jù)采集包括電子文檔的收集和紙質(zhì)檔案的數(shù)字化處理兩個(gè)部分。檔案數(shù)據(jù)采集安全在強(qiáng)調(diào)數(shù)據(jù)收集的齊全完整的同時(shí),也要考慮由于重復(fù)收集產(chǎn)生的數(shù)據(jù)冗余問題。

1.1檔案數(shù)據(jù)收集范圍擴(kuò)展

從某種意義上來說,“大數(shù)據(jù)”的一個(gè)重要理念就是掌握的數(shù)據(jù)量越大、內(nèi)容越豐富,從中推斷出的信息就越多、結(jié)論就越有參考價(jià)值。具體到檔案工作,無論是從檔案的憑證價(jià)值和情報(bào)價(jià)值,還是檔案的現(xiàn)實(shí)價(jià)值和長遠(yuǎn)價(jià)值,抑或檔案的第一價(jià)值和第二價(jià)值來考慮,就檔案數(shù)據(jù)收集而言,可能需要重新思考收集的范圍和形式。大數(shù)據(jù)往往是唯一的樣本數(shù)據(jù)集。舉例而言,那些測(cè)量交通、土壤酸堿、雨量、風(fēng)力等物理信號(hào)的監(jiān)控設(shè)備,或視頻監(jiān)控以及其他類型的器材所連續(xù)積累的時(shí)段性或?qū)崟r(shí)性數(shù)據(jù),都單獨(dú)記錄著一個(gè)唯一的活動(dòng)片段,一旦數(shù)據(jù)丟失,這個(gè)片段就隨之永遠(yuǎn)消失。[6]從檔案收集的齊全、完整、真實(shí)、有效和數(shù)據(jù)安全考慮,這些數(shù)據(jù)文檔都應(yīng)該實(shí)時(shí)在線歸檔,并同時(shí)保存離線副本。具體操作規(guī)范和標(biāo)準(zhǔn)可參考《電子文件管理暫行辦法》(中辦、國辦廳字〔2009〕39號(hào))和《電子文件歸檔與管理規(guī)范》(標(biāo)準(zhǔn)號(hào):GB/T18894-2002)。另一個(gè)比較典型的案例是美國政府的《聯(lián)邦政府Web2.0使用情況和檔案價(jià)值報(bào)告》,該報(bào)告中提到,在社交平臺(tái)上產(chǎn)生的信息,只要具有業(yè)務(wù)價(jià)值、證據(jù)價(jià)值和背景價(jià)值,就可以認(rèn)定為歸檔的文件。我國迄今為止雖對(duì)這類內(nèi)容無具體的歸檔規(guī)定,但根據(jù)大趨勢(shì)判斷,各級(jí)各類檔案館的收集范圍需要主動(dòng)擴(kuò)展。檔案大數(shù)據(jù)也可以說是檔案的“全數(shù)據(jù)”。相對(duì)于其他領(lǐng)域的數(shù)據(jù)收集,檔案大數(shù)據(jù)更強(qiáng)調(diào)的是數(shù)據(jù)的“全”:收集業(yè)務(wù)范圍內(nèi)的所有檔案數(shù)據(jù)。一個(gè)基層檔案部門,只要收集了本機(jī)關(guān)、團(tuán)體、企事業(yè)單位的全部檔案數(shù)據(jù),即使數(shù)據(jù)總量不大,也可以稱之為大數(shù)據(jù)。因?yàn)樵谄浜髮?duì)這些數(shù)據(jù)進(jìn)行的分析,將采取“樣本=總體”的方法;凡采用這種分析方式的數(shù)據(jù)分析方法,就稱為大數(shù)據(jù)分析。當(dāng)一個(gè)機(jī)構(gòu)擁有全部或者幾乎全部的檔案數(shù)據(jù),就能從不同的“相關(guān)”關(guān)系而非“因果”關(guān)系中更細(xì)致地統(tǒng)計(jì)和研究數(shù)據(jù)的方方面面。因此,檔案大數(shù)據(jù)中的“大”不是絕對(duì)意義上的,而是相對(duì)意義上的“大”。與此同時(shí),在具體工作中我們也發(fā)現(xiàn),在大數(shù)據(jù)環(huán)境下,原來按“單位”進(jìn)行的檔案收集會(huì)有相當(dāng)程度的冗余信息產(chǎn)生。例如,各級(jí)部門下發(fā)的紅頭文件,如果每個(gè)收文單位都作了歸檔,在今后可能建立的某種級(jí)別的云檔案數(shù)據(jù)庫中就存在相當(dāng)?shù)臄?shù)據(jù)冗余。[7]這時(shí)就可能需要在歸檔的源頭與具體規(guī)定這類文件的歸檔單位,其它收到此類文件的單位不需要?dú)w檔,但在需要時(shí)有查詢和利用的權(quán)限。

1.2紙質(zhì)檔案數(shù)字化過程和結(jié)果安全

紙質(zhì)檔案數(shù)字化的過程安全是指在檔案數(shù)字化過程中沒有發(fā)生危害檔案實(shí)體和信息安全的事件或行為。因此,一系列的規(guī)章制度和規(guī)范的操作流程是必要的。首先,要考察數(shù)字化服務(wù)提供單位的資質(zhì)和信譽(yù)。其次,要建立完善的管理制度。例如,案卷不準(zhǔn)擅自帶離加工現(xiàn)場;當(dāng)日數(shù)字化的案卷必須當(dāng)日歸庫;案卷進(jìn)出庫有嚴(yán)格的交接、檢查手續(xù)等等。最后,在數(shù)字化的過程中嚴(yán)格遵守《紙質(zhì)檔案數(shù)字化技術(shù)規(guī)范》(標(biāo)準(zhǔn)號(hào):DA/T31-2005),檔案的拆卷要以不破壞檔案裝訂原貌為基礎(chǔ),在掃描過程中保證案卷整潔并確保掃描圖像與原件一致。紙質(zhì)檔案數(shù)字化的結(jié)果安全是指數(shù)字化后的檔案數(shù)據(jù)有效、可用。因此,檔案數(shù)字化后必須經(jīng)過電子檔案質(zhì)量檢查這一環(huán)節(jié)。這也是對(duì)檔案數(shù)字化結(jié)果安全監(jiān)控的重要一步。主要包括三個(gè)過程或環(huán)節(jié):一是質(zhì)量抽查,對(duì)于不合格的數(shù)據(jù)要及時(shí)返工重掃。二是數(shù)據(jù)檢測(cè),主要內(nèi)容包括病毒檢測(cè)、運(yùn)行檢測(cè)和數(shù)據(jù)核對(duì)等三個(gè)方面。三是數(shù)據(jù)利用檢測(cè),主要是將全部數(shù)據(jù)直接掛接到檔案管理系統(tǒng)后,對(duì)外提供利用時(shí),是否出現(xiàn)錯(cuò)誤或者使用者發(fā)現(xiàn)的一系列問題。[8]為了保證數(shù)字化后檔案信息的長期有效可用,異地的多種載體備份存儲(chǔ)和數(shù)字信息定期可讀性抽查、復(fù)制備份等制度的建立也是必要的。

2檔案信息管理系統(tǒng)安全

從上世紀(jì)90年代國內(nèi)最早的檔案管理軟件產(chǎn)生至今,已經(jīng)經(jīng)歷了近20年的發(fā)展。隨著計(jì)算機(jī)及網(wǎng)絡(luò)技術(shù)的發(fā)展,數(shù)字化檔案管理方式在分布形式上從最初的單機(jī)版(C/S架構(gòu))、到網(wǎng)絡(luò)版(B/S架構(gòu))、直至發(fā)展到最新的面向服務(wù)的數(shù)據(jù)平臺(tái)(SOA架構(gòu));在功能上則從單一的僅實(shí)現(xiàn)簡單檔案管理的軟件、到檔案管理軟件與OA系統(tǒng)整合的數(shù)據(jù)庫、再到現(xiàn)今的將數(shù)字化檔案管理方式滲透到整個(gè)工作流(workflow)的數(shù)據(jù)庫平臺(tái)。檔案大數(shù)據(jù)是在檔案方面涉及的資料量規(guī)模巨大到無法通過目前主流軟件工具,在合理時(shí)間內(nèi)達(dá)到擷取、管理、處理并整理成為幫助企業(yè)經(jīng)營決策更積極目的的信息。[9]因此,檔案信息管理系統(tǒng)的安全在很大程度上決定了檔案信息的安全。

2.1數(shù)據(jù)支持平臺(tái)安全

美國政府大數(shù)據(jù)計(jì)劃中的國家檔案和文件署(NARA)計(jì)劃為十億電子記錄(CI-BER)建設(shè)網(wǎng)絡(luò)基礎(chǔ)設(shè)施,這是一個(gè)聯(lián)合機(jī)構(gòu)主辦的測(cè)試平臺(tái)。這個(gè)多機(jī)構(gòu)主辦的網(wǎng)絡(luò)基礎(chǔ)設(shè)施,對(duì)國家檔案館87萬多樣化的數(shù)字記錄文件和信息的收集,可稱為計(jì)算研究所的“文藝復(fù)興”。這個(gè)試驗(yàn)臺(tái)將評(píng)估技術(shù)和方法,進(jìn)行超大規(guī)模數(shù)據(jù)收集,以支持可持續(xù)的訪問。[10]縱覽國內(nèi)外各行業(yè)大數(shù)據(jù)建設(shè)實(shí)踐,構(gòu)建檔案大數(shù)據(jù)平臺(tái)至少要實(shí)現(xiàn)四個(gè)層次的部署:一、云服務(wù)商提供全面、可視化的服務(wù),尤其是檔案大數(shù)據(jù)服務(wù)委托方有權(quán)隨時(shí)監(jiān)管、分析基礎(chǔ)設(shè)施中發(fā)生的所有事項(xiàng);二、收集海量檔案數(shù)據(jù),并解決各個(gè)數(shù)據(jù)庫的兼容問題;三、數(shù)據(jù)庫有更快識(shí)別目標(biāo)、鎖定威脅來源和敵對(duì)事件的能力和相關(guān)設(shè)置;四、基礎(chǔ)設(shè)施具有可擴(kuò)展性,可以執(zhí)行短期和長期的分析。監(jiān)控管理、風(fēng)險(xiǎn)控制、規(guī)則遵從是檔案云數(shù)據(jù)支持平臺(tái)確保安全的最基本要求。

2.2數(shù)據(jù)計(jì)算環(huán)境安全

傳統(tǒng)的數(shù)據(jù)庫系統(tǒng)不能有效地處理大數(shù)據(jù)的原因在于,這些系統(tǒng)的設(shè)計(jì)無法應(yīng)對(duì)現(xiàn)如今結(jié)構(gòu)化數(shù)據(jù)所占比例越來越低,數(shù)據(jù)類型日益復(fù)雜的狀況,以及傳統(tǒng)的數(shù)據(jù)庫無法既迅速又比較經(jīng)濟(jì)地對(duì)系統(tǒng)進(jìn)行拓展。不僅是硬件程序的設(shè)計(jì)環(huán)節(jié),從數(shù)據(jù)管理的角度來看,少量的數(shù)據(jù)樣本容易進(jìn)行單獨(dú)的測(cè)試和監(jiān)控,而檔案大數(shù)據(jù)計(jì)算平臺(tái)上存儲(chǔ)的數(shù)據(jù)首先要有詳細(xì)的類別劃分,其次才是存儲(chǔ)和計(jì)算。檔案數(shù)據(jù)庫的數(shù)據(jù)分析完成后,是要將結(jié)果呈現(xiàn)給不同的人群使用的。針對(duì)同一條查詢指令,應(yīng)該讓不同角色的人群看到不同的結(jié)果信息,即查詢所反饋的結(jié)果應(yīng)該是不一樣的:技術(shù)人員讀取有關(guān)系統(tǒng)和設(shè)置管理的數(shù)據(jù);檔案工作人員查看、操作與自身業(yè)務(wù)范圍相關(guān)的內(nèi)容;普通利用者可以得到經(jīng)審核公開的電子文本或目錄。大數(shù)據(jù)時(shí)代的檔案安全解決方案應(yīng)該包括足夠強(qiáng)大的、能夠針對(duì)不同層次的人群提供不同的展現(xiàn)界面和工具。同時(shí),檔案大數(shù)據(jù)系統(tǒng)必須具有目錄整理、檔案采集、檔案審核、系統(tǒng)維護(hù)等功能,并利用現(xiàn)化代網(wǎng)絡(luò)技術(shù),實(shí)現(xiàn)多人多客戶端操作。

3檔案數(shù)據(jù)提供利用安全

正如1893年立式文件柜的出現(xiàn)最終解決了紙質(zhì)文件的存儲(chǔ)和檢索的困難,檔案大數(shù)據(jù)必將對(duì)檔案信息的查找利用帶來顛覆性的變革:檔案收集保管的最終目的是為了方便利用;檔案大數(shù)據(jù)的核心不是擁有數(shù)據(jù),而是拿這些檔案數(shù)據(jù)去做什么。

3.1檔案數(shù)據(jù)比對(duì)分析

檔案大數(shù)據(jù)最直觀的應(yīng)用在于數(shù)據(jù)的比對(duì)分析。例如,在經(jīng)適房的申購過程中,如何才能快速有效地鑒別申購者的資格?用申購者提供的姓名、身份證號(hào)等相關(guān)信息比對(duì)在房地產(chǎn)交易、車輛管理、金融機(jī)構(gòu)等數(shù)據(jù)庫的相關(guān)信息,可以準(zhǔn)確掌握申購者的資產(chǎn)狀況,剔除不夠格的申請(qǐng)者。還有一個(gè)典型例子就是我國醫(yī)療檔案大數(shù)據(jù)建設(shè)的“3521工程”。該項(xiàng)目融合了我國絕大部分三甲醫(yī)院和部分二甲醫(yī)院的數(shù)據(jù)庫和影像文件的數(shù)字化信息系統(tǒng)以及電子健康檔案系統(tǒng),旨在通過數(shù)據(jù)自動(dòng)匯總、統(tǒng)計(jì)分析,進(jìn)行慢性病、流行病的自動(dòng)篩查、趨勢(shì)分析和爆發(fā)預(yù)警;同時(shí)系統(tǒng)還可以為新藥研發(fā)、新治療方案的設(shè)計(jì)等工作提供數(shù)據(jù)支持。檔案大數(shù)據(jù)提供利用在一定程度上來說只需要知道檔案大數(shù)據(jù)“是什么”,而不需要知道“為什么”。這種變化已經(jīng)遠(yuǎn)遠(yuǎn)突破了技術(shù)層面,將對(duì)人類認(rèn)知世界的方式方法產(chǎn)生重大影響。從檔案大數(shù)據(jù)進(jìn)行的對(duì)比分析,就是用檔案數(shù)據(jù)說話的最簡單直接證明。檔案工作的核心在“用”。利用者在檔案數(shù)據(jù)比對(duì)分析時(shí),通過軌跡研判、信息關(guān)聯(lián)等方式,由已存的較全面的檔案信息,才能得出正確、合理的結(jié)論。在這種狀況下,可提供利用的數(shù)據(jù)資源的豐富,就代表了一定程度上的利用環(huán)境安全。

3.2檔案咨詢服務(wù)

第9篇:大數(shù)據(jù)庫建設(shè)方案范文

(1.中南大學(xué) 信息科學(xué)與工程學(xué)院,湖南 長沙410083;2.中南大學(xué) 地球科學(xué)與信息物理學(xué)院,湖南 長沙 410083)

摘要:計(jì)算思維能力是當(dāng)前國內(nèi)外大學(xué)課程建設(shè)和教學(xué)改革的重要內(nèi)容和方向。文章以非計(jì)算機(jī)專業(yè)數(shù)據(jù)庫系列課程為例,探討如何在教學(xué)過程中培養(yǎng)計(jì)算思維能力,同時(shí)對(duì)改革的重要內(nèi)容即數(shù)據(jù)庫課程群建設(shè)進(jìn)行分析,闡述如何在數(shù)據(jù)庫系列課程教學(xué)過程和課程群建設(shè)中引入計(jì)算思維的思路和方法,為高等學(xué)校教育教學(xué)方法和課程改革提供思路。

關(guān)鍵詞 :計(jì)算思維;教學(xué)方法;教學(xué)質(zhì)量;課程群建設(shè);課程改革

基金項(xiàng)目:湖南省普通高等學(xué)校教學(xué)改革研究項(xiàng)目(湘教通[2014]247號(hào));教育部高等學(xué)校文科大學(xué)計(jì)算機(jī)教學(xué)改革項(xiàng)目(教高文計(jì)函[2014]05號(hào)2014-A128);全國高等院校計(jì)算機(jī)基礎(chǔ)教育研究會(huì)2014年課題(201445)。

第一作者簡介:奎曉燕,女,副教授,研究方向?yàn)橛?jì)算機(jī)網(wǎng)絡(luò)和數(shù)據(jù)庫技術(shù),xykui@csu.edu.cn。

0 引言

計(jì)算思維是由美國卡內(nèi)基·梅隆大學(xué)周以真教授在Computational Thinking中提出來的。周教授認(rèn)為計(jì)算思維是運(yùn)用計(jì)算機(jī)科學(xué)的基礎(chǔ)概念求解問題、設(shè)計(jì)系統(tǒng)和理解人類的行為,其根本內(nèi)容是本質(zhì)、抽象和自動(dòng)化。計(jì)算思維涵蓋了反映計(jì)算機(jī)科學(xué)之廣泛性的一系列思維活動(dòng),是與讀寫能力一樣的人類基本思維方式[1]。目前,國內(nèi)外計(jì)算機(jī)界學(xué)者對(duì)計(jì)算思維這一課題進(jìn)行了大量的研究。研究結(jié)果表明,計(jì)算思維不僅反映了計(jì)算機(jī)及計(jì)算機(jī)科學(xué)在當(dāng)前社會(huì)中重要的新認(rèn)識(shí),也反映了計(jì)算機(jī)學(xué)科最本質(zhì)的特征和最核心的方法,這在計(jì)算機(jī)技術(shù)飛速發(fā)展的今天尤為重要[2]。

1 計(jì)算思維在數(shù)據(jù)庫系列課程改革中的作用

數(shù)據(jù)庫技術(shù)是信息系統(tǒng)的核心技術(shù)。近年來,數(shù)據(jù)庫技術(shù)和計(jì)算機(jī)網(wǎng)絡(luò)技術(shù)相互滲透、相互促進(jìn),已成為當(dāng)今計(jì)算機(jī)領(lǐng)域發(fā)展迅速、應(yīng)用廣泛的兩大技術(shù)。在數(shù)據(jù)庫系列課程中,教學(xué)方法革新和課程群建設(shè)是課程改革的兩個(gè)重要方面。在數(shù)據(jù)庫課程改革中引入計(jì)算思維有助于正確理解計(jì)算和計(jì)算機(jī),可以更好地揭示表象背后的核心問題,揭示不同現(xiàn)象之間的共同本質(zhì),從而有效提高教學(xué)質(zhì)量,培養(yǎng)出時(shí)展所需要的高素質(zhì)人才。

在數(shù)據(jù)庫系列課程的教學(xué)過程中引入計(jì)算思維的理念,應(yīng)當(dāng)使計(jì)算思維的本質(zhì)始終貫穿整個(gè)數(shù)據(jù)庫課程教學(xué)過程,根據(jù)講授的具體知識(shí)點(diǎn)適時(shí)引入計(jì)算思維的思想,培養(yǎng)學(xué)生的創(chuàng)新能力和計(jì)算思維能力,久而久之,教師形成新的教學(xué)思路和行之有效的教學(xué)方法。具體來說,計(jì)算的想法是把復(fù)雜問題分解,把問題簡單化;計(jì)算的方法是選擇一個(gè)合適的模型反映這個(gè)問題的相關(guān)方面;計(jì)算的思維是考慮當(dāng)出現(xiàn)問題時(shí)如何恢復(fù)等??偟膩碚f,計(jì)算思維是采取適當(dāng)?shù)姆椒ń鉀Q問題并理解人類行為,這是計(jì)算機(jī)科學(xué)中非常重要的一些想法[3]。

在數(shù)據(jù)庫系列課程的課程群建設(shè)中引入計(jì)算思維,必須先研究課程群各門課程的關(guān)聯(lián)性,通過課程整合刪除重復(fù)過時(shí)的內(nèi)容,增加可增強(qiáng)學(xué)生應(yīng)用和創(chuàng)新能力的新內(nèi)容,一方面提高教學(xué)效率,使學(xué)生在有限的學(xué)時(shí)內(nèi)能吸收更多的知識(shí);另一方面,針對(duì)課程群理論與實(shí)踐并重的特點(diǎn),通過引入計(jì)算思維更好地訓(xùn)練學(xué)生的思維能力,提高學(xué)生的綜合技能。

2 在數(shù)據(jù)庫教學(xué)過程中引入計(jì)算思維的方法和步驟

在數(shù)據(jù)庫系列課程的教學(xué)過程中,一方面是理論知識(shí)講授,通過教學(xué)幫助學(xué)生正確理解和掌握數(shù)據(jù)庫的基本原理,熟練掌握數(shù)據(jù)庫的設(shè)計(jì)方法和應(yīng)用技能;另一方面是通過實(shí)踐環(huán)節(jié)激發(fā)學(xué)生對(duì)數(shù)據(jù)庫相關(guān)知識(shí)的興趣,培養(yǎng)獨(dú)立探求新方法、新技術(shù)的技能,使之成為適應(yīng)能力強(qiáng)、有創(chuàng)新精神和創(chuàng)造才能的專門人才。在數(shù)據(jù)庫系列課程的教學(xué)過程中引入計(jì)算思維,需要結(jié)合課堂教學(xué)和實(shí)踐環(huán)節(jié)這兩個(gè)方面。教師應(yīng)當(dāng)始終將計(jì)算思維的本質(zhì)貫穿在課堂教學(xué)中,根據(jù)講授的具體知識(shí)點(diǎn)適時(shí)引入計(jì)算思維中涉及的關(guān)注點(diǎn)、嵌入、保護(hù)、轉(zhuǎn)化、糾錯(cuò)和恢復(fù)、啟發(fā)式等基本概念和思維方法,引導(dǎo)學(xué)生領(lǐng)會(huì)計(jì)算思維的新方法;在實(shí)踐環(huán)節(jié),教師提出問題、給出實(shí)驗(yàn)任務(wù),學(xué)生通過獨(dú)立完成或者小組協(xié)作的方式運(yùn)用計(jì)算思維的系列方法解決實(shí)際問題,從中探索解決問題的新方法,發(fā)現(xiàn)問題的本質(zhì),達(dá)到更好吸收和鞏固知識(shí)、學(xué)會(huì)運(yùn)用計(jì)算思維方法的目的,最終培養(yǎng)學(xué)生的創(chuàng)新思維和計(jì)算思維,提高其獨(dú)立思考、解決問題的技能[4]。具體實(shí)現(xiàn)方法主要包括以下幾方面。

1) 整合并精煉教學(xué)內(nèi)容。

由于課程教學(xué)內(nèi)容較多,教師應(yīng)在課堂教學(xué)和實(shí)踐環(huán)節(jié)中將教學(xué)內(nèi)容根據(jù)章節(jié)進(jìn)行歸類、重新整合,選取重點(diǎn)和難點(diǎn)知識(shí)中的典型問題以提問的方式入手,用討論的形式加強(qiáng)互動(dòng),啟發(fā)學(xué)生同步思考,調(diào)動(dòng)學(xué)生的學(xué)習(xí)積極性和參與熱情,形成師生積極互動(dòng)的良好氛圍,使學(xué)生從被動(dòng)接受知識(shí)變?yōu)橹鲃?dòng)探討問題,達(dá)到良好的教學(xué)效果。此外,教師應(yīng)通過對(duì)整合性教學(xué)內(nèi)容的分析,建立各相關(guān)知識(shí)點(diǎn)與計(jì)算思維核心概念之間的關(guān)系和聯(lián)系,在教學(xué)中表述出各知識(shí)點(diǎn)對(duì)應(yīng)的應(yīng)強(qiáng)化和滲透的計(jì)算思維具體核心概念。通過教師整合、分析和精煉教學(xué)內(nèi)容,學(xué)生在有限的學(xué)時(shí)內(nèi)可以更高效、主動(dòng)地掌握更多知識(shí)和技能,同時(shí)這也有效促進(jìn)教師不斷地自我學(xué)習(xí)和提高。

2) 采用生動(dòng)具體的實(shí)例教學(xué)法。

在教學(xué)過程中,教師以當(dāng)前點(diǎn)擊率頗高的淘寶網(wǎng)、當(dāng)當(dāng)網(wǎng)、京東網(wǎng)等多個(gè)購物平臺(tái)和銀行數(shù)據(jù)庫管理系統(tǒng)為切入點(diǎn),引入數(shù)據(jù)庫的相關(guān)概念以及數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)模型、數(shù)據(jù)組織等相關(guān)知識(shí);通過在購物平臺(tái)上進(jìn)行

關(guān)鍵詞 搜索查找特定信息的過程,引入關(guān)系、數(shù)據(jù)表、查詢、索引、視圖、存儲(chǔ)過程、觸發(fā)器等相關(guān)知識(shí);通過購物者選中物品、點(diǎn)擊支付平臺(tái)進(jìn)行網(wǎng)上提交訂單和在線付費(fèi)購買的過程,引入數(shù)據(jù)庫的安全機(jī)制、身份驗(yàn)證、登錄和權(quán)限管理、數(shù)據(jù)備份等方面的知識(shí),這樣用學(xué)生熟悉的生活實(shí)例引出相關(guān)的數(shù)據(jù)庫知識(shí)點(diǎn),幫助學(xué)生從更簡易、更直觀、更清晰、更生動(dòng)、更透徹的角度學(xué)習(xí)相關(guān)知識(shí),始終將計(jì)算思維的思想貫穿其中,擺脫傳統(tǒng)教學(xué)方法的單一性和枯燥性,激發(fā)學(xué)生的學(xué)習(xí)興趣,提高學(xué)習(xí)效果,一方面鍛煉學(xué)生的思維,另一方面激發(fā)學(xué)生的創(chuàng)造力和學(xué)習(xí)能力,讓學(xué)生掌握用計(jì)算思維思考和解決問題的本領(lǐng)。

3) 將計(jì)算思維融入實(shí)踐教學(xué)。

數(shù)據(jù)庫課程實(shí)踐環(huán)節(jié)重點(diǎn)鍛煉學(xué)生對(duì)計(jì)算思維方法的運(yùn)用能力,引導(dǎo)學(xué)生探索解決實(shí)際問題的方法,是對(duì)課堂教學(xué)內(nèi)容的補(bǔ)充,促進(jìn)學(xué)生更好地認(rèn)識(shí)和鞏固計(jì)算思維的方法。實(shí)踐環(huán)節(jié)可以采用課堂練習(xí)、綜合設(shè)計(jì)等多種形式;對(duì)于單一知識(shí)點(diǎn)練習(xí)題可以要求學(xué)生獨(dú)立運(yùn)用計(jì)算思維方法完成;對(duì)于綜合設(shè)計(jì)題,學(xué)生可劃分小組進(jìn)行探討,各自闡述對(duì)問題的認(rèn)識(shí)和對(duì)知識(shí)點(diǎn)的理解,提出解決思路與方法,確定方案,然后上機(jī)實(shí)踐,讓計(jì)算機(jī)檢驗(yàn)思路和方法的正確性。實(shí)踐過程將知識(shí)作為載體,實(shí)現(xiàn)思想和方法的傳授,通過有效使用工具,可以達(dá)到事半功倍的教學(xué)效果,使得學(xué)生不僅可以掌握數(shù)據(jù)庫相關(guān)的軟硬件工具、數(shù)據(jù)庫系統(tǒng)及各類語言,而且通過抽象表示設(shè)計(jì)有效的算法,通過程序的實(shí)現(xiàn)高效地解決實(shí)際問題,真正掌握數(shù)據(jù)庫的相關(guān)知識(shí)和技能。

3 在數(shù)據(jù)庫課程群建設(shè)中引入計(jì)算思維的方法和步驟

數(shù)據(jù)庫課程群建設(shè)中的系列課程均是高校非計(jì)算機(jī)專業(yè)必修或選修的與數(shù)據(jù)庫相關(guān)的公共基礎(chǔ)課程(數(shù)據(jù)庫應(yīng)用基礎(chǔ)、數(shù)據(jù)庫技術(shù)與應(yīng)用、數(shù)據(jù)庫系統(tǒng)原理、數(shù)據(jù)庫應(yīng)用系統(tǒng)開發(fā)等),這些課程涉及全校非計(jì)算機(jī)專業(yè)的所有學(xué)生。課程群建設(shè)是近年來課程建設(shè)改革的一個(gè)發(fā)展趨勢(shì),是針對(duì)某一受教育對(duì)象將相關(guān)的課程組合在一起,進(jìn)行整合更新,使課程內(nèi)容更貼近現(xiàn)實(shí)需求,提高學(xué)生應(yīng)用和創(chuàng)新能力以及教學(xué)效率和質(zhì)量。

數(shù)據(jù)庫課程群的教學(xué)內(nèi)容是根據(jù)教育部對(duì)計(jì)算機(jī)基礎(chǔ)教學(xué)基本要求設(shè)計(jì)的,教學(xué)目標(biāo)是通過課程學(xué)習(xí)幫助學(xué)生了解數(shù)據(jù)庫應(yīng)用領(lǐng)域,掌握基本的數(shù)據(jù)庫技術(shù),提高數(shù)據(jù)庫管理系統(tǒng)分析、數(shù)據(jù)庫應(yīng)用程序設(shè)計(jì)和開發(fā)、數(shù)據(jù)庫使用和維護(hù)的能力。課程群建設(shè)以教指委提出的“普及計(jì)算機(jī)文化、訓(xùn)練計(jì)算思維、培養(yǎng)信息應(yīng)用能力”為總體目標(biāo),從培養(yǎng)學(xué)生信息素養(yǎng)、計(jì)算機(jī)應(yīng)用能力等方面著手,以數(shù)據(jù)庫技術(shù)為基礎(chǔ),以計(jì)算思維為切入點(diǎn),以應(yīng)用能力為目標(biāo),構(gòu)造并設(shè)計(jì)數(shù)據(jù)庫課程群知識(shí)體系及教學(xué)方案,旨在新形勢(shì)下進(jìn)一步提高高校計(jì)算機(jī)基礎(chǔ)教育的質(zhì)量[5]。具體實(shí)現(xiàn)方法主要包括以下幾方面。

1) 以計(jì)算思維為切入點(diǎn)。

數(shù)據(jù)庫課程群建設(shè)的實(shí)施可采用課程知識(shí)體系及教學(xué)內(nèi)容重組與教學(xué)方法推動(dòng)相結(jié)合的方式,在宏觀上,以計(jì)算思維為切入點(diǎn)重組課程知識(shí)體系框架;微觀上,參照教學(xué)指導(dǎo)委員會(huì)編制的《高等學(xué)校計(jì)算機(jī)基礎(chǔ)教學(xué)發(fā)展戰(zhàn)略研究報(bào)告暨計(jì)算機(jī)基礎(chǔ)課程教學(xué)基本要求》和《高等學(xué)校計(jì)算機(jī)基礎(chǔ)核心課程教學(xué)實(shí)施方案》提出的課程基本知識(shí)體系和實(shí)驗(yàn)體系,融入最新數(shù)據(jù)庫技術(shù)、通信技術(shù)、網(wǎng)絡(luò)技術(shù)等相關(guān)概念、方法和應(yīng)用,形成數(shù)據(jù)庫課程群建設(shè)的方案。

一個(gè)高效的教學(xué)團(tuán)隊(duì)對(duì)于強(qiáng)化質(zhì)量意識(shí)、深化教學(xué)改革、促進(jìn)課程群建設(shè)、提高教學(xué)質(zhì)量發(fā)揮著極其重要的作用?;趲熧Y隊(duì)伍的現(xiàn)狀,教學(xué)團(tuán)隊(duì)建設(shè)應(yīng)以教學(xué)研究為切入點(diǎn),以提高隊(duì)伍的教學(xué)水平和改善隊(duì)伍職稱結(jié)構(gòu)為目的,最終形成穩(wěn)定的、高水平的師資隊(duì)伍。團(tuán)隊(duì)中的教師應(yīng)該認(rèn)真學(xué)習(xí)并掌握計(jì)算思維的精髓,能夠在教學(xué)過程中引入計(jì)算思維,啟發(fā)學(xué)生訓(xùn)練思維能力,用計(jì)算思維的方法思考和分析問題,提高學(xué)生對(duì)知識(shí)的綜合運(yùn)用能力。

2) 采用層次化教學(xué)方法。

教學(xué)方法的研究與實(shí)踐在數(shù)據(jù)庫課程群建設(shè)中占據(jù)相當(dāng)重要的地位。教師要改革傳統(tǒng)的以單純的操作、技術(shù)為重點(diǎn)的教學(xué)方式,轉(zhuǎn)變?yōu)橐运季S能力養(yǎng)成訓(xùn)練、問題求解能力培養(yǎng)、工作實(shí)踐能力培養(yǎng)為目標(biāo)的新型教學(xué)方式,采用層次化教學(xué)方法進(jìn)行數(shù)據(jù)庫課程群建設(shè),針對(duì)不同層次的課程和不同專業(yè)的學(xué)生采用不同的教學(xué)方法(如圖1所示)。第1層課程采用啟發(fā)式教學(xué)方法,教師用多媒體課件等教具向?qū)W生形象、生動(dòng)地演示課程重點(diǎn)和難點(diǎn),通過靈活設(shè)計(jì)教學(xué)過程讓學(xué)生積極參與教學(xué)活動(dòng),更好地掌握知識(shí);第2層課程采用案例教學(xué)法、講授教學(xué)法、實(shí)驗(yàn)教學(xué)法相結(jié)合的方式;第3層課程采用課題研究教學(xué)法、討論教學(xué)法、指導(dǎo)自學(xué)法相結(jié)合的方式。除此之外,無論是哪一個(gè)層次的教學(xué),都應(yīng)該在整個(gè)教學(xué)過程中研究計(jì)算思維要素的概念、案例、課題的教授方法,研究如何將隱式計(jì)算思維要素與課程內(nèi)容有機(jī)結(jié)合并呈現(xiàn)出來,使學(xué)生感受計(jì)算思維的科學(xué)性與普適性,從而提高學(xué)生的計(jì)算思維能力和科學(xué)素養(yǎng)。

3) 科學(xué)制訂課程知識(shí)體系。

在數(shù)據(jù)庫課程群建設(shè)中,建立科學(xué)的課程知識(shí)體系能大大提高課程群建設(shè)的質(zhì)量和效果。具體來說,一方面要準(zhǔn)確分析計(jì)算機(jī)公共課的培養(yǎng)目標(biāo)及知識(shí)結(jié)構(gòu)要求,在正確認(rèn)識(shí)數(shù)據(jù)庫技術(shù)系列課程知識(shí)體系特點(diǎn)的基礎(chǔ)上科學(xué)提煉計(jì)算機(jī)學(xué)科內(nèi)涵;另一方面要及時(shí)跟蹤國內(nèi)外計(jì)算機(jī)技術(shù)和數(shù)據(jù)庫技術(shù)的發(fā)展和趨勢(shì),不斷根據(jù)大數(shù)據(jù)[6]、透明計(jì)算、云計(jì)算、物聯(lián)網(wǎng)[7]時(shí)代的技術(shù)發(fā)展特點(diǎn)修正、更新和調(diào)整教學(xué)內(nèi)容,讓課程知識(shí)體系能始終適應(yīng)時(shí)展的需求。同時(shí),要以培養(yǎng)計(jì)算機(jī)應(yīng)用開發(fā)能力為目標(biāo),以計(jì)算思維為切入點(diǎn),對(duì)教學(xué)內(nèi)容進(jìn)行科學(xué)組織和優(yōu)化;在充分調(diào)研、認(rèn)真分析的基礎(chǔ)上,確定學(xué)生應(yīng)具備的知識(shí)結(jié)構(gòu),明確改革目標(biāo),提出具體方案并投入課程改革實(shí)踐,分析改革效果,進(jìn)行總結(jié)和推廣研究。這個(gè)過程可以反復(fù)交叉進(jìn)行。改革是無止境的,改革的效果也是相對(duì)的,沒有最好,只有更好。教師應(yīng)在實(shí)踐中不斷調(diào)整和修正教學(xué)改革方案,建立科學(xué)的課程知識(shí)體系。

4 結(jié)語

數(shù)據(jù)庫系列課程是高等學(xué)校非計(jì)算機(jī)專業(yè)中非常重要的公共基礎(chǔ)課[8],如何在計(jì)算機(jī)技術(shù)飛速發(fā)展的背景下更加深入地理解計(jì)算機(jī)學(xué)科的內(nèi)涵和性質(zhì),根據(jù)不同專業(yè)、不同年級(jí)學(xué)生的特點(diǎn)開展有針對(duì)性的教學(xué),在數(shù)據(jù)庫系列課程教學(xué)和數(shù)據(jù)庫課程群建設(shè)中引入計(jì)算思維以有效促進(jìn)課程改革,是高校計(jì)算機(jī)基礎(chǔ)課教師應(yīng)重點(diǎn)關(guān)注和思考的問題。筆者闡釋了計(jì)算思維在數(shù)據(jù)庫系列課程改革中的作用,介紹了在數(shù)據(jù)庫系列課程教學(xué)過程和在課程群建設(shè)中融入計(jì)算思維的方法和步驟,期望通過大膽的探索為培養(yǎng)和提高教師和學(xué)生的計(jì)算思維能力打下基礎(chǔ)。

參考文獻(xiàn):

[1] 周以真. 計(jì)算思維[J]. 中國計(jì)算機(jī)學(xué)會(huì)通訊, 2007(11): 11-14.

[2] 李廉. 計(jì)算思維: 概念與挑戰(zhàn)[J]. 中國大學(xué)教學(xué), 2012(1): 7-12.

[3] 龔沛森, 楊志強(qiáng). 大學(xué)計(jì)算機(jī)基礎(chǔ)教學(xué)中的計(jì)算思維培養(yǎng)[J]. 中國大學(xué)教學(xué), 2012(5): 51-54.

[4] 李曉明, 蔣宗禮, 王志英, 等. 積極研究和推進(jìn)計(jì)算思維能力的培養(yǎng)[J]. 計(jì)算機(jī)教育, 2012(5): 1.

[5] 教育部高等學(xué)校計(jì)算機(jī)基礎(chǔ)課程教學(xué)指導(dǎo)委員會(huì). 高等學(xué)校計(jì)算機(jī)基礎(chǔ)核心課程教學(xué)實(shí)施方案[M].北京: 高等教育出版社, 2011: 4-5.

[6] 大數(shù)據(jù)時(shí)代來臨[N]. 北京晚報(bào), 2012-06-15(40).

[7] 嚴(yán)大虎, 陳明選. 物聯(lián)網(wǎng)在智慧校園中的應(yīng)用[J]. 現(xiàn)代教育技術(shù), 2011, 21(6): 123-125.