資源描述:
《大數(shù)據(jù)崛起與數(shù)據(jù)挖掘分析.doc》由會員上傳分享,免費在線閱讀,更多相關(guān)內(nèi)容在應(yīng)用文檔-天天文庫。
1、大數(shù)據(jù)崛起與數(shù)據(jù)挖掘分析在人類生活和社會生產(chǎn)的各個行業(yè)中都需要運用到大數(shù)據(jù),極大提高了人們的生活質(zhì)量和社會生產(chǎn)的效率[1]。但是當(dāng)今社會是技術(shù)更新日新月異的時代,為了促使大數(shù)據(jù)更好為人類提供服務(wù)以及促進(jìn)其自身的不斷崛起,需要挖掘更加豐富、有效且多元化的數(shù)據(jù)信息內(nèi)容,才能滿足社會發(fā)展的需求,也能有效鞏固大數(shù)據(jù)在社會發(fā)展中的重要地位。1相關(guān)概述1.1大數(shù)據(jù)大數(shù)據(jù)又被稱為巨量數(shù)據(jù),其是在物聯(lián)網(wǎng)、云制造技術(shù)影響下產(chǎn)生的一種新型的信息處理模式,通過分析信息資產(chǎn)的變化規(guī)律,從而使信息處理具有更高的流程優(yōu)化能力和決策洞察能力。1.2大數(shù)據(jù)崛起大數(shù)據(jù)風(fēng)暴已影響到全世界的各個角落,在
2、社會中的各個領(lǐng)域都需要通過數(shù)據(jù)分析各行業(yè)的運營情況,并根據(jù)數(shù)據(jù)分析結(jié)果作好相應(yīng)的決策與判斷,因此,大數(shù)據(jù)已在社會中得到廣泛使用并快速崛起。企業(yè)通過將所有的業(yè)務(wù)數(shù)據(jù)信息進(jìn)行整合分析,形成高速、真實及多樣的管理模式,將能有效降低企業(yè)業(yè)務(wù)操作的資源損耗,同時還能有效提升企業(yè)工作的質(zhì)量和效率[2]。1.3數(shù)據(jù)挖掘數(shù)據(jù)挖掘技術(shù)是一種新興的科學(xué)技術(shù),是由網(wǎng)絡(luò)技術(shù)發(fā)展而來的,其不僅能用來分析具有特定規(guī)律的事物,同時對于數(shù)據(jù)量較大且復(fù)雜的數(shù)據(jù)信息其也能發(fā)掘其中的聯(lián)系,并利用有效的技術(shù)手段,將復(fù)雜的數(shù)據(jù)信息從數(shù)據(jù)庫中抽離出來,采用自身的編輯、處理及合成功能集合數(shù)據(jù)信息,供人們分析和使
3、用[3]。1.3.1基本特點5學(xué)海無涯數(shù)據(jù)挖掘也可以被理解為數(shù)據(jù)分析,它的主要特點是能夠?qū)?shù)據(jù)庫中的各項數(shù)據(jù)進(jìn)行分析、抽取、模型處理以及轉(zhuǎn)換等,提取其中的關(guān)鍵性數(shù)據(jù)輔助人們進(jìn)行企業(yè)生產(chǎn)決策,并能取得良好的效果。相較于傳統(tǒng)的數(shù)據(jù)分析,其是在數(shù)據(jù)未知的情況下進(jìn)行信息挖掘,因此,數(shù)據(jù)挖掘的三大基本特征是未知、實用性強、有效。在進(jìn)行數(shù)據(jù)挖掘過程中可采用分類、聚類、決策樹、關(guān)聯(lián)規(guī)則等多種不同的分析方式進(jìn)行數(shù)據(jù)信息發(fā)掘。1.3.2基本步驟數(shù)據(jù)挖掘一般分為數(shù)據(jù)準(zhǔn)備、數(shù)據(jù)挖掘、運用管理、計算知識提取數(shù)據(jù)信息三個步驟。(1)數(shù)據(jù)準(zhǔn)備,也就是要明確數(shù)據(jù)目標(biāo),在數(shù)據(jù)庫中檢索出符合條件且能
4、被運用的數(shù)據(jù),并做好分類、編輯等準(zhǔn)備工作。(2)數(shù)據(jù)挖掘,根據(jù)數(shù)據(jù)挖掘的要求和目標(biāo),選擇科學(xué)、合理的分析和計算方法,找出數(shù)據(jù)信息的特征和數(shù)據(jù)之間的聯(lián)系,并歸納數(shù)據(jù)的應(yīng)用價值表現(xiàn)[4]。(3)運用管理、計算知識提取數(shù)據(jù)信息,對于數(shù)據(jù)信息的總結(jié)還需進(jìn)行實踐與評估,也就是將得出的數(shù)據(jù)結(jié)論運用到實踐工作中,通過實踐結(jié)果判定其數(shù)據(jù)發(fā)掘分析過程的正確與否。2數(shù)據(jù)挖掘的應(yīng)用5學(xué)海無涯數(shù)據(jù)挖掘被應(yīng)用到市場營銷、工業(yè)制造、科學(xué)研究、教育領(lǐng)域、醫(yī)學(xué)領(lǐng)域、通訊行業(yè)以及網(wǎng)絡(luò)技術(shù)應(yīng)用等多個領(lǐng)域,對行業(yè)發(fā)展具有重要影響。(1)市場營銷是最早開始使用數(shù)據(jù)挖掘技術(shù)的領(lǐng)域,也是目前應(yīng)用大數(shù)據(jù)最多的領(lǐng)
5、域,市場營銷工作要取得良好的營銷效果就必須充分發(fā)掘用戶的消費習(xí)慣和分析其消費特點,而這些結(jié)論都需要通過對其消費的數(shù)據(jù)信息進(jìn)行深入的分析,了解其中的規(guī)律,以此來判定用戶的消費需求和消費能力,從而改進(jìn)或轉(zhuǎn)變企業(yè)的營銷思路,提高企業(yè)營銷業(yè)績。通過數(shù)據(jù)分析的延伸,在市場營銷方面已不僅僅包含傳統(tǒng)的實體物品營銷,對于銀行、保險、電子商務(wù)以及金融領(lǐng)域,也可通過數(shù)據(jù)挖掘和分析市場經(jīng)濟(jì)的走勢,為自身行業(yè)客戶帶來經(jīng)濟(jì)利益的同時,也有效促進(jìn)了自身行業(yè)的發(fā)展[5]。(2)工業(yè)制造,通過分析工業(yè)制造行業(yè)的各種零部件生產(chǎn)數(shù)據(jù)以及分析產(chǎn)品缺陷,能夠快速找出影響產(chǎn)品生產(chǎn)率的相關(guān)因素,在后續(xù)的工作中
6、則會盡力減少和避免因素影響對產(chǎn)品造成的損壞,從而有利于提高工業(yè)產(chǎn)品的生產(chǎn)效率和良品率,將能有效促進(jìn)企業(yè)的快速發(fā)展。(3)科學(xué)研究,科學(xué)研究一般都需要進(jìn)行大量的數(shù)據(jù)觀測和實驗論證,才能獲得有效的科學(xué)結(jié)論和找出某種事物的科學(xué)發(fā)展規(guī)律,而數(shù)據(jù)觀測和實驗論證都離不開數(shù)據(jù)的支持,利用數(shù)據(jù)挖掘技術(shù)能夠快速找出科學(xué)數(shù)據(jù)之間的聯(lián)系、變化規(guī)律以及科學(xué)家肉眼無法識別的科學(xué)知識,通過對相關(guān)數(shù)據(jù)信息進(jìn)行科學(xué)的分析和計算,能有效降低科學(xué)研究的難度,使科學(xué)研究變得更加直觀和簡便。對于DNA數(shù)據(jù)、外空星體數(shù)據(jù)的探索,采用大數(shù)據(jù)分析相較于傳統(tǒng)數(shù)據(jù)分析容易得多。(4)教育領(lǐng)域,其涉及教學(xué)資源的最優(yōu)化
7、配置、教學(xué)管理方式、學(xué)生心理發(fā)展?fàn)顟B(tài)、學(xué)習(xí)情況、教學(xué)評價以及綜合素質(zhì)發(fā)展等多項教學(xué)工作內(nèi)容,為了使各項工作都能和諧、穩(wěn)定、健康進(jìn)行,需采用數(shù)據(jù)挖掘技術(shù)來實現(xiàn)教學(xué)管理者統(tǒng)籌和規(guī)劃各項工作。(5)醫(yī)學(xué)領(lǐng)域,醫(yī)學(xué)數(shù)據(jù)和決策的正確與否與人類的生命安全息息相關(guān),為了保證醫(yī)療決策數(shù)據(jù)的準(zhǔn)確性和高效性,可采用數(shù)據(jù)挖掘技術(shù)對醫(yī)療信息數(shù)據(jù)進(jìn)行有效的分析,為醫(yī)療決策提供安全保障[6]。(6)網(wǎng)絡(luò)技術(shù)應(yīng)用,數(shù)據(jù)挖掘技術(shù)是由網(wǎng)絡(luò)技術(shù)發(fā)展而來的,因此,其與網(wǎng)絡(luò)技術(shù)是相輔相成的關(guān)系,一方面網(wǎng)絡(luò)技術(shù)的快速發(fā)展能有效促進(jìn)數(shù)據(jù)挖掘技術(shù)的提高,另一方面數(shù)據(jù)挖掘技術(shù)可提高網(wǎng)絡(luò)技術(shù)的發(fā)展速度,通過數(shù)據(jù)