資源描述:
《大數(shù)據(jù)視角下的騰訊微博用戶的行為分析》由會(huì)員上傳分享,免費(fèi)在線閱讀,更多相關(guān)內(nèi)容在學(xué)術(shù)論文-天天文庫。
1、萬方數(shù)據(jù)第1章緒論1.1引言互聯(lián)網(wǎng)賦予了公民權(quán)利,大大提升了經(jīng)濟(jì)效率,帶來了不計(jì)其數(shù)的創(chuàng)新爆發(fā)。數(shù)以億計(jì)的人們正在使用互聯(lián)網(wǎng)購物,便捷輕松地與人溝通,分享觀點(diǎn)。llJ伴隨著移動(dòng)設(shè)備的普及和通信技術(shù)與網(wǎng)絡(luò)的發(fā)展,社交網(wǎng)絡(luò)最近幾年取得了驚人的成就,電子商務(wù)和移動(dòng)互聯(lián)網(wǎng)產(chǎn)生了數(shù)量巨大的用戶生成內(nèi)容(UGC)。今天很難以估量以電子方式存儲(chǔ)的數(shù)據(jù)到底有多少。紐約證券交易所每天產(chǎn)生1TB的交易數(shù)據(jù);著名的社交網(wǎng)絡(luò)Facebook上存儲(chǔ)著約100億張照片,約1PBl存儲(chǔ)容量;Ancestry.com,一個(gè)家譜網(wǎng)站,存儲(chǔ)著約2.5PB數(shù)據(jù);瑞士日內(nèi)瓦附近的大型強(qiáng)子對(duì)
2、撞機(jī)每年產(chǎn)生約15PB的數(shù)據(jù)。12J大量數(shù)據(jù)導(dǎo)致對(duì)存儲(chǔ)設(shè)備容量的需求急劇增加,同時(shí)也帶來了數(shù)據(jù)處理問題,并加速了新技術(shù)的誕生。本文借鑒以往社交網(wǎng)絡(luò)及其分析的相關(guān)研究成果,從大數(shù)據(jù)的視角,用不同的方法來對(duì)社交網(wǎng)絡(luò)的數(shù)據(jù)進(jìn)行研究,從中挖掘社交網(wǎng)絡(luò)用戶共同的行為規(guī)律。從用戶之間的關(guān)系層面轉(zhuǎn)向所有用戶共同的行為。在對(duì)社交網(wǎng)絡(luò)及其分析進(jìn)行理論研究基礎(chǔ)上,形成對(duì)整個(gè)研究領(lǐng)域的宏觀認(rèn)識(shí),對(duì)研究問題進(jìn)行比較精確的定位。學(xué)習(xí)并借鑒前人的成果,結(jié)合騰訊微搏開放平臺(tái)提供的開放API接口對(duì)已有的網(wǎng)絡(luò)爬蟲加以改進(jìn),使用改進(jìn)后的網(wǎng)絡(luò)爬蟲獲取研究數(shù)據(jù)。在獲得數(shù)量可觀的數(shù)據(jù)之后,利
3、用數(shù)據(jù)分析軟件KNIME對(duì)用戶數(shù)據(jù)進(jìn)行分析,驗(yàn)證騰訊微博用戶之間是否存在共同的行為規(guī)律。首先簡要介紹數(shù)據(jù)來源及獲取方法、獲取內(nèi)容等,并在數(shù)據(jù)初步處理的基礎(chǔ)上對(duì)數(shù)據(jù)進(jìn)行整體分析。包括騰訊微博的在一月、一周時(shí)間段的發(fā)表時(shí)間分布,和在一天內(nèi)的發(fā)表時(shí)間分布。研究發(fā)現(xiàn),騰訊微博的用戶微博使用工作日要比周末頻繁;而從一天時(shí)間切面來看,多數(shù)微博都發(fā)表在上午九點(diǎn)和晚上十點(diǎn)前后。其次對(duì)騰訊微博用戶按照微博發(fā)布時(shí)間規(guī)律的不同進(jìn)行聚類,并分析了不同種類人群的各自特征。通過聚類分析,將所有用戶分為多個(gè)不同群組,分別研究每個(gè)不同群組的特征,發(fā)現(xiàn)他們各自的特點(diǎn),并選取了較為典型
4、的幾個(gè)群組作為代表。研究表明,騰訊微博用戶微博使用確實(shí)存在不同的習(xí)慣群體,且可能與人們的日常生活存在一定的相關(guān)性。萬方數(shù)據(jù)第l章緒論1.2社交網(wǎng)絡(luò)分析源起斯坦利·沃瑟曼(StanleyWasserman)和凱瑟琳·福斯特(KatherineFaust)[31在《社會(huì)網(wǎng)絡(luò)分析:方法與應(yīng)用》中指出:社會(huì)網(wǎng)絡(luò)分析的概念是從社會(huì)理論和應(yīng)用與形式數(shù)學(xué)、統(tǒng)計(jì)學(xué)和計(jì)算方法論有機(jī)結(jié)合而來的。社會(huì)網(wǎng)絡(luò)分析的先驅(qū)來自社會(huì)學(xué)、社會(huì)心理學(xué)和人類學(xué)領(lǐng)域。社會(huì)網(wǎng)絡(luò)由一個(gè)或多個(gè)行動(dòng)者有限集和他們之間的一種或多種關(guān)系組成。社會(huì)網(wǎng)絡(luò)分析涉及理解社會(huì)實(shí)體間的聯(lián)系和這些聯(lián)系代表的意義;其
5、中的社會(huì)實(shí)體被稱為行動(dòng)者。社會(huì)群體成員間某種類型的聯(lián)系的集合稱為關(guān)系。聯(lián)系特指行動(dòng)者之間的社會(huì)聯(lián)系。近幾十年來,社會(huì)網(wǎng)絡(luò)的概念和社會(huì)網(wǎng)絡(luò)分析方法吸引了來自社會(huì)和行為科學(xué)界相當(dāng)多的興趣和關(guān)注。這些興趣大多數(shù)可以歸因于一個(gè)引人入勝的焦點(diǎn):即對(duì)于社會(huì)實(shí)體之間的關(guān)系以及對(duì)這些關(guān)系的模式和含意的社會(huì)網(wǎng)絡(luò)分析。許多研究人員已經(jīng)認(rèn)識(shí)到,通過給予政治、經(jīng)濟(jì)或社會(huì)結(jié)構(gòu)環(huán)境的各個(gè)方面精確的形式化定義,這種網(wǎng)絡(luò)觀點(diǎn)能夠以新的方式來解答標(biāo)準(zhǔn)的社會(huì)和行為科學(xué)研究問題。從社會(huì)網(wǎng)絡(luò)分析的觀點(diǎn)來看,社會(huì)環(huán)境可以表述為互相作用的個(gè)體之間的關(guān)系模式或規(guī)律性。過去幾十年,社會(huì)網(wǎng)絡(luò)方法已經(jīng)
6、發(fā)展成為社會(huì)理論、經(jīng)驗(yàn)研究、形式數(shù)學(xué)與統(tǒng)計(jì)學(xué)發(fā)展的必要組成部分。社會(huì)網(wǎng)絡(luò)分析的許多關(guān)鍵的結(jié)構(gòu)方法和觀念的產(chǎn)生都得益于研究人員尋求描述經(jīng)驗(yàn)現(xiàn)象的敏銳的洞察力,以及受社會(huì)理論的重要觀念的啟迪。除此之外,已經(jīng)形成了用來檢驗(yàn)在具體研究和模型檢驗(yàn)過程中出現(xiàn)的網(wǎng)絡(luò)結(jié)構(gòu)屬性的特定假設(shè)的方法。理論和方法之間的共生關(guān)系為網(wǎng)絡(luò)分析技術(shù)的應(yīng)用和理論打下了堅(jiān)實(shí)基礎(chǔ)。社會(huì)網(wǎng)絡(luò)分析是建立在互相作用的個(gè)體間關(guān)系的重要性假設(shè)上的。社會(huì)網(wǎng)絡(luò)視角包括以關(guān)系的概念或過程表達(dá)的理論、模型和應(yīng)用,即由個(gè)體間的關(guān)聯(lián)所界定的關(guān)系是網(wǎng)絡(luò)理論的基本成分。在社會(huì)網(wǎng)絡(luò)分析中,行動(dòng)者和他們的行動(dòng)被視為是相
7、互依賴的,而不是相互獨(dú)立的自治的個(gè)體;行動(dòng)者之間的聯(lián)系(關(guān)聯(lián))是資源轉(zhuǎn)移或“流動(dòng)”的通道;個(gè)體的網(wǎng)絡(luò)模型將網(wǎng)絡(luò)結(jié)構(gòu)環(huán)境視為個(gè)體行動(dòng)的機(jī)遇或限制;網(wǎng)絡(luò)模型將(社會(huì)、經(jīng)濟(jì)、政治等)結(jié)構(gòu)概念化為行動(dòng)者之間關(guān)系的穩(wěn)定形式。網(wǎng)絡(luò)分析以許多方式參與模型的發(fā)展、規(guī)范和測試的進(jìn)程。通過形式化的定義、測試和描述來從關(guān)系的角度表達(dá)已有的理論概念,評(píng)估主要概念和命題被表述成關(guān)系過程或結(jié)構(gòu)結(jié)果的模型和理論,或者提供對(duì)多重關(guān)系系統(tǒng)的統(tǒng)計(jì)學(xué)分析。在模型和理論的評(píng)估與檢驗(yàn)方面,網(wǎng)絡(luò)可以用來檢驗(yàn)關(guān)于關(guān)系過程或結(jié)構(gòu)的理論。這些理論假定了某種結(jié)構(gòu)結(jié)果的存在,而這些結(jié)果隨后可以用觀測到的
8、網(wǎng)絡(luò)數(shù)據(jù)加以評(píng)估。萬方數(shù)據(jù)第1章緒論社會(huì)網(wǎng)絡(luò)理論或命題的關(guān)鍵性在于它們需要那些社會(huì)單位通過各種關(guān)系關(guān)聯(lián)在一起