資源描述:
《map+framework及其在中文分詞中的消歧應(yīng)用new》由會(huì)員上傳分享,免費(fèi)在線閱讀,更多相關(guān)內(nèi)容在教育資源-天天文庫。
1、桂林工學(xué)院碩士學(xué)位論文MAPFramework及其在中文分詞中的消歧應(yīng)用姓名:王挺申請(qǐng)學(xué)位級(jí)別:碩士專業(yè):計(jì)算機(jī)應(yīng)用技術(shù)指導(dǎo)教師:麥范金20080401桂林工學(xué)院碩士學(xué)位論文摘要21世紀(jì)是各個(gè)學(xué)科不斷融合,共同發(fā)展的一個(gè)世紀(jì)。人工智能科學(xué)也必將融入到多學(xué)科交叉的趨勢之中。但是,人工智能的傳統(tǒng)處理方法有著自己的局限性,這種局限性從根本上制約了人工智能的發(fā)展。自然語言處理作為人工智能的分支也遇到了類似的情況。文章首先對(duì)人工智能和自然語言處理的現(xiàn)狀和困境進(jìn)行了論述,認(rèn)為人工智能和自然語言‘處理要從困境中走出,不能停留在傳統(tǒng)中,必須在神經(jīng)、認(rèn)知和計(jì)算三個(gè)層次有所突破才行。在神經(jīng)層次,文章
2、基于生物神經(jīng)系統(tǒng)的進(jìn)化和現(xiàn)代腦科學(xué)對(duì)人腦的研究,提出了大腦皮層功能分區(qū)形成假說,并用狼孩、左利手與右利手、說英語者與說漢語者等三個(gè)實(shí)例對(duì)假說進(jìn)一步論證。根據(jù)這個(gè)假說,作者認(rèn)為大腦內(nèi)部應(yīng)有一個(gè)統(tǒng)一的智能信息處理體系。結(jié)合認(rèn)知心理學(xué)和JeffHawkins的記憶預(yù)測模型,在認(rèn)知層次,文章提出了MAPFramework作為這個(gè)統(tǒng)一的智能信息處理體系框架。同時(shí),認(rèn)為聯(lián)想在智能信息處理過程中起到了重要作用,記憶、聯(lián)想、預(yù)測三個(gè)過程是MAPFramework的關(guān)鍵。文章對(duì)MAPFramework的基本組成和工作機(jī)制也進(jìn)行了闡述。雖然MAPFramework目前比較粗糙,但從MAP中文分詞系統(tǒng)
3、看來,它具有一定的有效性和可行性。MAP中文分詞系統(tǒng)是作者基于MAPFramework智能體系框架設(shè)計(jì)開發(fā)的一個(gè)中文分詞系統(tǒng)。這個(gè)分詞系統(tǒng)具備短時(shí)記憶、長時(shí)記憶和工作記憶三層記憶體系結(jié)構(gòu),主要保存詞匯和語料記憶,能夠通過已設(shè)置的聯(lián)想方式進(jìn)行聯(lián)想,最終得到預(yù)測結(jié)果,并通過機(jī)器學(xué)習(xí)不斷更新記憶,通過記憶、聯(lián)想、預(yù)測最后完成中文分詞工作。文章最后的測試顯示:通過大量的語料訓(xùn)練,MAP中文分詞系統(tǒng)對(duì)實(shí)際測試語料進(jìn)行分詞測試,效果遠(yuǎn)好于正向最大匹配法和逆向最大匹配法。由此可知,基于MAPFramework智能體系框架的MAP中文分詞系統(tǒng)具有良好的分詞能力,據(jù)此可信MAPFramework智
4、能體系框架具有一定的可行性和有效性。而人工智能和自然語言處理等科學(xué)的研究,從神經(jīng)、認(rèn)知和計(jì)算三個(gè)層次上來入手,也應(yīng)該是一條正確的研究途徑。關(guān)鍵詞:記憶;聯(lián)想;預(yù)測;中文分詞;歧義消減;N元文法;隱馬爾科夫模型;動(dòng)態(tài)規(guī)劃桂林工學(xué)院碩士學(xué)位論文AbstractThe21stcenturyisanewcenturyinwhichdifferentscienceandtechnologieswillinosculateanddeveloptogether,SOwilltheArtificialIntelligence(AI).However,thetraditionaltechnique
5、sofAIaresolimitedthattheyrestrictthedevelopmentofAI.NaturalLanguageProcessing(NLP)isabranchofAI,anditisalsorestrictedbythetraditionaltechniquesofAI.Thisdissertationilluminatesthelimitationoftoday’SAIandNLP,andpointsoutthedevelopmentofAIandNLPshouldbeginonthenervelayer,thecognitionlayerandthec
6、alculationlayertogether.OnlyinthiswayCanAIandNLPdevelopwell.Onthenervelayer,basedontheevolutionofneuralsystemoflivesandthemodembrainscience,thisdissertationputsforwardanewhypothesisoftheinitializationoffunctionallocalizationoncerebralcortex,andusestheexamplesofthewolfchild,left-handerandfight
7、-hander,andEnglishspeakerandChinesespeakertoconfirmthehypothesis.Basedonthishypothesis,thewriterbelievesthatthereisauniqueintelligencesysteminourbrain.OnthecognitionlayeLcombinewiththecognitivepsychologyandJeffHawkins’Memory—PredictionFramewo