亚洲欧美日韩成人_亚洲精品国产精品国产自_91精品国产综合久久国产大片 _女同久久另类99精品国产

人工神經(jīng)網(wǎng)絡(luò)大全11篇

時(shí)間:2022-06-02 19:51:55

緒論:寫(xiě)作既是個(gè)人情感的抒發(fā),也是對(duì)學(xué)術(shù)真理的探索,歡迎閱讀由發(fā)表云整理的11篇人工神經(jīng)網(wǎng)絡(luò)范文,希望它們能為您的寫(xiě)作提供參考和啟發(fā)。

篇(1)

1.2GRACE數(shù)據(jù)本文采用的GRACE重力衛(wèi)星數(shù)據(jù)是由美國(guó)德克薩斯大學(xué)空間研究中心提供的高精度Level-2RL05版本的GRACE重力場(chǎng)前60階球諧系數(shù)(2005年1月~2010年12月)[12].在此基礎(chǔ)上,根據(jù)Blewitt[13,14]、Wahr[15]的結(jié)果推導(dǎo)由GRACE時(shí)變重力資料解算的陸地水儲(chǔ)量,如公式(1)所示。

1.3CPC水文模型數(shù)據(jù)研究表明,地表水儲(chǔ)量可以忽略[7],所以研究區(qū)陸地水儲(chǔ)量變化可以用式(2)表示。示土壤水分引起的陸地水儲(chǔ)量變化,來(lái)自CPC水文模型.通過(guò)式(2)可獲得地下水儲(chǔ)量的變化值.以BJFS臺(tái)站為例,如圖1所示,綠色線表示GRACE解算的陸地水儲(chǔ)量,紅色線表示CPC水文模型解算的土壤水儲(chǔ)量,藍(lán)色線為地下水儲(chǔ)量.由于GRACE解算的陸地水儲(chǔ)量在解算過(guò)程中扣除了背景場(chǎng)的影響,因此本文對(duì)72個(gè)月的降水量、地下水埋深以及GPS測(cè)站的地表形變數(shù)據(jù)做同樣的處理.

2研究方法

2.1人工神經(jīng)網(wǎng)絡(luò)算法原理BP神經(jīng)網(wǎng)絡(luò)是一種多層前饋神經(jīng)網(wǎng)絡(luò),該網(wǎng)絡(luò)的主要特點(diǎn)是信號(hào)前向傳遞,誤差反向傳遞.在前向傳遞過(guò)程中,輸入信號(hào)從輸入層經(jīng)隱含層逐層處理,直至輸出層.每一層的神經(jīng)元狀態(tài)只影響到下一層神經(jīng)元狀態(tài).若輸出層不能滿足期望的輸出要求,則轉(zhuǎn)入反向傳播,根據(jù)預(yù)測(cè)誤差調(diào)整網(wǎng)絡(luò)權(quán)值和閾值,從而使得BP神經(jīng)網(wǎng)絡(luò)預(yù)測(cè)輸出不斷逼近期望輸出[16].其拓?fù)浣Y(jié)構(gòu)如圖2所示.X1,X2,…,Xn是BP神經(jīng)網(wǎng)絡(luò)的輸入值,Y1,Y2,…,Ym是BP神經(jīng)網(wǎng)絡(luò)的預(yù)測(cè)值,ωij和ωjk為BP神經(jīng)網(wǎng)絡(luò)權(quán)值.

2.2基于BP神經(jīng)網(wǎng)絡(luò)的地表垂直負(fù)荷形變量模擬

2.2.1指標(biāo)選取地表負(fù)荷形變是由地表流體質(zhì)量(包括大氣、陸地水等)重新分布引起的不同尺度變化.因此將GRACE解算的水儲(chǔ)量作為一個(gè)輸入因子.此外,分析華北平原地表負(fù)荷形變的成因,認(rèn)為地下水超采對(duì)該區(qū)的地表負(fù)荷形變有一定影響.為此將地下水埋深作為BP神經(jīng)網(wǎng)絡(luò)模型的一個(gè)輸入因子.降水量與地表負(fù)荷形變量間存在一定關(guān)系,一方面降水的增多會(huì)相對(duì)減少對(duì)地下水的開(kāi)采,另一方面在降水過(guò)程中淺層黏性土吸水后表現(xiàn)出一定的膨脹性,因此將歷年的降水量也作為一個(gè)輸入因素[17].為了探求不同水儲(chǔ)量作為輸入因子時(shí)模型的模擬精度,本文結(jié)合來(lái)自CPC水文模型的土壤水儲(chǔ)量,將解算出的地下水儲(chǔ)量作為另一個(gè)輸入因子.

2.2.2樣本訓(xùn)練與網(wǎng)絡(luò)設(shè)置為消除網(wǎng)絡(luò)輸入、輸出變量的量級(jí)、量綱不同對(duì)網(wǎng)絡(luò)識(shí)別精度的影響,對(duì)各個(gè)變量進(jìn)行歸一化處理。上式中:P為原始輸入數(shù)據(jù),Pmin,Pmax分別為原始數(shù)據(jù)的最小值和最大值,Pn為歸一化后的數(shù)據(jù).隱含層采用正切Sigmoid函數(shù),輸出層采用Purelin函數(shù),訓(xùn)練函數(shù)采用貝葉斯正則化算法.網(wǎng)絡(luò)的主要參數(shù)訓(xùn)練目標(biāo)goal=0.001,學(xué)習(xí)率為0.05,性能函數(shù)采用msg均方誤差函數(shù).

3結(jié)果與討論

3.1模型精度驗(yàn)證

3.1.1樣本訓(xùn)練精度運(yùn)行建立的人工神經(jīng)網(wǎng)絡(luò)模型,訓(xùn)練21次達(dá)到訓(xùn)練目標(biāo).R2平均值為0.892,說(shuō)明模型訓(xùn)練精度較高.如圖3所示為將陸地水儲(chǔ)量作為輸入因子訓(xùn)練網(wǎng)絡(luò)后的5個(gè)臺(tái)站模擬結(jié)果.圖中藍(lán)色線為GPS臺(tái)站的實(shí)際觀測(cè)形變量,紅色虛線為用人工神經(jīng)網(wǎng)絡(luò)模擬出來(lái)的型變量.

3.1.2模型模擬精度由于地表垂直負(fù)荷形變實(shí)際觀測(cè)結(jié)果與擬合結(jié)果均為等間隔的月尺度數(shù)據(jù)且沒(méi)有明顯規(guī)律,因此采取后驗(yàn)差檢驗(yàn)法對(duì)模型進(jìn)行精度分析。采用后驗(yàn)差檢驗(yàn)法對(duì)結(jié)果進(jìn)行精度分析,檢驗(yàn)結(jié)果如表2所示,5個(gè)臺(tái)站后驗(yàn)差比值C<0.5,小誤差概率P>0.80,R2平均值為0.806,依據(jù)預(yù)測(cè)等級(jí)表,網(wǎng)絡(luò)模型精度較高.

3.2不同水儲(chǔ)量輸入對(duì)精度的影響將不同水儲(chǔ)量輸出的15組模擬結(jié)果進(jìn)行后驗(yàn)差檢驗(yàn),結(jié)果如表3、圖4(以BJSH為例)所示,當(dāng)以陸地水儲(chǔ)量(TWS)作為輸入時(shí),5個(gè)臺(tái)站的后驗(yàn)差比值C<0.5,小誤差概率P>0.80,R2為0.901,相關(guān)性較好,模型模擬精度較高.當(dāng)以地下水儲(chǔ)量(GWS)和土壤水儲(chǔ)量(SWS)作為輸入時(shí),均方差C>0.65,小誤差概率減小,R2為0.555和0.290,模擬精度屬于勉強(qiáng).說(shuō)明在利用人工神經(jīng)網(wǎng)絡(luò)模擬地表負(fù)荷形變量時(shí),陸地水儲(chǔ)量作為模型輸入因子時(shí)模型模擬效果最好,地下水儲(chǔ)量對(duì)地表負(fù)荷形變的影響比土壤水儲(chǔ)量大.

篇(2)

一、前言

人工神經(jīng)網(wǎng)絡(luò)是一個(gè)多科學(xué)、綜合性的研究領(lǐng)域,它是根據(jù)仿生學(xué)模擬人體大腦結(jié)構(gòu)和運(yùn)行機(jī)制構(gòu)造的非線性動(dòng)力學(xué)系統(tǒng)[1]。神經(jīng)網(wǎng)絡(luò)可以看作是一種具有自組織、自學(xué)習(xí)能力的智能機(jī)器,它能模仿人的學(xué)習(xí)過(guò)程,通過(guò)給網(wǎng)絡(luò)各種范例,把網(wǎng)絡(luò)的實(shí)際輸出與希望輸出比較,根據(jù)偏差修改節(jié)點(diǎn)間的連接權(quán),直到獲得滿意的輸出。現(xiàn)已廣泛應(yīng)用于經(jīng)濟(jì)學(xué)、軍事學(xué)、材料學(xué)、醫(yī)學(xué)、生物學(xué)等領(lǐng)域。

化工過(guò)程一般比較復(fù)雜, 對(duì)象特性多變、間歇或半連續(xù)生產(chǎn)過(guò)程多,具有嚴(yán)重非線性特性。因此,其模型化問(wèn)題一直是研究的熱點(diǎn)。化工生產(chǎn)過(guò)程的數(shù)據(jù)或?qū)嶒?yàn)室實(shí)驗(yàn)數(shù)據(jù)的擬臺(tái)、分析,是優(yōu)化過(guò)程或優(yōu)化反應(yīng)條件的基礎(chǔ)一般被處理的數(shù)據(jù)可以分為二類(lèi):靜態(tài)數(shù)據(jù)(static data)和動(dòng)態(tài)數(shù)據(jù)(Dynamic data),對(duì)于靜態(tài)數(shù)據(jù)的關(guān)聯(lián),神經(jīng)網(wǎng)絡(luò)是一種很有希望的“經(jīng)驗(yàn)?zāi)P汀睌M合工具。動(dòng)態(tài)過(guò)程數(shù)據(jù)具有系統(tǒng)隨時(shí)間而變化的特征,操作參數(shù)和產(chǎn)物的產(chǎn)量和質(zhì)量之間的關(guān)系更為復(fù)雜。處理和分析動(dòng)態(tài)過(guò)程數(shù)據(jù)的方法除了常用的在物料衡算、能量衡算、反應(yīng)動(dòng)力學(xué)方程、相平衡等基礎(chǔ)上建立數(shù)學(xué)模型(Mathematical Models)、數(shù)理統(tǒng)計(jì)(Statistical Analysis)等方法外,用神經(jīng)網(wǎng)絡(luò)擬合動(dòng)態(tài)過(guò)程數(shù)據(jù), 建立動(dòng)態(tài)過(guò)程模型, 往往能從動(dòng)態(tài)數(shù)據(jù)提供的模式中提取較為有用的信息,對(duì)過(guò)程進(jìn)行預(yù)測(cè)、故障診斷,從而使過(guò)程得到優(yōu)化。因此,神經(jīng)網(wǎng)絡(luò)以其強(qiáng)大的函數(shù)映射能力, 已經(jīng)廣泛用于化工過(guò)程非線性系統(tǒng)建模領(lǐng)域。 它能夠通過(guò)輸入輸出數(shù)據(jù)對(duì)過(guò)程進(jìn)行有效地學(xué)習(xí),為化工過(guò)程的綜合發(fā)展提供了一種先進(jìn)的技術(shù)手段。

二、人工神經(jīng)網(wǎng)絡(luò)簡(jiǎn)介

人工神經(jīng)網(wǎng)絡(luò)(英文縮寫(xiě)為ANN)簡(jiǎn)稱(chēng)神經(jīng)網(wǎng)絡(luò),是在生物學(xué)和現(xiàn)代神經(jīng)科學(xué)研究的基礎(chǔ)上,對(duì)人類(lèi)大腦的結(jié)構(gòu)和功能進(jìn)行簡(jiǎn)化模仿而形成的新型信息處理系統(tǒng)[2,3]。由“神經(jīng)元”(neurons)或節(jié)點(diǎn)組成。至少含有輸入層、一個(gè)隱含層以及一個(gè)輸出層。輸入層—從外部接受信息并將此信息傳入人工神經(jīng)網(wǎng)絡(luò),以便進(jìn)行處理;隱含層—接收輸入層的信息,對(duì)所有信息進(jìn)行處理;輸出層—接收人工神經(jīng)網(wǎng)絡(luò)處理后的信息,將結(jié)果送到外部接受器。當(dāng)輸入層從外部收到信息時(shí),它將被激活,并將信號(hào)傳遞到它的近鄰這些近鄰從輸入層接收到激活信號(hào)后,依次將其輸出到它們的近鄰,所得到的結(jié)果在輸出層以激活模式表現(xiàn)。

神經(jīng)網(wǎng)絡(luò)可以看作是一種具有自組織、自學(xué)習(xí)能力的智能機(jī)器,它能模仿人的學(xué)習(xí)過(guò)程。比如,一個(gè)復(fù)雜化工裝置的操作工人,開(kāi)始學(xué)習(xí)操作時(shí),由于沒(méi)有經(jīng)驗(yàn),難以保證控制質(zhì)量。但經(jīng)過(guò)一段時(shí)間學(xué)習(xí)后,他就能逐步提高技能。神經(jīng)網(wǎng)絡(luò)正是模擬人類(lèi)學(xué)習(xí)過(guò)程,通過(guò)給網(wǎng)絡(luò)各種范例,把網(wǎng)絡(luò)的實(shí)際輸出與希望輸出比較,根據(jù)偏差修改節(jié)點(diǎn)間的連接權(quán),直到獲得滿意的輸出。人工神經(jīng)網(wǎng)絡(luò)研究工作可分成 3個(gè)大方向:(1)探求人腦神經(jīng)網(wǎng)絡(luò)的生物結(jié)構(gòu)和機(jī)制,這實(shí)際上是研究神經(jīng)網(wǎng)絡(luò)理論的初衷;(2)用微電子或光學(xué)器件形成有一定功能的網(wǎng)絡(luò),這主要是新一代計(jì)算機(jī)制造領(lǐng)域所關(guān)注的問(wèn)題;(3)將人工神經(jīng)網(wǎng)絡(luò)作為一種解決問(wèn)題的手段和方法,而這類(lèi)問(wèn)題用傳統(tǒng)方法無(wú)法解決或在具體處理技術(shù)上尚存在困難。

三、神經(jīng)網(wǎng)絡(luò)在化工中的應(yīng)用

1.故障診斷

當(dāng)系統(tǒng)的某個(gè)環(huán)節(jié)發(fā)生故障時(shí),若不及時(shí)處理,就可能引起故障擴(kuò)大并導(dǎo)致重大事故的發(fā)生。因此建立高效的、準(zhǔn)確的實(shí)時(shí)故障檢測(cè)和診斷系統(tǒng),消除故障隱患,及時(shí)排除故障,確保安全、平穩(wěn)、優(yōu)質(zhì)的生產(chǎn),已成為整個(gè)生產(chǎn)過(guò)程的關(guān)鍵所在。神經(jīng)網(wǎng)絡(luò)是模仿和延伸人腦智能、思維、意識(shí)等功能的非顯形自適應(yīng)動(dòng)力學(xué)系統(tǒng),其所具有的學(xué)習(xí)算法能使其對(duì)事物和環(huán)境具有很強(qiáng)的自學(xué)習(xí)、自適應(yīng)和自組織能力。神經(jīng)網(wǎng)絡(luò)用于故障診斷和校正不必建立嚴(yán)格的系統(tǒng)公式或其它數(shù)學(xué)模型,經(jīng)數(shù)據(jù)樣本訓(xùn)練后可準(zhǔn)確、有效地偵破和識(shí)別過(guò)失誤差,同時(shí)校正測(cè)量數(shù)據(jù)中的隨機(jī)誤差。與直接應(yīng)用非線性規(guī)劃的校正方法相比,神經(jīng)網(wǎng)絡(luò)的計(jì)算速度快,在化工過(guò)程的實(shí)時(shí)數(shù)據(jù)校正方面具有明顯的優(yōu)勢(shì)。目前應(yīng)用于故障診斷的網(wǎng)絡(luò)類(lèi)型主要有:BP網(wǎng)絡(luò)、RBF網(wǎng)絡(luò)、自適應(yīng)網(wǎng)絡(luò)等。

Rengaswamy[4]等人把神經(jīng)網(wǎng)絡(luò)用在化工過(guò)程的初始故障預(yù)測(cè)和診斷( FDD)中,提出一種神經(jīng)網(wǎng)絡(luò)構(gòu)架,利用速度訓(xùn)練在分類(lèi)設(shè)計(jì)中明確引入時(shí)間和過(guò)程模型映像的在線更新三個(gè)要素,來(lái)解決化工過(guò)程中的初始故障診斷問(wèn)題。國(guó)內(nèi)也有關(guān)于神經(jīng)網(wǎng)絡(luò)用于故障診斷的報(bào)道,黃道[5]等人以TE (Tenneaaee Eastman,Eastman化學(xué)公司開(kāi)發(fā)的過(guò)程模擬器,提供了一個(gè)實(shí)際工業(yè)過(guò)程的仿真平臺(tái),是一種國(guó)際上通用的標(biāo)準(zhǔn)仿真模型)模型為背景,根據(jù)模型的特點(diǎn)進(jìn)行了故障診斷。當(dāng)輸入變量接近訓(xùn)練過(guò)的樣本時(shí),診斷的成功率可達(dá)100%。另外,模糊神經(jīng)元網(wǎng)絡(luò)作為一種更接近人腦思維的網(wǎng)格,也是解決此類(lèi)問(wèn)題的一個(gè)發(fā)展方向。李宏光[6]等人就針對(duì)化工非線性過(guò)程建模問(wèn)題, 提出了由函數(shù)逼近和規(guī)則推理網(wǎng)絡(luò)構(gòu)成的模糊神經(jīng)網(wǎng)絡(luò),其規(guī)則網(wǎng)絡(luò)基于過(guò)程先驗(yàn)知識(shí)用于對(duì)操作區(qū)間的劃分,而函數(shù)網(wǎng)絡(luò)采用改進(jìn)型模糊神經(jīng)網(wǎng)絡(luò)結(jié)構(gòu)完成非線性函數(shù)逼近,并將該技術(shù)應(yīng)用于工業(yè)尿素 CO2汽提塔液位建模。

2.化工過(guò)程控制

隨著神經(jīng)網(wǎng)絡(luò)研究的不斷深入,其越來(lái)越多地應(yīng)用于控制領(lǐng)域的各個(gè)方面,從過(guò)程控制、機(jī)器人控制、生產(chǎn)制造、模式識(shí)別直到?jīng)Q策支持神經(jīng)網(wǎng)絡(luò)都有應(yīng)用。神經(jīng)網(wǎng)絡(luò)可以成功地建立流程和控制參數(shù)問(wèn)的非線性關(guān)系及構(gòu)造相關(guān)的數(shù)學(xué)模型,并可跟蹤瞬息過(guò)程及具有穩(wěn)健功能等,因此可有效地用于化工過(guò)程最優(yōu)化和控制。

1986年,Rumelhart第一次將ANN用于控制界。神經(jīng)元網(wǎng)絡(luò)用于控制有兩種方法,一種用來(lái)構(gòu)造模型,主要利用對(duì)象的先驗(yàn)信息,經(jīng)過(guò)誤差校正反饋,修正網(wǎng)絡(luò)權(quán)值,最終得到具有因果關(guān)系的函數(shù),實(shí)現(xiàn)狀態(tài)估計(jì),進(jìn)而推斷控制;另一種直接充當(dāng)控制器,就像PID控制器那樣進(jìn)行實(shí)時(shí)控制。神經(jīng)元網(wǎng)絡(luò)用于控制,不僅能處理精確知識(shí),也能處理模糊信息。Tsen[7]等利用混合神經(jīng)網(wǎng)絡(luò)實(shí)現(xiàn)對(duì)乙酸乙烯酯(VA)的乳液聚合過(guò)程的預(yù)測(cè)控制。原有的該間歇過(guò)程的復(fù)雜的機(jī)理模型可對(duì)單體轉(zhuǎn)化率做出較準(zhǔn)確的預(yù)測(cè),然而對(duì)產(chǎn)品性質(zhì)(如數(shù)均相對(duì)分子質(zhì)量及其分布)的預(yù)測(cè)不太可靠。所建的混合型神經(jīng)網(wǎng)絡(luò)模型用于實(shí)現(xiàn)過(guò)程的反饋預(yù)測(cè)控制。國(guó)內(nèi)對(duì)神經(jīng)網(wǎng)絡(luò)的實(shí)質(zhì)性研究相對(duì)較晚,譚民[8]在1990年提出了一種基于神經(jīng)網(wǎng)絡(luò)雙向聯(lián)想機(jī)制的控制系統(tǒng)故障診斷方法,并且作了仿真驗(yàn)證。清華大學(xué)自動(dòng)化系則開(kāi)發(fā)了一種基于時(shí)序神經(jīng)網(wǎng)絡(luò)的故障預(yù)報(bào)方法,利用工藝現(xiàn)場(chǎng)數(shù)據(jù)對(duì)大型氯堿廠的氯氣中含氫氣的問(wèn)題進(jìn)行了模擬預(yù)報(bào)實(shí)驗(yàn)。

3.藥物釋放預(yù)測(cè)

建立精確的緩釋微膠囊模型是找出最優(yōu)的工藝條件及掌握芯材釋放規(guī)律的重要一步。緩釋微膠囊的性能與影響因素之間足一種多輸入、多輸出、復(fù)雜的非線性關(guān)系。機(jī)理分析法和傳統(tǒng)的系統(tǒng)辨識(shí)法對(duì)輸入、多輸出問(wèn)題適應(yīng)性差,過(guò)分依賴(lài)研究領(lǐng)域的知識(shí)與經(jīng)驗(yàn),難以得到實(shí)用的緩釋微膠囊模型。人工神經(jīng)網(wǎng)絡(luò)能夠很好地解決傳統(tǒng)方法不能解決的具有高度非線性、耦合性、多變量性系統(tǒng)的建模問(wèn)題并具有獨(dú)特的優(yōu)勢(shì)。

趙武奇[9]等人建立了紅景天苷緩釋微囊的人工神經(jīng)網(wǎng)絡(luò)模型及其遺傳算法優(yōu)化技術(shù),用神經(jīng)網(wǎng)絡(luò)模型描述了微囊制作參數(shù)與性能之間的關(guān)系,并用遺傳算法優(yōu)化微囊制作工藝參數(shù),設(shè)計(jì)出性能最佳的微囊制作工藝參數(shù)。范彩霞[10]等人以難溶性藥物氟比洛芬為模型藥物,制備了17個(gè)處方并進(jìn)行釋放度檢查。氟比洛芬和轉(zhuǎn)速作為自變量,取其中l(wèi)4個(gè)處方為訓(xùn)練處方,其余3個(gè)處方為驗(yàn)證處方,將自變量作為人工神經(jīng)網(wǎng)絡(luò)的輸入,藥物在各個(gè)取樣時(shí)間點(diǎn)的釋放為輸出,采用剔除一點(diǎn)交叉驗(yàn)證法建立了人工神經(jīng)網(wǎng)絡(luò)模型。并通過(guò)線性回歸和相似因子法比較人工神經(jīng)網(wǎng)絡(luò)和基于二元二項(xiàng)式的響應(yīng)面法的預(yù)測(cè)能力,顯示了人工神經(jīng)網(wǎng)絡(luò)的預(yù)測(cè)值與實(shí)測(cè)值的接近程度。

4.物性估算

用神經(jīng)網(wǎng)絡(luò)來(lái)解決估算物質(zhì)的性質(zhì)必須解決三個(gè)基本問(wèn)題,第一個(gè)是對(duì)物質(zhì)的表征問(wèn)題;第二個(gè)是采用何種神經(jīng)網(wǎng)絡(luò)及其算法問(wèn)題;第三個(gè)是神經(jīng)網(wǎng)絡(luò)輸入與輸出數(shù)據(jù)的歸一化問(wèn)題。無(wú)論采用哪種方法對(duì)數(shù)據(jù)進(jìn)行處理,當(dāng)用經(jīng)過(guò)訓(xùn)練的神經(jīng)網(wǎng)絡(luò)進(jìn)行物性估計(jì)時(shí),不能將網(wǎng)絡(luò)直接的輸出值作為物性預(yù)估值,而是要將輸出值再乘上一個(gè)系數(shù),這個(gè)系數(shù)就是前面進(jìn)行歸一化處理時(shí)對(duì)數(shù)據(jù)的除數(shù),相乘后得到的值作為物性估算值。神經(jīng)網(wǎng)絡(luò)用于物性估算,目前采用的就是BP網(wǎng)絡(luò)或在此基礎(chǔ)上的各種改進(jìn)形式。常壓沸點(diǎn)進(jìn)行估算和研究。Prasad[11]等人利用神經(jīng)網(wǎng)絡(luò)對(duì)有機(jī)化合物的物理性質(zhì)進(jìn)行了預(yù)測(cè),并與傳統(tǒng)的基團(tuán)貢獻(xiàn)法比較,可以得到更為準(zhǔn)確的物性參數(shù)。而后,董新法、方利國(guó)[12]等人將神經(jīng)網(wǎng)絡(luò)在物性估算中的應(yīng)用作了一個(gè)全面而又簡(jiǎn)要的講解,并提出神經(jīng)網(wǎng)絡(luò)在物性估算中潛在的應(yīng)用前景,為其發(fā)展及其以后的應(yīng)用研究提供了很好的工作平臺(tái)。

目前,人工神經(jīng)網(wǎng)絡(luò)在各個(gè)領(lǐng)域中的應(yīng)用都在向人工智能方向發(fā)展。不斷豐富基礎(chǔ)理論和開(kāi)展應(yīng)用研究、完善其技術(shù)的可靠性、開(kāi)發(fā)智能性化工優(yōu)化專(zhuān)家系統(tǒng)軟件,對(duì)于我國(guó)的化工發(fā)展具有重要意義。此外,模糊理論、小波變換、統(tǒng)計(jì)學(xué)方法和分形技術(shù)等信息處理方法和理論與神經(jīng)網(wǎng)絡(luò)的結(jié)合解決化工類(lèi)問(wèn)題,被認(rèn)為是一種發(fā)展趨勢(shì)。

參考文獻(xiàn)

[1]高大文,王鵬,蔡臻超.人工神經(jīng)網(wǎng)絡(luò)中隱含層節(jié)點(diǎn)與訓(xùn)練次數(shù)的優(yōu)化[J].哈爾濱工業(yè)大學(xué)學(xué)報(bào), 2003, 35(2): 207-209.

[2]蘇碧瑤.人工神經(jīng)網(wǎng)絡(luò)的優(yōu)化方法[J]. 科技資訊, 2011(30): 239-240.

[3]黃忠明, 吳志紅, 劉全喜. 幾種用于非線性函數(shù)逼近的神經(jīng)網(wǎng)絡(luò)方法研究[J]. 兵工自動(dòng)化,2009, 28(10): 88-92.

[4]Rengaswamy R, Venkatasubramanian V. A fast training neural network and its updation for incipient fault detection and diagnosis[J].Computers and Chemical Engineering, 2000,(24): 431-437.

[5]黃道, 宋欣.神經(jīng)網(wǎng)絡(luò)在化工過(guò)程故障診斷中的應(yīng)用[J].控制工程,2006,(13): 6-9.

[6]李宏光,何謙.化工過(guò)程建模中的一類(lèi)復(fù)合型模糊神經(jīng)網(wǎng)絡(luò)[J]. 計(jì)算機(jī)與應(yīng)用化學(xué),2000,17(5): 399-402.

[7]Tsen A D, Shi S J, Wong D SH, etal. Predictive Control of Quality in Batch Polymerization Using a Hybrid Artificial Neural Network Model[J]. AIChE Journal,1996, 42(2): 455-465.

[8]譚民, 疏松桂. 基于神經(jīng)元網(wǎng)絡(luò)的控制系統(tǒng)故障診斷[J]. 控制與決策, 1990(1): 60-62.

[9]趙武奇, 殷涌光, 仇農(nóng)學(xué). 基于神經(jīng)網(wǎng)絡(luò)和遺傳算法的紅景天苷緩釋微囊制備過(guò)程建模與優(yōu)化[J]. 西北農(nóng)林科技大學(xué)學(xué)報(bào)(自然科學(xué)版), 2006,34(11): 106-110.

[10] 范彩霞, 梁文權(quán), 陳志喜. 人工神經(jīng)網(wǎng)絡(luò)預(yù)測(cè)氟比洛芬HPMC緩釋片的藥物釋放[J]. 中國(guó)醫(yī)藥工業(yè)雜志, 2006, 37(10): 685-688.

篇(3)

經(jīng)訓(xùn)練的ANN適用于利用分析振動(dòng)數(shù)據(jù)對(duì)機(jī)器進(jìn)行監(jiān)控和故障檢測(cè),預(yù)測(cè)某些部件的疲勞壽命[2]。非線形神經(jīng)網(wǎng)絡(luò)補(bǔ)償和魯棒控制綜合方法的應(yīng)用(其魯棒控制利用了變結(jié)構(gòu)控制或滑動(dòng)模控制),在實(shí)時(shí)工業(yè)控制執(zhí)行程序中較為有效[3]。人工神經(jīng)網(wǎng)絡(luò)(ANN)和模糊邏輯(FuzzyLogic)的綜合,實(shí)現(xiàn)了電動(dòng)機(jī)故障檢測(cè)的啟發(fā)式推理。對(duì)非線形問(wèn)題,可通過(guò)ANN的BP算法學(xué)習(xí)正常運(yùn)行例子調(diào)整內(nèi)部權(quán)值來(lái)準(zhǔn)確求解[4]。

因此,對(duì)于電力系統(tǒng)這個(gè)存在著大量非線性的復(fù)雜大系統(tǒng)來(lái)講,ANN理論在電力系統(tǒng)中的應(yīng)用具有很大的潛力,目前已涉及到如暫態(tài),動(dòng)穩(wěn)分析,負(fù)荷預(yù)報(bào),機(jī)組最優(yōu)組合,警報(bào)處理與故障診斷,配電網(wǎng)線損計(jì)算,發(fā)電規(guī)劃,經(jīng)濟(jì)運(yùn)行及電力系統(tǒng)控制等方面[5]。

本文介紹了一種基于人工神經(jīng)網(wǎng)絡(luò)(ANN)理論的保護(hù)原理。

1、人工神經(jīng)網(wǎng)絡(luò)理論概述

BP算法是一種監(jiān)控學(xué)習(xí)技巧,它通過(guò)比較輸出單元的真實(shí)輸出和希望值之間的差別,調(diào)整網(wǎng)絡(luò)路徑的權(quán)值,以使下一次在相同的輸入下,網(wǎng)絡(luò)的輸出接近于希望值。

在神經(jīng)網(wǎng)絡(luò)投運(yùn)前,就應(yīng)用大量的數(shù)據(jù),包括正常運(yùn)行的、不正常運(yùn)行的,作為其訓(xùn)練內(nèi)容,以一定的輸入和期望的輸出通過(guò)BP算法去不斷修改網(wǎng)絡(luò)的權(quán)值。在投運(yùn)后,還可根據(jù)現(xiàn)場(chǎng)的特定情況進(jìn)行現(xiàn)場(chǎng)學(xué)習(xí),以擴(kuò)充ANN內(nèi)存知識(shí)量。從算法原理看,并行處理能力和非線是BP算法的一大優(yōu)點(diǎn)。

2、神經(jīng)網(wǎng)絡(luò)型繼電保護(hù)

神經(jīng)網(wǎng)絡(luò)理論的保護(hù)裝置,可判別更復(fù)雜的模式,其因果關(guān)系是更復(fù)雜的、非線性的、模糊的、動(dòng)態(tài)的和非平穩(wěn)隨機(jī)的。它是神經(jīng)網(wǎng)絡(luò)(ANN)與專(zhuān)家系統(tǒng)(ES)融為一體的神經(jīng)網(wǎng)絡(luò)專(zhuān)家系統(tǒng),其中,ANN是數(shù)值的、聯(lián)想的、自組織的、仿生的方式,ES是認(rèn)知的和啟發(fā)式的。

文獻(xiàn)[1]認(rèn)為全波數(shù)據(jù)窗建立的神經(jīng)網(wǎng)絡(luò)在準(zhǔn)確性方面優(yōu)于利用半波數(shù)據(jù)窗建立的神經(jīng)網(wǎng)絡(luò),因此保護(hù)應(yīng)選用全波數(shù)據(jù)窗。

ANN保護(hù)裝置出廠后,還可以在投運(yùn)單位如網(wǎng)調(diào)、省調(diào)實(shí)驗(yàn)室內(nèi)進(jìn)行學(xué)習(xí),學(xué)習(xí)內(nèi)容針對(duì)該省的保護(hù)的特別要求進(jìn)行(如反措)。到現(xiàn)場(chǎng),還可根據(jù)該站的干擾情況進(jìn)行反誤動(dòng)、反拒動(dòng)學(xué)習(xí),特別是一些常出現(xiàn)波形間斷的變電站內(nèi)的高頻保護(hù)。

3、結(jié)論

本文基于現(xiàn)代控制技術(shù)提出了人工神經(jīng)網(wǎng)絡(luò)理論的保護(hù)構(gòu)想。神經(jīng)網(wǎng)絡(luò)軟件的反應(yīng)速度比純數(shù)字計(jì)算軟件快幾十倍以上,這樣,在相同的動(dòng)作時(shí)間下,可以大大提高保護(hù)運(yùn)算次數(shù),以實(shí)現(xiàn)在時(shí)間上即次數(shù)上提高冗余度。

一套完整的ANN保護(hù)是需要有很多輸入量的,如果對(duì)某套保護(hù)來(lái)說(shuō),區(qū)內(nèi)、區(qū)外故障時(shí)其輸入信號(hào)幾乎相同,則很難以此作為訓(xùn)練樣本訓(xùn)練保護(hù),而每套保護(hù)都增多輸入量,必然會(huì)使保護(hù)、二次接線復(fù)雜化。變電站綜合自動(dòng)化也許是解決該問(wèn)題的一個(gè)較好方法,各套保護(hù)通過(guò)總線聯(lián)網(wǎng),交換信息,充分利用ANN的并行處理功能,每套保護(hù)均對(duì)其它線路信息進(jìn)行加工,以此綜合得出動(dòng)作判據(jù)。每套保護(hù)可把每次錄得的數(shù)據(jù)文件,加上對(duì)其動(dòng)作正確性與否的判斷,作為本身的訓(xùn)練內(nèi)容,因?yàn)榧词褂袝r(shí)人工分析也不能區(qū)分哪些數(shù)據(jù)特征能使保護(hù)不正確動(dòng)作,特別是高頻模擬量。

神經(jīng)網(wǎng)絡(luò)的硬件芯片現(xiàn)在仍很昂貴,但技術(shù)成熟時(shí),應(yīng)利用硬件實(shí)現(xiàn)現(xiàn)在的軟件功能。另外,神經(jīng)網(wǎng)絡(luò)的并行處理和信息分布存儲(chǔ)機(jī)制還不十分清楚,如何選擇的網(wǎng)絡(luò)結(jié)構(gòu)還沒(méi)有充分的理論依據(jù)。所有這些都有待于對(duì)神經(jīng)網(wǎng)絡(luò)基本理論進(jìn)行深入的研究,以形成完善的理論體系,創(chuàng)造出更適合于實(shí)際應(yīng)用的新型網(wǎng)絡(luò)及學(xué)習(xí)算法[5]。

參考文獻(xiàn)

1、陳炳華。采用模式識(shí)別(智能型)的保護(hù)裝置的設(shè)想。中國(guó)電機(jī)工程學(xué)會(huì)第五屆全國(guó)繼電保護(hù)學(xué)術(shù)會(huì)議,[會(huì)址不詳],1993

2、RobertE.Uhrig.ApplicationofArtificialNeuralNetworksinIndustrialTechnology.IEEETrans,1994,10(3)。(1):371~377

篇(4)

中圖分類(lèi)號(hào):TP183 文獻(xiàn)標(biāo)識(shí)碼:A 文章編號(hào):1671-7597(2014)12-0003-01

隨著科學(xué)技術(shù)的發(fā)展,各個(gè)行業(yè)和領(lǐng)域都在進(jìn)行人工智能化的研究工作,已經(jīng)成為專(zhuān)家學(xué)者研究的熱點(diǎn)。人工神經(jīng)網(wǎng)絡(luò)就是在人工智能基礎(chǔ)上發(fā)展而來(lái)的重要分支,對(duì)人工智能的發(fā)展具有重要的促進(jìn)作用。人工神經(jīng)網(wǎng)絡(luò)從形成之初發(fā)展至今,經(jīng)歷了不同的發(fā)展階段,并且在經(jīng)濟(jì)、生物、醫(yī)學(xué)等領(lǐng)域得到了廣泛的應(yīng)用,解決了許多技術(shù)上的難題。

1人工神經(jīng)網(wǎng)絡(luò)概述

關(guān)于人工神經(jīng)網(wǎng)絡(luò),到目前為止還沒(méi)有一個(gè)得到廣泛認(rèn)可的統(tǒng)一定義,綜合各專(zhuān)家學(xué)者的觀點(diǎn)可以將人工神經(jīng)網(wǎng)絡(luò)簡(jiǎn)單的概括為是模仿人腦的結(jié)構(gòu)和功能的計(jì)算機(jī)信息處理系統(tǒng)[1]。人工神經(jīng)網(wǎng)絡(luò)具有自身的發(fā)展特性,其具有很強(qiáng)的并行結(jié)構(gòu)以及并行處理的能力,在實(shí)時(shí)和動(dòng)態(tài)控制時(shí)能夠起到很好的作用;人工神經(jīng)網(wǎng)絡(luò)具有非線性映射的特性,對(duì)處理非線性控制的問(wèn)題時(shí)能給予一定的幫助;人工神經(jīng)網(wǎng)絡(luò)可以通過(guò)訓(xùn)練掌握數(shù)據(jù)歸納和處理的能力,因此在數(shù)學(xué)模型等難以處理時(shí)對(duì)問(wèn)題進(jìn)行解決;人工神經(jīng)網(wǎng)絡(luò)的適應(yīng)性和集成性很強(qiáng),能夠適應(yīng)不同規(guī)模的信息處理和大規(guī)模集成數(shù)據(jù)的處理與控制;人工神經(jīng)網(wǎng)絡(luò)不但在軟件技術(shù)上比較成熟,而且近年來(lái)在硬件方面也得到了較大發(fā)展,提高了人工神經(jīng)網(wǎng)絡(luò)系統(tǒng)的信息處理能力。

2人工神經(jīng)網(wǎng)絡(luò)的發(fā)展歷程

2.1 萌芽時(shí)期

在20世紀(jì)40年代,生物學(xué)家McCulloch與數(shù)學(xué)家Pitts共同發(fā)表文章,第一次提出了關(guān)于神經(jīng)元的模型M-P模型,這一理論的提出為神經(jīng)網(wǎng)絡(luò)模型的研究和開(kāi)發(fā)奠定了基礎(chǔ),在此基礎(chǔ)上人工神經(jīng)網(wǎng)絡(luò)研究逐漸展開(kāi)。1951年,心理學(xué)家Hebb提出了關(guān)于連接權(quán)數(shù)值強(qiáng)化的法則,為神經(jīng)網(wǎng)絡(luò)的學(xué)習(xí)功能開(kāi)發(fā)進(jìn)行了鋪墊。之后生物學(xué)家Eccles通過(guò)實(shí)驗(yàn)證實(shí)了突觸的真實(shí)分流,為神經(jīng)網(wǎng)絡(luò)研究突觸的模擬功能提供了真實(shí)的模型基礎(chǔ)以及生物學(xué)的依據(jù)[2]。隨后,出現(xiàn)了能夠模擬行為以及條件反射的處理機(jī)和自適應(yīng)線性網(wǎng)絡(luò)模型,提高了人工神經(jīng)網(wǎng)絡(luò)的速度和精準(zhǔn)度。這一系列研究成果的出現(xiàn)為人工神經(jīng)網(wǎng)絡(luò)的形成和發(fā)展提供了可能。

2.2 低谷時(shí)期

在人工神經(jīng)網(wǎng)絡(luò)形成的初期,人們只是熱衷于對(duì)它的研究,卻對(duì)其自身的局限進(jìn)行了忽視。Minskyh和Papert通過(guò)多年對(duì)神經(jīng)網(wǎng)絡(luò)的研究,在1969年對(duì)之前所取得的研究成果提出了質(zhì)疑,認(rèn)為當(dāng)前研究出的神經(jīng)網(wǎng)絡(luò)只合適處理比較簡(jiǎn)單的線性問(wèn)題,對(duì)于非線性問(wèn)題以及多層網(wǎng)絡(luò)問(wèn)題卻無(wú)法解決。由于他們的質(zhì)疑,使神經(jīng)網(wǎng)絡(luò)的發(fā)展進(jìn)入了低谷時(shí)期,但是在這一時(shí)期,專(zhuān)家和學(xué)者也并沒(méi)有停止對(duì)神經(jīng)網(wǎng)絡(luò)的研究,針對(duì)他們的質(zhì)疑也得出一些相應(yīng)的研究成果。

2.3 復(fù)興時(shí)期

美國(guó)的物理學(xué)家Hopfield在1982年提出了新的神經(jīng)網(wǎng)絡(luò)模型,并通過(guò)實(shí)驗(yàn)證明在滿足一定的條件時(shí),神經(jīng)網(wǎng)絡(luò)是能夠達(dá)到穩(wěn)定的狀態(tài)的。通過(guò)他的研究和帶動(dòng),眾多專(zhuān)家學(xué)者又重新開(kāi)始了對(duì)人工神經(jīng)網(wǎng)絡(luò)方面的研究,推動(dòng)了神經(jīng)網(wǎng)絡(luò)的再一次發(fā)展[3]。經(jīng)過(guò)專(zhuān)家學(xué)者的不斷努力,提出了各種不同的人工神經(jīng)網(wǎng)絡(luò)的模型,神經(jīng)網(wǎng)絡(luò)理論研究不斷深化,新的理論和方法層出不窮,使神經(jīng)網(wǎng)絡(luò)的研究和應(yīng)用進(jìn)入了一個(gè)嶄新的時(shí)期。

2.4 穩(wěn)步發(fā)展時(shí)期

隨著人工神經(jīng)網(wǎng)絡(luò)研究在世界范圍內(nèi)的再次興起,我國(guó)也迎來(lái)了相關(guān)理論研究的熱潮,在人工神經(jīng)網(wǎng)絡(luò)和計(jì)算機(jī)技術(shù)方面取得了突破性的進(jìn)展。到20世紀(jì)90年代時(shí),國(guó)內(nèi)對(duì)于神經(jīng)網(wǎng)絡(luò)領(lǐng)域的研究得到了進(jìn)一步的完善和發(fā)展,而且能夠利用神經(jīng)網(wǎng)絡(luò)對(duì)非線性的系統(tǒng)控制問(wèn)題進(jìn)行解決,研究成果顯著。隨著各類(lèi)人工神經(jīng)網(wǎng)絡(luò)的相關(guān)刊物的創(chuàng)建和相關(guān)學(xué)術(shù)會(huì)議的召開(kāi),我國(guó)人工神經(jīng)網(wǎng)絡(luò)的研究和應(yīng)用條件逐步改善,得到了國(guó)際的關(guān)注。

隨著人工神經(jīng)網(wǎng)絡(luò)的穩(wěn)步發(fā)展,逐漸建立了光學(xué)神經(jīng)網(wǎng)絡(luò)系統(tǒng),利用光學(xué)的強(qiáng)大功能,提高了人工神經(jīng)網(wǎng)絡(luò)的學(xué)習(xí)能力和自適應(yīng)能力。對(duì)非線性動(dòng)態(tài)系統(tǒng)的控制問(wèn)題,采取有效措施,提高超平面的光滑性,對(duì)其精度進(jìn)行改進(jìn)。之后有專(zhuān)家提出了關(guān)于人工神經(jīng)網(wǎng)絡(luò)的抽取算法,雖然保證了精度,但也加大了消耗,在一定程度上降低了神經(jīng)網(wǎng)絡(luò)的效率,因此在此基礎(chǔ)上又提出了改進(jìn)算法FERNN。混沌神經(jīng)網(wǎng)絡(luò)的發(fā)展也得到了相應(yīng)的進(jìn)步,提高了神經(jīng)網(wǎng)絡(luò)的泛化能力。

3人工神經(jīng)網(wǎng)絡(luò)的應(yīng)用

3.1 在信息領(lǐng)域中的應(yīng)用

人工神經(jīng)網(wǎng)絡(luò)在信息領(lǐng)域中的應(yīng)用主要體現(xiàn)在信息處理和模式識(shí)別兩個(gè)方面。由于科技的發(fā)展,當(dāng)代信息處理工作越來(lái)越復(fù)雜,利用人工神經(jīng)網(wǎng)絡(luò)系統(tǒng)可以對(duì)人的思維進(jìn)行模仿甚至是替代,面對(duì)問(wèn)題自動(dòng)診斷和解決,能夠輕松解決許多傳統(tǒng)方法無(wú)法解決的問(wèn)題,在軍事信息處理中的應(yīng)用極為廣泛[4]。模式識(shí)別是對(duì)事物表象的各種信息進(jìn)行整理和分析,對(duì)事物進(jìn)行辨別和解釋的一個(gè)過(guò)程,這樣對(duì)信息進(jìn)行處理的過(guò)程與人類(lèi)大腦的思維方式很相像。模式識(shí)別的方法可以分為兩種,一種是統(tǒng)計(jì)模式識(shí)別,還有一種是結(jié)構(gòu)模式識(shí)別,在語(yǔ)音識(shí)別和指紋識(shí)別等方面得到了廣泛的應(yīng)用。

3.2 在醫(yī)學(xué)領(lǐng)域的應(yīng)用

人工神經(jīng)網(wǎng)絡(luò)對(duì)于非線性問(wèn)題處理十分有效,而人體的構(gòu)成和疾病形成的原因十分復(fù)雜,具有不可預(yù)測(cè)性,在生物信號(hào)的表現(xiàn)形式和變化規(guī)律上也很難掌握,信息檢測(cè)和分析等諸多方面都存在著復(fù)雜的非線性聯(lián)系,所以應(yīng)用人工神經(jīng)網(wǎng)絡(luò)決解這些非線性問(wèn)題具有特殊意義[5]。目前,在醫(yī)學(xué)領(lǐng)域中的應(yīng)用涉及到理論和臨床的各個(gè)方面,最主要的是生物信號(hào)的檢測(cè)和自動(dòng)分析以及專(zhuān)家系統(tǒng)等方面的應(yīng)用。

3.3 在經(jīng)濟(jì)領(lǐng)域中的應(yīng)用

經(jīng)濟(jì)領(lǐng)域中的商品價(jià)格、供需關(guān)系、風(fēng)險(xiǎn)系數(shù)等方面的信息構(gòu)成也十分復(fù)雜且變幻莫測(cè),人工神經(jīng)網(wǎng)絡(luò)可以對(duì)不完整的信息以及模糊不確定的信息進(jìn)行簡(jiǎn)單明了的處理,與傳統(tǒng)的經(jīng)濟(jì)統(tǒng)計(jì)方法相比具有其無(wú)法比擬的優(yōu)勢(shì),數(shù)據(jù)分析的穩(wěn)定性和可靠性更強(qiáng)。

3.4 在其他領(lǐng)域的應(yīng)用

人工神經(jīng)網(wǎng)絡(luò)在控制領(lǐng)域、交通領(lǐng)域、心理學(xué)領(lǐng)域等方面都有很廣泛的應(yīng)用,能夠?qū)Ω唠y度的非線性問(wèn)題進(jìn)行處理,對(duì)交通運(yùn)輸方面進(jìn)行集成式的管理,以其高適應(yīng)性和優(yōu)秀的模擬性能解決了許多傳統(tǒng)方法無(wú)法解決的問(wèn)題,促進(jìn)了各個(gè)領(lǐng)域的快速發(fā)展。

4總結(jié)

隨著科技的發(fā)展,人工智能系統(tǒng)將進(jìn)入更加高級(jí)的發(fā)展階段,人工神經(jīng)網(wǎng)絡(luò)也將得到更快的發(fā)展和更加廣泛的應(yīng)用。人工神經(jīng)網(wǎng)絡(luò)也許無(wú)法完全對(duì)人腦進(jìn)行取代,但是其特有的非線性信息處理能力解決了許多人工無(wú)法解決的問(wèn)題,在智能系統(tǒng)的各個(gè)領(lǐng)域中得到成功應(yīng)用,今后的發(fā)展趨勢(shì)將向著更加智能和集成的方向發(fā)展。

參考文獻(xiàn)

[1]徐用懋,馮恩波.人工神經(jīng)網(wǎng)絡(luò)的發(fā)展及其在控制中的應(yīng)用[J].化工進(jìn)展,1993(5):8-12,20.

[2]湯素麗,羅宇鋒.人工神經(jīng)網(wǎng)絡(luò)技術(shù)的發(fā)展與應(yīng)用[J].電腦開(kāi)發(fā)與應(yīng)用,2009(10):59-61.

篇(5)

引言

林分材種出材率是林分調(diào)查工作的重要指標(biāo),它可以進(jìn)一步評(píng)價(jià)森林木材資源的經(jīng)濟(jì)價(jià)值,而研究森林木材,又可以合理正確的經(jīng)營(yíng)森林資源,達(dá)到人與自然和諧相處的目的。林分林種出材率就是原木材積于立木材積之比,我國(guó)現(xiàn)行的森林采伐限額制度、查處亂砍濫伐林木案件、制訂林業(yè)發(fā)展規(guī)劃、計(jì)劃和編制森林經(jīng)營(yíng)方案、預(yù)測(cè)和計(jì)算、開(kāi)展森林資源資產(chǎn)評(píng)估等等,都需掌握積蓄量和材種的出材率的指標(biāo)。我國(guó)已經(jīng)不斷學(xué)習(xí)借鑒前蘇聯(lián)的先進(jìn)技術(shù)編制自己的材種出材率表了,隨著我國(guó)天然林保護(hù)工程的全面實(shí)施和林業(yè)分類(lèi)經(jīng)營(yíng)的逐步推行,人工商品林比例的不斷提高,我國(guó)森林結(jié)構(gòu)和性質(zhì)也有所變化,所以傳統(tǒng)的統(tǒng)計(jì)學(xué)以難以解決很多問(wèn)題,運(yùn)用人工神經(jīng)網(wǎng)絡(luò)在林業(yè)生成與運(yùn)用則是一個(gè)不二之選的方法,對(duì)林業(yè)的發(fā)展也有很大的理論價(jià)值和推廣意義。

人工神經(jīng)網(wǎng)絡(luò)(Artificial Neural Network-ANN),簡(jiǎn)稱(chēng)“神經(jīng)網(wǎng)絡(luò)”,是由大量處理單元過(guò)極其豐富和完善的互聯(lián)組成的非線性、自適應(yīng)信息處理系統(tǒng)。它的提出是基于現(xiàn)代神經(jīng)科學(xué)研究成果上,以模擬大腦神經(jīng)網(wǎng)絡(luò)處理、記憶信息的方式進(jìn)行信息處理。涉及學(xué)科較多,較為廣泛。

1 研究?jī)?nèi)容和方法

平均樹(shù)高,平均胸徑,林種年齡,立地質(zhì)量,積蓄量,保留密度等等因素都會(huì)影響林分材種出材率,而林分林種出材率具有非線性和非確定性的因素,一般采用統(tǒng)計(jì)分析方法進(jìn)行預(yù)測(cè)采樣,需要大量的林木樣本元素,模型涉及的許多參數(shù)無(wú)法或很難有較高的精確度。

人工神經(jīng)網(wǎng)絡(luò)(Artificial Neural Network)具有非線性,非局限性,自適應(yīng),自組織,自學(xué)習(xí)的特征,相較于傳統(tǒng)的統(tǒng)計(jì)學(xué)方法,不同之處在于它的容錯(cuò)性和儲(chǔ)存量,通過(guò)單元之間的相互作用,相互連接能模擬大腦的局限性。ANN的獨(dú)到之處,也使得人們注意了ANN,并且廣泛的應(yīng)用于各種學(xué)科之中,如心理學(xué),邏輯學(xué),數(shù)學(xué)模型,遺傳算法,語(yǔ)音識(shí)別,智能控制等等。當(dāng)然,運(yùn)用人工神經(jīng)網(wǎng)絡(luò)對(duì)林分林種出材率進(jìn)行預(yù)測(cè)也同樣具有很好的效果與實(shí)現(xiàn)。

研究主要完成,通過(guò)對(duì)數(shù)據(jù)的采樣和分析處理,對(duì)神經(jīng)網(wǎng)路預(yù)測(cè)模型的結(jié)構(gòu),參數(shù)進(jìn)行優(yōu)化,再應(yīng)用到林分材種出材率的預(yù)測(cè)中。以c++程序設(shè)計(jì)為設(shè)計(jì)平臺(tái),運(yùn)用人工神經(jīng)網(wǎng)絡(luò)中的BP算法,分析各隱含層神經(jīng)元的數(shù)量,訓(xùn)練的次數(shù),隱含層函數(shù),樣本數(shù)量,進(jìn)行優(yōu)化建立林分材種出材率的預(yù)測(cè)模型。

1.1BP人工神經(jīng)網(wǎng)絡(luò)

BP(Back-Propagation Network)神經(jīng)網(wǎng)絡(luò)是一種以誤差逆?zhèn)鞑ニ惴?BP)訓(xùn)練的多層前饋網(wǎng)絡(luò),目前應(yīng)用較為廣泛的神經(jīng)網(wǎng)絡(luò)模型之一。BP神經(jīng)網(wǎng)絡(luò)能學(xué)習(xí)和存貯多個(gè)輸入-輸出模式映射關(guān)系,而且無(wú)需事前對(duì)這種映射關(guān)系的數(shù)學(xué)方程進(jìn)行描述。它通過(guò)不斷反向傳播來(lái)調(diào)整神經(jīng)網(wǎng)絡(luò)的權(quán)值和閾值,使神經(jīng)網(wǎng)絡(luò)的誤差平方和最小。BP神經(jīng)網(wǎng)絡(luò)模型拓?fù)浣Y(jié)構(gòu)由三層組成分別是輸入層(input)、隱層(hidelaver)和輸出層(output layer)。

BP人工神經(jīng)網(wǎng)絡(luò)主要以標(biāo)準(zhǔn)BP算法為主,而標(biāo)準(zhǔn)BP算法有存在許多問(wèn)題,由于是非線性梯度優(yōu)化算法,就會(huì)存在局部極小值問(wèn)題,使得精確度受限;算法迭代系數(shù)過(guò)多,使得學(xué)習(xí)率降低,收斂速度降低;網(wǎng)絡(luò)對(duì)初始化的值存在發(fā)散和麻痹;隱節(jié)點(diǎn)不確定性的選取。所以引進(jìn)了幾種BP算法:動(dòng)量BP算法、學(xué)習(xí)速率可變的BP算法和LM算法(Levenberg-Marquardt)。動(dòng)量BP算法以上一次修正結(jié)果來(lái)影響本次的修正,動(dòng)量因子越大,梯度的動(dòng)量就越大。學(xué)習(xí)效率可變的BP算法怎是力求算法的穩(wěn)定,減小誤差。為了在近似二階訓(xùn)練速率進(jìn)行修正時(shí)避免計(jì)算HeSSian矩陣,選擇LM算法。所以為了神經(jīng)網(wǎng)絡(luò)計(jì)算的速度與精確度,所以運(yùn)用不同的優(yōu)化算法來(lái)改善BP網(wǎng)絡(luò)中的局部極小值問(wèn)題,提高收斂速度和避免了抖動(dòng)性。

2 基于BP人工神經(jīng)網(wǎng)絡(luò)和林分材種出材率預(yù)測(cè)模型的建立

分析了大量的材種出材率的相關(guān)資料后,均有非線性的特征,對(duì)于模型的建立和預(yù)測(cè),傳統(tǒng)的識(shí)別系統(tǒng)在研究和實(shí)踐中有很大的問(wèn)題,而采用人工神經(jīng)網(wǎng)絡(luò),不僅其特征是非線性,而且人工神經(jīng)網(wǎng)絡(luò)具有較為穩(wěn)定的優(yōu)越性,所以,對(duì)于林分材種出材率的預(yù)測(cè)和建立采用BP人工神經(jīng)網(wǎng)絡(luò)。

2.1建模工具

研究采用c++程序設(shè)計(jì)對(duì)數(shù)值的計(jì)算和預(yù)測(cè),對(duì)模型進(jìn)行編譯和實(shí)現(xiàn)。c++語(yǔ)言是受到非常廣泛應(yīng)用的計(jì)算機(jī)編程語(yǔ)言,它支持過(guò)程化程序設(shè)計(jì),面向?qū)ο蟪绦蛟O(shè)計(jì)等等程序設(shè)計(jì)風(fēng)格。c++是一門(mén)獨(dú)立的語(yǔ)言,在學(xué)習(xí)時(shí),可以結(jié)合c語(yǔ)言的知識(shí)來(lái)學(xué)習(xí),而c++又不依賴(lài)于c語(yǔ)言,所以我們可以不學(xué)c語(yǔ)言而直接學(xué)習(xí)C++。

用c++來(lái)模擬BP網(wǎng)絡(luò)是相對(duì)較好的程序設(shè)計(jì)語(yǔ)言,以面向?qū)ο蟪绦蛟O(shè)計(jì)來(lái)設(shè)計(jì)和實(shí)現(xiàn)林分材種出材率的BP算法,直觀而簡(jiǎn)潔。

2.2BP神經(jīng)網(wǎng)絡(luò)結(jié)構(gòu)的確定

對(duì)于使用BP算法,關(guān)鍵在于隱含層層數(shù)和各層節(jié)點(diǎn)數(shù)。而神經(jīng)元的輸入輸出又影響著隱含層層數(shù),而對(duì)于BP萬(wàn)羅中的輸入輸出層是確定的,重點(diǎn)就在于隱含層層數(shù),增加隱含層數(shù)可以提高網(wǎng)絡(luò)的處理能力,是的訓(xùn)練復(fù)雜化,樣本數(shù)目增加,收斂速度變慢等,而隱含層的節(jié)點(diǎn)數(shù)越多,可以提到其精確度。

研究過(guò)程中,多層隱含層會(huì)將訓(xùn)練復(fù)雜化,所以我們往往選擇三層就夠了,即一個(gè)輸入層,一個(gè)隱含層,一個(gè)輸出層的基本單層BP網(wǎng)絡(luò)結(jié)構(gòu)。最后確定以下四個(gè)神經(jīng)元:平均樹(shù)高、平均胸徑、林種年齡、每公頃積蓄量作為輸入單元。輸出單元為林分材種出材率。

結(jié)論

篇(6)

1.圍巖分類(lèi)的判定依據(jù)

水工隧洞圍巖工程地質(zhì)分類(lèi)應(yīng)以控制圍巖穩(wěn)定的巖石強(qiáng)度、巖體完整程度、張開(kāi)度、地下水力狀態(tài)和主要結(jié)構(gòu)面產(chǎn)狀等五項(xiàng)因素綜合評(píng)分為依據(jù),圍巖強(qiáng)度應(yīng)力比為限定依據(jù),見(jiàn)表1。

表1圍巖工程地質(zhì)分類(lèi)依據(jù)

指標(biāo)名稱(chēng)評(píng)價(jià)因素

巖石強(qiáng)度(A1)采用巖塊的單軸抗壓強(qiáng)度(MPa)

巖體完整程度(A2)采用完整性系數(shù)Kv

張開(kāi)度(A3)考慮結(jié)構(gòu)面的連續(xù)性、粗糙度和充填物

地下水狀態(tài)(A4)考慮地下水的發(fā)育程度,用單位洞長(zhǎng)單位時(shí)間的涌水量

主要結(jié)構(gòu)面產(chǎn)狀(A5)采用結(jié)構(gòu)面走向與洞軸線的夾角

以上五個(gè)因素是控制圍巖穩(wěn)定性的主要因素,圍巖的分類(lèi)標(biāo)準(zhǔn)見(jiàn)表2。

表2圍巖工程地質(zhì)分類(lèi)標(biāo)準(zhǔn)

評(píng)價(jià)因素圍巖類(lèi)別

Ⅰ(穩(wěn)定)Ⅱ(基本穩(wěn)定)Ⅲ(局部穩(wěn)定性差)Ⅳ(不穩(wěn)定)Ⅴ(極不穩(wěn)定)

A1(MPa)>200100~20050~10025~50<25

A20.9~1.00.75~0.90.5~0.750.25~0.5<0.25

A3(mm)<0.50.5~11~33~5>5

A4(L/min·10m)<2525~5050~100100~125>125

A5(o)90~7575~6060~4545~30<30

2.水工隧洞圍巖分類(lèi)的人工神經(jīng)網(wǎng)絡(luò)模型

神經(jīng)網(wǎng)絡(luò)系統(tǒng)是由大量的、簡(jiǎn)單的處理單元廣泛的互相連接而形成的復(fù)雜的網(wǎng)絡(luò)系統(tǒng)。人工神經(jīng)網(wǎng)絡(luò)模型最基本的有兩大類(lèi):一類(lèi)是以Hopfield網(wǎng)絡(luò)模型為代表的反饋型模型,它具有非線性和動(dòng)態(tài)性;另一類(lèi)是以多層感知器為基礎(chǔ)的前饋模型。其中BP(BackPropagation)網(wǎng)絡(luò)是目前應(yīng)用最廣泛的多層前饋神經(jīng)網(wǎng)絡(luò)模型。本文采用BP網(wǎng)絡(luò)模型。

2.1BP神經(jīng)網(wǎng)絡(luò)模型及其算法

BP神經(jīng)網(wǎng)絡(luò)由輸入層、隱含層和輸出層三層感知器組成,每層由若干個(gè)神經(jīng)元組成。輸入層接受信息,傳入到隱含層,經(jīng)過(guò)作用函數(shù)后,再把隱結(jié)點(diǎn)的輸出信號(hào)傳到輸出層輸出結(jié)果。節(jié)點(diǎn)的作用函數(shù)選用Sigmoid函數(shù),即:

(1)

BP神經(jīng)網(wǎng)絡(luò)采用誤差逆?zhèn)鞑シ磳W(xué)習(xí)算法。學(xué)習(xí)過(guò)程由正向傳播和反向傳播組成。在正向傳播過(guò)程中,輸入信號(hào)由輸入層經(jīng)隱含層處理后傳向輸出層,每一層神經(jīng)元的狀態(tài)只影響下一層神經(jīng)元的狀態(tài)。如果在輸出層得不到一個(gè)期望的輸出,則轉(zhuǎn)向反傳播,將輸出信號(hào)的誤差按原來(lái)的連接通路返回,通過(guò)修改各層神經(jīng)元的權(quán)值,使得誤差信號(hào)最小,得到合適的網(wǎng)絡(luò)連接權(quán)后,便可對(duì)新的樣本進(jìn)行識(shí)別。BP網(wǎng)絡(luò)學(xué)習(xí)過(guò)程具體步驟如下:

(1)初始化,設(shè)置網(wǎng)絡(luò)結(jié)構(gòu),賦初始權(quán)值;

(2)為網(wǎng)絡(luò)提供一組學(xué)習(xí)樣本,包括M個(gè)樣本對(duì)(),輸入向量,輸出向量,n、m分別為輸入層和輸出層神經(jīng)元個(gè)數(shù),;

(3)對(duì)每個(gè)學(xué)習(xí)樣本P進(jìn)行(4)~(8);

(4)逐層正向計(jì)算網(wǎng)絡(luò)各節(jié)點(diǎn)的實(shí)際輸出:

(2)

其中,為神經(jīng)元i、j之間的權(quán)值;為前層第i個(gè)神經(jīng)元的實(shí)際輸出,為式(1)給出的函數(shù);

(5)計(jì)算網(wǎng)絡(luò)輸出誤差:

第P個(gè)樣本的輸出誤差為(3)

其中,,分別為輸出層第j個(gè)神經(jīng)元的期望輸出和實(shí)際輸出。

網(wǎng)絡(luò)總誤差為;(4)

(6)當(dāng)E小于允許誤差或達(dá)到指定迭代次數(shù)時(shí),學(xué)習(xí)過(guò)程結(jié)束,否則進(jìn)行誤差逆向傳播,轉(zhuǎn)向(7);

(7)逆向逐層計(jì)算網(wǎng)絡(luò)各節(jié)點(diǎn)誤差:

對(duì)于輸出層,(5)

對(duì)于隱含層,(6)

其中代表后層第個(gè)神經(jīng)元。

(8)修正網(wǎng)絡(luò)連接權(quán):,其中為學(xué)習(xí)次數(shù),為學(xué)習(xí)因子,值越大,產(chǎn)生的振蕩越大。通常在權(quán)值修正公式中加入一個(gè)勢(shì)態(tài)項(xiàng),變成:

(7)

其中,a稱(chēng)為勢(shì)態(tài)因子,它決定上次學(xué)習(xí)的權(quán)值變化對(duì)本次權(quán)值更新的影響程度。

2.2圍巖分類(lèi)的BP模型

在以表2中數(shù)據(jù)為基礎(chǔ)進(jìn)行網(wǎng)絡(luò)訓(xùn)練前,須對(duì)表中指標(biāo)作如下處理:Ⅰ、Ⅴ類(lèi)對(duì)應(yīng)的指標(biāo)取其界限值或平均值;Ⅱ、Ⅲ、Ⅳ類(lèi)對(duì)應(yīng)的指標(biāo)取其平均值。作上述處理后,可以得到網(wǎng)絡(luò)訓(xùn)練模型的5個(gè)學(xué)習(xí)樣本,如表3。

表3圍巖類(lèi)別識(shí)別模型的學(xué)習(xí)樣本

類(lèi)別樣本類(lèi)別A1A2A3A4A5

P1Ⅰ2000.950.52582.5

P2Ⅱ1500.8250.7537.567.5

P3Ⅲ750.62527552.5

P4Ⅳ37.50.3754112.537.5

P5Ⅴ250.25512530

以上表中5個(gè)類(lèi)別樣本作為神經(jīng)網(wǎng)絡(luò)的學(xué)習(xí)樣本,在輸入層和隱含層各設(shè)置一個(gè)特殊單元作為閾值單元,其值設(shè)為1。模型結(jié)構(gòu)如下圖1所示。

圖1圍巖類(lèi)別分類(lèi)的BP網(wǎng)絡(luò)模型

設(shè)圍巖類(lèi)別為P1、P2、P3、P4、P5這5個(gè)類(lèi)別樣本的預(yù)期輸出矢量,各分量定義為

網(wǎng)絡(luò)訓(xùn)練時(shí),當(dāng)所有樣本在網(wǎng)絡(luò)輸出節(jié)點(diǎn)的實(shí)際輸出與網(wǎng)絡(luò)期望輸出之間的最大誤差小于預(yù)先給定的常數(shù),即時(shí)學(xué)習(xí)結(jié)束。

網(wǎng)絡(luò)經(jīng)過(guò)15000次訓(xùn)練,每個(gè)樣本的網(wǎng)絡(luò)輸出與期望輸出最大誤差為0.2,絕大部分在0.1之內(nèi)。應(yīng)用訓(xùn)練后的BP模型劃分新的圍巖類(lèi)別樣本,等判定圍巖類(lèi)別樣本W(wǎng)經(jīng)網(wǎng)絡(luò)變換后輸出O與各期望輸出比較,設(shè),。

如果,則,,即隧洞圍巖類(lèi)別樣本屬于級(jí)。

3.沙灣隧洞的圍巖分類(lèi)應(yīng)用實(shí)例

東深供水改造工程沙灣隧洞位于深圳市北東面內(nèi)15公理處,區(qū)域地勢(shì)東高西低。工程區(qū)域周?chē)练e巖、巖漿巖和變質(zhì)巖三大巖類(lèi)均有出露。隧洞線路地帶分布的地層,除洞口溝谷部位為第四系松散堆積層外,其余均為侏羅系中統(tǒng)塘夏群碎屑巖,基本為單斜構(gòu)造,但末端因受深圳斷裂帶影響,巖層產(chǎn)狀較為紊亂,地質(zhì)條件復(fù)雜多變。

隧洞開(kāi)挖后,測(cè)得三種圍巖地段的力學(xué)性質(zhì)和環(huán)境條件,取三個(gè)樣本為a、b、c。用BP人工神經(jīng)網(wǎng)絡(luò)判定該工程隧洞圍巖類(lèi)別。

根據(jù)水利水電工程地質(zhì)勘察規(guī)范,隧洞圍巖類(lèi)別分為5級(jí):Ⅰ(穩(wěn)定)、Ⅱ(基本穩(wěn)定)、Ⅲ(局部穩(wěn)定性差)、Ⅳ(不穩(wěn)定)、Ⅴ(極不穩(wěn)定)。對(duì)照學(xué)習(xí)樣本各特征變量,用訓(xùn)練好的BP模型對(duì)a、b、c三個(gè)樣本進(jìn)行判定,其結(jié)果見(jiàn)表4。

表4沙灣隧洞三組樣本實(shí)測(cè)指標(biāo)與圍巖類(lèi)別判定結(jié)果

指標(biāo)名稱(chēng)實(shí)測(cè)指標(biāo)值

abc

巖石強(qiáng)度(A1)2845100

巖體完整程度(A2)0.220.50.55

張開(kāi)度(A3)341

地下水狀態(tài)(A4)1208025

主要結(jié)構(gòu)面產(chǎn)狀(A5)305060

圍巖類(lèi)別判定結(jié)果ⅤⅣⅢ

4.結(jié)論

水工隧洞圍巖類(lèi)別判定,不僅影響因素多,而且具有很大的模糊性和不確定性。人工神經(jīng)網(wǎng)絡(luò)是一門(mén)新興的交叉學(xué)科,它具有聯(lián)想、記憶功能和判別識(shí)別的模糊性等優(yōu)點(diǎn),用它來(lái)進(jìn)行圍巖類(lèi)別分類(lèi),不需對(duì)輸入輸出指標(biāo)的關(guān)系作任何假設(shè),這種關(guān)系是神經(jīng)網(wǎng)絡(luò)從實(shí)例中自適應(yīng)學(xué)習(xí)而獲得的,大大減少了人為因素的影響,省去了事后的經(jīng)驗(yàn)判斷。實(shí)踐證明,它在理論和應(yīng)用上都是可行的和有實(shí)際意義的。

篇(7)

【關(guān)鍵詞】 人工神經(jīng)網(wǎng)絡(luò); 應(yīng)用

人工神經(jīng)網(wǎng)絡(luò)(Artificial Neural Network,ANN)方法自從本世紀(jì)40年代被提出以來(lái),許多從事人工智能、計(jì)算機(jī)科學(xué)、信息科學(xué)的科學(xué)家都在對(duì)它進(jìn)行研究,已在軍事、醫(yī)療、航天、自動(dòng)控制、金融等許多領(lǐng)域取得了成功的應(yīng)用。目前出現(xiàn)了許多模仿動(dòng)物和人的智能形式與功能的某個(gè)方面的神經(jīng)網(wǎng)絡(luò),例如,Grossberg提出的自適應(yīng)共振理論(Adaptive Resonance Theory,ART),T-Kohenen的自組織特征映射網(wǎng)絡(luò)(Self-Organizing feature Map,SOM),徑向基函數(shù)網(wǎng)絡(luò)(Radial Basis Function,RBF),Hopfield網(wǎng)等。進(jìn)入90年代以后,由于計(jì)算機(jī)技術(shù)和信息技術(shù)的發(fā)展,以及各種算法的不斷提出,神經(jīng)網(wǎng)絡(luò)的研究逐漸深化,應(yīng)用面也逐步擴(kuò)大,本研究對(duì)常用的神經(jīng)網(wǎng)絡(luò)方法及其在醫(yī)學(xué)領(lǐng)域中的應(yīng)用做一簡(jiǎn)單綜述。

1 自組織特征映射網(wǎng)絡(luò)(self-organizing feature map,SOM)在基因表達(dá)數(shù)據(jù)分析中的應(yīng)用

1.1 方法介紹

腦神經(jīng)學(xué)的研究表明,人腦中大量的神經(jīng)元處于空間的不同區(qū)域,有著不同的功能,各自敏感著各自的輸入信息模式的不同特征。芬蘭赫爾辛基大學(xué)神經(jīng)網(wǎng)絡(luò)專(zhuān)家T.Kohonen根據(jù)大腦神經(jīng)系統(tǒng)的這一特性,于1981年提出了自組織特征映射網(wǎng)絡(luò),它模擬人的大腦,利用競(jìng)爭(zhēng)學(xué)習(xí)的方式進(jìn)行網(wǎng)絡(luò)學(xué)習(xí),具有很強(qiáng)的自組織、自適應(yīng)學(xué)習(xí)能力,魯棒性和容錯(cuò)能力,其理論及應(yīng)用發(fā)展很快,目前已在信息處理、模式識(shí)別、圖像處理、語(yǔ)音識(shí)別、機(jī)器人控制、數(shù)據(jù)挖掘等方面都有成功應(yīng)用的實(shí)例。

Kohonen網(wǎng)絡(luò)由輸入層和競(jìng)爭(zhēng)層組成,網(wǎng)絡(luò)結(jié)構(gòu)見(jiàn)圖1。輸入層由N個(gè)神經(jīng)元組成,競(jìng)爭(zhēng)層由M個(gè)輸出神經(jīng)元組成,輸入層與競(jìng)爭(zhēng)層各神經(jīng)元之間實(shí)現(xiàn)全互連接,競(jìng)爭(zhēng)層之間實(shí)行側(cè)向連接。設(shè)輸入向量為x=(x1,…,xd)T ,輸出神經(jīng)元j對(duì)應(yīng)的權(quán)重向量為wj=(wj1,…,wjd)T ,對(duì)每一輸出神經(jīng)元計(jì)算輸入向量x 和權(quán)重向量wj 間的距離,據(jù)此利用競(jìng)爭(zhēng)學(xué)習(xí)規(guī)則對(duì)權(quán)向量進(jìn)行調(diào)節(jié)。在網(wǎng)絡(luò)的競(jìng)爭(zhēng)層,各神經(jīng)元競(jìng)爭(zhēng)對(duì)輸入模式的響應(yīng)機(jī)會(huì),最后僅一個(gè)神經(jīng)元成為勝利者,并對(duì)與獲勝神經(jīng)元有關(guān)的各權(quán)重朝著更有利于它競(jìng)爭(zhēng)的方向調(diào)整,這樣在每個(gè)獲勝神經(jīng)元附近形成一個(gè)“聚類(lèi)區(qū)”,學(xué)習(xí)的結(jié)果使聚類(lèi)區(qū)內(nèi)各神經(jīng)元的權(quán)重向量保持與輸入向量逼近的趨勢(shì),從而使具有相近特性的輸入向量聚集在一起,這種自組織聚類(lèi)過(guò)程是系統(tǒng)自主、無(wú)教師示教的聚類(lèi)方法,能將任意維輸入模式在輸出層映射成一維或二維離散圖形,并保持其拓?fù)浣Y(jié)構(gòu)不變。網(wǎng)絡(luò)通過(guò)對(duì)輸入模式的學(xué)習(xí),網(wǎng)絡(luò)競(jìng)爭(zhēng)層神經(jīng)元相互競(jìng)爭(zhēng),自適應(yīng)地形成對(duì)輸入模式的不同響應(yīng),模擬大腦信息處理的聚類(lèi)功能、自組織、自學(xué)習(xí)功能,實(shí)現(xiàn)用低維目標(biāo)空間的點(diǎn)去表示高維原始空間的點(diǎn),其工作原理和聚類(lèi)算法及改進(jìn)方法參見(jiàn)相關(guān)文獻(xiàn)[1]。

1.2 應(yīng)用

基因芯片技術(shù)的應(yīng)用使得人們可以從基因水平探討疾病的病因及預(yù)后,而基因芯片產(chǎn)生的數(shù)據(jù)具有高維度(變量多)、樣本量小、高噪聲的特點(diǎn),樣本量遠(yuǎn)小于變量數(shù),如何從海量的數(shù)據(jù)中挖掘信息或知識(shí)成為重大課題。聚類(lèi)分析是數(shù)據(jù)挖掘中的一類(lèi)重要技術(shù),傳統(tǒng)方法主要有系統(tǒng)聚類(lèi)、k-means聚類(lèi)等,但在處理復(fù)雜非線性關(guān)系及變量間的交互作用時(shí)效果較差,受異常值影響較大。近年來(lái)神經(jīng)網(wǎng)絡(luò)技術(shù)法成為聚類(lèi)領(lǐng)域的研究熱點(diǎn),其中自組織特征映射網(wǎng)絡(luò)由于其良好的自適應(yīng)性,其算法對(duì)基因表達(dá)數(shù)據(jù)的聚類(lèi)有較高的穩(wěn)定性和智能性,尤其在處理基因表達(dá)中有缺失數(shù)據(jù)及原始空間到目標(biāo)空間存在非線性映射結(jié)構(gòu)時(shí)有較好的體現(xiàn),適用于復(fù)雜的多維數(shù)據(jù)的模式識(shí)別和特征分類(lèi)等探索性分析,同時(shí)可實(shí)現(xiàn)聚類(lèi)過(guò)程和結(jié)果的可視化[2]。目前Kohonen網(wǎng)絡(luò)已被成功用到許多基因表達(dá)數(shù)據(jù)的分析中,Jihua Huang等[3]設(shè)計(jì)6×6的網(wǎng)絡(luò)對(duì)酵母細(xì)胞周期數(shù)據(jù)進(jìn)行分析,總正確率為67.7%;曹暉等[4]將其算法改進(jìn)后用在酵母菌基因表達(dá)數(shù)據(jù)中,總正確率高達(dá)84.73%,有較高的聚類(lèi)效能;鄧慶山[5]將該模型與K平均值聚類(lèi)方法結(jié)合用于公開(kāi)的結(jié)腸基因表達(dá)數(shù)據(jù)集和白血病基因表達(dá)數(shù)據(jù)集,聚類(lèi)的準(zhǔn)確率分別為94.12%和90.32%。目前Kohonen網(wǎng)絡(luò)在醫(yī)學(xué)領(lǐng)域中主要應(yīng)用前景有:① 發(fā)現(xiàn)與疾病相關(guān)的新的未知基因,對(duì)目標(biāo)基因進(jìn)一步研究,提高診斷的正確率,并對(duì)藥物的開(kāi)發(fā)研究提供重要的線索;② 對(duì)腫瘤組織的基因表達(dá)譜數(shù)據(jù)聚類(lèi),以期發(fā)現(xiàn)新的、未知的疾病亞型(腫瘤亞型),以便提出更加有針對(duì)性的治療方案,為從分子水平對(duì)疾病分型、診斷、預(yù)后等提供依據(jù);③ 發(fā)現(xiàn)與已知基因有相似功能的基因,為推斷未知基因的可能功能提供線索。

2 BP神經(jīng)網(wǎng)絡(luò)在醫(yī)學(xué)研究中的應(yīng)用

2.1 BP神經(jīng)網(wǎng)絡(luò)在疾病輔助診斷中的應(yīng)用

2.1.1 方法介紹

BP神經(jīng)網(wǎng)絡(luò)是目前應(yīng)用最多的神經(jīng)網(wǎng)絡(luò),一般由一個(gè)輸入層(input layer)、一個(gè)輸出層(output layer)、一個(gè)或幾個(gè)中間層(隱層)組成。每一層可包含一個(gè)或多個(gè)神經(jīng)元,其中每一層的每個(gè)神經(jīng)元和前一層相連接,同一層之間沒(méi)有連接。輸入層神經(jīng)元傳遞輸入信息到第一隱層或直接傳到輸出層,隱層的神經(jīng)元對(duì)輸入層的信息加權(quán)求和,加一個(gè)常數(shù)后,經(jīng)傳遞函數(shù)運(yùn)算后傳到下一個(gè)隱層(或輸出層),常用的傳遞函數(shù)是logistic函數(shù),即Φh=1/(1+exp(-z)) ,輸出層神經(jīng)元對(duì)前一層的輸入信息加權(quán)求和經(jīng)傳遞函數(shù)Φ0 (線性或logistic函數(shù)或門(mén)限函數(shù))運(yùn)算后輸出,BP神經(jīng)網(wǎng)絡(luò)一般采用BP算法訓(xùn)練網(wǎng)絡(luò),關(guān)于BP算法及改進(jìn)可參考相關(guān)文獻(xiàn)[1]。

人工神經(jīng)網(wǎng)絡(luò)具有強(qiáng)大的非線性映射能力,含一個(gè)隱層的網(wǎng)絡(luò)可以實(shí)現(xiàn)從輸入到輸出間的任意非線性映射,是典型的非線性數(shù)學(xué)模型,建立BP神經(jīng)網(wǎng)絡(luò)模型的一般步驟為:① BP網(wǎng)訓(xùn)練集、校驗(yàn)集、測(cè)試集的確定;② 輸入數(shù)據(jù)的預(yù)處理:使輸入變量的取值落在0到1的范圍內(nèi),如果是無(wú)序分類(lèi)變量,以啞變量的形式賦值;③ 神經(jīng)網(wǎng)絡(luò)模型的建立及訓(xùn)練:學(xué)習(xí)率、傳遞函數(shù)、隱層數(shù)、隱單元數(shù)的選擇,注意防止過(guò)度擬合。一般使用靈敏度、特異度、陽(yáng)性預(yù)測(cè)值、陰性預(yù)測(cè)值、ROC曲線對(duì)模型的預(yù)測(cè)性能進(jìn)行評(píng)價(jià)。

2.1.2 應(yīng)用

BP神經(jīng)網(wǎng)絡(luò)已廣泛用于臨床輔助診斷中,白云靜等[6]用于中醫(yī)證候的非線性建模,建立了RA證侯BP網(wǎng)絡(luò)模型和DN證侯BP網(wǎng)絡(luò)模型,結(jié)果顯示平均診斷準(zhǔn)確率分別為90.72%、92.21%,具有較高的診斷、預(yù)測(cè)能力。曹志峰[7]采用PROBEN1中的甲狀腺疾病數(shù)據(jù)庫(kù)用于甲狀腺疾病(甲亢、甲減、正常)的診斷,結(jié)果顯示訓(xùn)練樣本的正確識(shí)別率為99.3% ,測(cè)試樣本的正確識(shí)別率為98.2%,提示對(duì)臨床診斷甲狀腺疾病提供有益的幫助;還有學(xué)者用于急性心肌梗塞、甲狀腺功能紊亂、乳腺癌、前列腺癌、宮頸癌、肺癌、卵巢癌、急性肺梗塞等的輔助診斷等[8]。

2.2 BP神經(jīng)網(wǎng)絡(luò)在生存分析中的應(yīng)用

2.2.1 方法介紹

傳統(tǒng)的生存分析方法有非參數(shù)、半?yún)?shù)、參數(shù)模型,參數(shù)模型主要有指數(shù)回歸模型、Weibull回歸模型,都要求對(duì)基線風(fēng)險(xiǎn)做一定的假設(shè),但實(shí)際資料常常不符合條件,生存分析中應(yīng)用最為廣泛的半?yún)?shù)模型:Cox比例風(fēng)險(xiǎn)模型,但它要求滿足比例風(fēng)險(xiǎn)的假定,在很多情況下也難以滿足。基于神經(jīng)網(wǎng)絡(luò)的生存分析模型可以克服這些困難,可以探測(cè)復(fù)雜的非線性效應(yīng),復(fù)雜的交互效應(yīng),模型中協(xié)變量的效應(yīng)可以隨時(shí)間變化,對(duì)數(shù)據(jù)的分布不做要求。目前一些策略被用到神經(jīng)網(wǎng)絡(luò)預(yù)測(cè)方法中分析含有刪失的生存數(shù)據(jù),主要有Faraggi-Simon(1995)法、Liestol-Andersen-Andersen(1994) 法、改良uckley-James(1979)法等。

BP神經(jīng)網(wǎng)絡(luò)建立生存分析模型常用的方法有[9]:連續(xù)時(shí)間模型(continuous time models)與離散時(shí)間模型(discrete time models)。常用的Faraggi和Simon[10]提出的連續(xù)時(shí)間模型擴(kuò)展了Cox回歸模型,允許非線性函數(shù)代替通常的協(xié)變量的線性組合,這種方法既保持了Cox回歸模型的比例風(fēng)險(xiǎn)的特點(diǎn),又提供了處理復(fù)雜非線性關(guān)系、交互作用能力的好方法。

離散時(shí)間模型常用的模型有:① 輸出層為單個(gè)結(jié)點(diǎn):模型的輸出層只有一個(gè)神經(jīng)元結(jié)點(diǎn),是最簡(jiǎn)單的神經(jīng)網(wǎng)絡(luò)模型,生存時(shí)間被分成兩個(gè)區(qū)間,當(dāng)研究者僅僅對(duì)某一時(shí)間點(diǎn)的預(yù)后感興趣時(shí),例如預(yù)測(cè)癌癥患者的5年生存情況,如欲預(yù)測(cè)多個(gè)時(shí)間點(diǎn),則需建立多個(gè)神經(jīng)網(wǎng)絡(luò)模型(每個(gè)模型對(duì)應(yīng)一個(gè)時(shí)間區(qū)間);② 輸出層為多個(gè)結(jié)點(diǎn):生存時(shí)間被分成幾個(gè)離散的區(qū)間,估計(jì)某個(gè)時(shí)間區(qū)間事件發(fā)生的概率,Liestol法是常用的離散時(shí)間模型。還有研究者在建立多個(gè)時(shí)間區(qū)間模型時(shí)將時(shí)間也做為一個(gè)輸入變量,也有學(xué)者將神經(jīng)網(wǎng)絡(luò)納入Bayes方法的研究框架。

一般采用靈敏度、特異度、一致性指數(shù)C(Concordance index)作為預(yù)測(cè)準(zhǔn)確性的評(píng)價(jià)指標(biāo),神經(jīng)網(wǎng)絡(luò)在生存分析中的應(yīng)用主要在于[11]:個(gè)體患者預(yù)后的預(yù)測(cè),研究預(yù)后因子的重要性,研究預(yù)后因子的相互作用,對(duì)于預(yù)測(cè)變量的影響力強(qiáng)弱及解釋性,還有待進(jìn)一步探討。

2.2.2 應(yīng)用

國(guó)外Ruth M.Ripley等[9]將7種不同的神經(jīng)網(wǎng)絡(luò)生存分析模型(3種離散時(shí)間模型,4種連續(xù)時(shí)間模型)用于1335例乳腺癌患者復(fù)發(fā)概率的預(yù)測(cè),并對(duì)其精確性、靈敏度、特異度等預(yù)測(cè)性能指標(biāo)進(jìn)行比較,結(jié)果證明神經(jīng)網(wǎng)絡(luò)方法能成功用于生存分析問(wèn)題,可以提取預(yù)后因子所蘊(yùn)涵的最大可能的信息。Anny Xiang等[12]采用Monte Carlo模擬研究方法,在9種實(shí)驗(yàn)條件下(不同的輸入結(jié)點(diǎn)、刪失比例、樣本含量等)對(duì)Faraggi-Simon法、Liestol-Andersen-Andersen法、改良Buckley-James法處理右刪失生存數(shù)據(jù)的性能與Cox回歸作比較,研究結(jié)果提示神經(jīng)網(wǎng)絡(luò)方法可以作為分析右刪失數(shù)據(jù)的一個(gè)有效的方法。D.J.Groves[13]等將Cox回歸與神經(jīng)網(wǎng)絡(luò)方法對(duì)兒童急性淋巴母細(xì)胞白血病的預(yù)后進(jìn)行了比較,Lucila Ohno-Machado等[14]建立輸出層為4個(gè)結(jié)點(diǎn)的離散時(shí)間神經(jīng)網(wǎng)絡(luò)模型做為AIDS預(yù)后研究的工具,并使用ROC曲線下面積、靈敏度、特異度、陽(yáng)性預(yù)測(cè)值、陰性預(yù)測(cè)值對(duì)不同時(shí)間區(qū)間的預(yù)測(cè)性能做了評(píng)價(jià)。國(guó)內(nèi)用于生存分析方面的研究還較少,黃德生[15]等利用BP神經(jīng)網(wǎng)絡(luò)建立time-coded model和single-time point model用于肺鱗癌預(yù)后預(yù)測(cè),賀佳[16]等把BP網(wǎng)絡(luò)用于預(yù)測(cè)肝癌患者術(shù)后無(wú)瘤生存期,也有學(xué)者對(duì)AIDS、惡性腫瘤的預(yù)后做了相關(guān)的研究。

2.3 BP神經(jīng)網(wǎng)絡(luò)在其它方面的應(yīng)用

近年來(lái)BP神經(jīng)網(wǎng)絡(luò)在疾病篩查中的的應(yīng)用引起學(xué)者的關(guān)注,例如在乳腺癌、宮頸癌、糖尿病的篩查都有成功的應(yīng)用[17]。神經(jīng)網(wǎng)絡(luò)在法醫(yī)學(xué)研究領(lǐng)域具有實(shí)用性和廣泛的應(yīng)用前景,法醫(yī)學(xué)家將其用在死亡時(shí)間推斷、死因分析、個(gè)體識(shí)別和毒物分析等研究中[18]。在藥學(xué)研究中也有一定的應(yīng)用,例如在定量藥物設(shè)計(jì)、藥物分析、藥動(dòng)/藥效學(xué)研究中,都有成功的應(yīng)用案例,相秉仁等[19]對(duì)其做了詳細(xì)的綜述。曹顯慶[20]等還將神經(jīng)網(wǎng)絡(luò)用于ECG、EEG等信號(hào)的識(shí)別和處理、醫(yī)學(xué)圖像分析中,取得了較好的結(jié)果。

人工神經(jīng)網(wǎng)絡(luò)是在研究生物神經(jīng)網(wǎng)絡(luò)的基礎(chǔ)上建立的模型,迄今為止有代表性的網(wǎng)絡(luò)模型已達(dá)數(shù)10種,人工神經(jīng)網(wǎng)絡(luò)不需要精確的數(shù)學(xué)模型,沒(méi)有任何對(duì)變量的假設(shè)要求,能通過(guò)模擬人的智能行為處理復(fù)雜的、不確定的、非線性問(wèn)題。在醫(yī)學(xué)研究領(lǐng)域,變量間關(guān)系往往非常復(fù)雜,為了探測(cè)變量間的復(fù)雜模式,神經(jīng)網(wǎng)絡(luò)正逐漸變成分析數(shù)據(jù)的流行工具。目前國(guó)際上已出現(xiàn)許多著名的神經(jīng)網(wǎng)絡(luò)專(zhuān)業(yè)雜志:Neural Network,Neural Computation,IEEE Transaction on Neural Networks等,同時(shí)已有許多商業(yè)化的神經(jīng)網(wǎng)絡(luò)開(kāi)發(fā)軟件,如Matlab軟件, S-plus軟件,SNNS(Stuttgart Neural Network Simulator)等,高版本SAS系統(tǒng)中的Enterprise Miner應(yīng)用模塊中也可以建立神經(jīng)網(wǎng)絡(luò)模型,隨著計(jì)算機(jī)技術(shù)的進(jìn)一步發(fā)展,人工神經(jīng)網(wǎng)絡(luò)在醫(yī)學(xué)領(lǐng)域的應(yīng)用前景也會(huì)更加廣闊。

【參考文獻(xiàn)】

1 余雪麗,主編.神經(jīng)網(wǎng)絡(luò)與實(shí)例學(xué)習(xí).中國(guó)鐵道出版社,1996.

2 白耀輝,陳明.利用自組織特征映射神經(jīng)網(wǎng)絡(luò)進(jìn)行可視化聚類(lèi).計(jì)算機(jī)仿真,2006,23(1):180~183.

3 Jinua Huang,Hiroshi Shimizu,Suteaki Shioya.Clustering gene expression pattern and extracting relationship in gene network based on artificial neural networks.Journal of bioscience and bioengineering,2003,96(5):421~428.

4 曹暉,席斌,米紅.一種新聚類(lèi)算法在基因表達(dá)數(shù)據(jù)分析中的應(yīng)用.計(jì)算機(jī)工程與應(yīng)用,2007,43(18):234~238.

5 鄧慶山.聚類(lèi)分析在基因表達(dá)數(shù)據(jù)上的應(yīng)用研究.計(jì)算機(jī)工程與應(yīng)用,2005,41(35):210~212.

6 白云靜,申洪波,孟慶剛,等.基于人工神經(jīng)網(wǎng)絡(luò)的中醫(yī)證侯非線性建模研究.中國(guó)中醫(yī)藥信息雜志,2007,14(7):3~4.

7 曹志峰. BP 神經(jīng)網(wǎng)絡(luò)在臨床診斷中的應(yīng)用與探討.實(shí)用醫(yī)技雜志,2005,12(9):2656~2657.

8 William G Baxt. Application of artificial neural networks to clinical medicine. The Lancet,1995,346(8983):1135~1138.

9 Ruth M.Ripley,Adrian L.Harris,Lionel Tarassenko.Non-linear survival analysis using neural networks. Statistics in medicine,2004,23(5):825~842.

10 David Faraggi,Richard Simon.A neural network model for survival data. Statistics in medicine,1995,14(1):73~82.

11 高蔚,聶紹發(fā),施侶元,等.神經(jīng)網(wǎng)絡(luò)在生存分析中的應(yīng)用進(jìn)展.中國(guó)衛(wèi)生統(tǒng)計(jì),2006,23(4):358~360.

12 Anny Xiang,Pablo Lapuerta, Alex Ryutov.Comparison of the performance of neural network methods and Cox regression for censored survival data.Computational statistics & data analysis,2000,34(2):243~257.

13 D.J.Groves,S.W.Smye,S.E.Kinsey.A comparison of Cox regression and neural networks for risk stratification in case of acute lymphoblastic leukaemia in children.Neural computing & applications,1999,8(3):257~264.

14 Lucila Ohno-Machado.A comparison of cox proportional hazards and artificial neural network models for medicial prognosis.Comput Biol Med,1997,27(1):55~65.

15 黃德生,周寶森,劉延齡,等.BP人工神經(jīng)網(wǎng)絡(luò)用于肺鱗癌預(yù)后預(yù)測(cè).中國(guó)衛(wèi)生統(tǒng)計(jì),2000,17(6):337~340.

16 賀佳,張智堅(jiān),賀憲民.肝癌術(shù)后無(wú)瘤生存期的人工神經(jīng)網(wǎng)絡(luò)預(yù)測(cè).數(shù)理統(tǒng)計(jì)與管理,2002,21(4):14~16.

17 黎衍云,李銳,張勝年.人工神經(jīng)網(wǎng)絡(luò)及其在疾病篩查中的應(yīng)用前景.環(huán)境與職業(yè)醫(yī)學(xué),2006,23(1):71~73.

篇(8)

神經(jīng)網(wǎng)絡(luò)是一個(gè)具有高度非線性的超大規(guī)模連續(xù)時(shí)間動(dòng)力系統(tǒng)。是由大量的處理單元(神經(jīng)元)廣泛互連而形成的網(wǎng)絡(luò)。它是在現(xiàn)代神經(jīng)科學(xué)研究成果的基礎(chǔ)上提出的,反映了腦功能的基本特征。但它并不是人腦的真實(shí)描寫(xiě),而只是它的某種抽象、簡(jiǎn)化與模擬。網(wǎng)絡(luò)的信息處理由神經(jīng)元之間的相互作用來(lái)實(shí)現(xiàn);知識(shí)與信息的存儲(chǔ)表現(xiàn)為網(wǎng)絡(luò)元件互連間分布式的物理聯(lián)系;網(wǎng)絡(luò)的學(xué)習(xí)和計(jì)算決定于各神經(jīng)元連接權(quán)系的動(dòng)態(tài)演化過(guò)程。因此神經(jīng)元構(gòu)成了網(wǎng)絡(luò)的基本運(yùn)算單元。每個(gè)神經(jīng)元具有自己的閾值。每個(gè)神經(jīng)元的輸入信號(hào)是所有與其相連的神經(jīng)元的輸出信號(hào)和加權(quán)后的和。而輸出信號(hào)是其凈輸入信號(hào)的非線性函數(shù)。如果輸入信號(hào)的加權(quán)集合高于其閾值,該神經(jīng)元便被激活而輸出相應(yīng)的值。在人工神經(jīng)網(wǎng)絡(luò)中所存儲(chǔ)的是單元之間連接的加權(quán)值陣列。

神經(jīng)網(wǎng)絡(luò)的工作過(guò)程主要由兩個(gè)階段組成,一個(gè)階段是工作期,此時(shí)各連接權(quán)值固定,計(jì)算單元的狀態(tài)變化,以求達(dá)到穩(wěn)定狀態(tài)。另一階段是學(xué)習(xí)期(自適應(yīng)期,或設(shè)計(jì)期),此時(shí)各計(jì)算單元狀態(tài)不變,各連接權(quán)值可修改(通過(guò)學(xué)習(xí)樣本或其他方法),前一階段較快,各單元的狀態(tài)亦稱(chēng)短期記憶(STM),后一階段慢的多,權(quán)及連接方式亦稱(chēng)長(zhǎng)期記憶(LTM)〔1〕。

根據(jù)網(wǎng)絡(luò)的拓?fù)浣Y(jié)構(gòu)和學(xué)習(xí)規(guī)則可將人工神經(jīng)網(wǎng)絡(luò)分為多種類(lèi)型,如不含反饋的前向神經(jīng)網(wǎng)絡(luò)、層內(nèi)有相互結(jié)合的前向網(wǎng)絡(luò)、反饋網(wǎng)絡(luò)、相互結(jié)合型網(wǎng)絡(luò)等〔2〕。本文的人工神經(jīng)網(wǎng)絡(luò)模型是采用BP算法的多層前饋網(wǎng)絡(luò)。

該模型的特點(diǎn)是信號(hào)由輸入層單向傳遞到輸出層,同一層神經(jīng)元之間互不傳遞信息,每個(gè)神經(jīng)元與鄰近層所有神經(jīng)元相連,連接權(quán)用Wij表示。各神經(jīng)元的作用函數(shù)為Sigmoid函數(shù),設(shè)神經(jīng)網(wǎng)絡(luò)輸入層的p個(gè)節(jié)點(diǎn),輸出層有q個(gè)節(jié)點(diǎn),k-1層的任意節(jié)點(diǎn)用l表示,k層的任意節(jié)點(diǎn)用j表示,k+1層的任意節(jié)點(diǎn)用l表示。Wij為k-1層的第i個(gè)神經(jīng)元與k層的第j個(gè)神經(jīng)元相連接的權(quán)值。k-1層的節(jié)點(diǎn)i輸出為O(k-1)i,k層節(jié)點(diǎn)j的輸出為:

k層節(jié)點(diǎn)j的輸出為:

Okj=f(netkj)

設(shè)訓(xùn)練樣本為(X,Ye),X為p維向量,加到輸入層;Ye為q維向量,對(duì)應(yīng)于期望輸出;網(wǎng)絡(luò)的實(shí)際輸出Y也是q維向量。網(wǎng)絡(luò)在接受樣本對(duì)的訓(xùn)練過(guò)程中,采用BP算法,其權(quán)值調(diào)整量為:

ΔWij=-ηδkjO(k-1)i

其中,對(duì)于輸出層為:

δkj=yj(1-yj)(yej-yj)

對(duì)于非輸出層為:

η為訓(xùn)練步長(zhǎng),取0<η<1。

用樣本集合反復(fù)訓(xùn)練網(wǎng)絡(luò),并不斷修改權(quán)值,直到使實(shí)際輸出向量達(dá)到要求,訓(xùn)練過(guò)程結(jié)束〔3〕。

上述人工神經(jīng)網(wǎng)絡(luò)可以完成多種信息處理任務(wù),如從二進(jìn)制數(shù)據(jù)中提取相關(guān)知識(shí),完成最近鄰模式分類(lèi),實(shí)現(xiàn)數(shù)據(jù)聚集等。而本文要用的是其極強(qiáng)的數(shù)學(xué)逼近映射能力,即開(kāi)發(fā)合適的函數(shù)f:ARnBRn,以自組織的方式響應(yīng)以下的樣本集合:(x1,y1),(x2,y2)…,(xm,ym),其中yi=f(xi)。這里描述的是一般的數(shù)學(xué)抽象,像識(shí)別與分類(lèi)這些計(jì)算都可以抽象為這樣的一種近似數(shù)學(xué)映射。

所謂診斷,實(shí)質(zhì)上是一個(gè)分類(lèi)問(wèn)題。即根據(jù)候診者的癥狀,醫(yī)學(xué)檢查結(jié)果(如體溫、心跳等)等一些情況,它們可以用一向量(e1,e2,…,em)來(lái)表示,將其歸類(lèi)為病人或非病人。這也可以轉(zhuǎn)化為尋找一差別函數(shù)f使得:

(1)f(e1,e2,…,em)>ε, (e1,e2,…,em)∈T

(2)f(e1,e2,…,em)>ε, (e1,e2,…,em)T

其中集合T表示患病。

因此,病情診斷最終也可作為一類(lèi)函數(shù)的逼近問(wèn)題。

而許多研究已表明,前向神經(jīng)網(wǎng)絡(luò)可作為非線性逼近的標(biāo)準(zhǔn)型。對(duì)于實(shí)數(shù)空間的任一函數(shù),只要它滿足一定的條件,一定存在唯一的具有單一隱層的前向網(wǎng)絡(luò)作為它的最優(yōu)最佳逼近。而含有兩個(gè)隱含層的前向網(wǎng)絡(luò)可在任意的平方誤差內(nèi)逼近某一實(shí)函數(shù)〔3〕。

診斷步驟

肺癌病例數(shù)據(jù)選自1981~1994年在某醫(yī)院住院的病人,共計(jì)551例。其中486例(88%)經(jīng)病理學(xué)、細(xì)胞學(xué)診斷證實(shí)為肺癌。每一病例都包括多項(xiàng)數(shù)據(jù),其中用于診斷的數(shù)據(jù)項(xiàng)有:病人的一般情況(如年齡、性別等),家族史、既往史、吸煙史、術(shù)后病理、X射線檢查、CT檢查、纖維支氣管鏡檢查、PAT痰檢等多達(dá)58項(xiàng)。因此,原則上 58項(xiàng)數(shù)據(jù)應(yīng)作為神經(jīng)網(wǎng)絡(luò)的輸入項(xiàng),而神經(jīng)網(wǎng)絡(luò)的輸出值就是病人是否患肺癌的結(jié)果。

1.網(wǎng)絡(luò)訓(xùn)練集的確定:在最原始的551例病人數(shù)據(jù)中存在著各種各樣的差別,如性別差異(419例男性,132例女性),診斷結(jié)果的差異(486例經(jīng)證實(shí)為肺癌),所患肺癌種類(lèi)的差異(鱗癌、小細(xì)胞癌、大細(xì)胞癌等),患病程度上的差異(早、中晚期的不同)等等。顯然,訓(xùn)練數(shù)據(jù)集應(yīng)最大限度地保證兼顧各種病例情況。經(jīng)過(guò)仔細(xì)篩選,選擇了含有460個(gè)病例的集合作為肺癌診斷用的網(wǎng)絡(luò)的訓(xùn)練集。

2.神經(jīng)網(wǎng)絡(luò)輸入和輸出數(shù)據(jù)的預(yù)處理

按照人工神經(jīng)網(wǎng)絡(luò)的理論,神經(jīng)網(wǎng)絡(luò)的輸入輸出數(shù)據(jù)都應(yīng)該屬于(0,1)區(qū)間的實(shí)數(shù),為此我們需對(duì)原始數(shù)據(jù)進(jìn)行如下的規(guī)一化處理:

其中xi為原始數(shù)據(jù)項(xiàng),而Max=max{xi∶xi∈X},Min=min{xi∶xi∈X}。這里X為原始數(shù)據(jù)集。經(jīng)過(guò)(7)式變換后,yi將在(0,1)區(qū)間。因此,可作為神經(jīng)網(wǎng)絡(luò)的輸入輸出。

3.應(yīng)用神經(jīng)網(wǎng)絡(luò)進(jìn)行肺癌診斷

將描述病人各種情況的數(shù)據(jù)作為前向網(wǎng)絡(luò)的輸入數(shù)據(jù)加到其輸入端,并按(1)~(6)式計(jì)算各神經(jīng)元的輸入和輸出,同時(shí)調(diào)整神經(jīng)元之間的連接權(quán)值以使網(wǎng)絡(luò)的輸出和實(shí)際的病例情況相符。即當(dāng)病人確實(shí)患肺癌時(shí)網(wǎng)絡(luò)的輸出結(jié)果也恰好指示為肺癌,反之亦然。如果對(duì)所有的訓(xùn)練樣本集網(wǎng)絡(luò)的輸出基本上(95%或更高)能保證與實(shí)際結(jié)果一致,則訓(xùn)練過(guò)程結(jié)束。我們認(rèn)為神經(jīng)網(wǎng)絡(luò)已建立起病人的各種因素與他是否是肺癌患者之間的函數(shù)映射關(guān)系。對(duì)于一個(gè)新的候診病人來(lái)說(shuō),只要將他的情況輸入到訓(xùn)練好的神經(jīng)網(wǎng)絡(luò)中去,根據(jù)網(wǎng)絡(luò)的輸出結(jié)果就可以知道他是否已患肺癌。

表1 基于不同發(fā)病因素的診斷網(wǎng)絡(luò)模型

類(lèi)

型 訓(xùn)練集精度 測(cè)試集精度

基于遺傳因素的診斷網(wǎng) 53.8% 46.3%

基于個(gè)人生活習(xí)慣的診斷網(wǎng) 57.1% 44.9%

基于病癥的診斷網(wǎng) 89.4% 83.3%

基于醫(yī)學(xué)檢查結(jié)果的診斷網(wǎng) 98.5% 92.6%

上述結(jié)果表明不同類(lèi)型的因素應(yīng)分開(kāi)來(lái)考慮。于是我們將58項(xiàng)輸入數(shù)據(jù)分成四類(lèi),這四類(lèi)有各自的BP診斷網(wǎng),依次稱(chēng)為診斷一、診斷二、診斷三、診斷四。它們先單獨(dú)測(cè)定,然后再將它們各自的結(jié)果綜合起來(lái)得出最后的判斷。

上述四種診斷網(wǎng)絡(luò)所得結(jié)果的可靠性各不相同。其中,根據(jù)醫(yī)學(xué)檢查結(jié)果所作的診斷準(zhǔn)確性最高,因此在最后的綜合分析中要重點(diǎn)考慮它的診斷結(jié)果,我們給它設(shè)一個(gè)相對(duì)最高的權(quán)值。其次,根據(jù)病人的癥狀所作的診斷往往也具有較高的準(zhǔn)確性,因此給它的權(quán)值也較高,但比醫(yī)學(xué)檢查結(jié)果的稍低。其他兩類(lèi)因素在有關(guān)肺癌的診斷中僅具參考作用,因而所設(shè)的權(quán)值相對(duì)較小。

最后的結(jié)果O為:

O=a1.O1+a2.O2+a3.O3+a4.O4

a1+a2+a3+a4=1

其中Oi,ai,i=1,2,3,4分別為各診斷網(wǎng)的輸出及其對(duì)應(yīng)的權(quán)值。

當(dāng)O>0.5時(shí)最后的診斷結(jié)果為患肺癌,反之則正常。對(duì)所有的病例數(shù)據(jù)經(jīng)上述方法的診斷結(jié)果見(jiàn)表2。

表2 神經(jīng)網(wǎng)絡(luò)對(duì)肺癌診斷結(jié)果分析

神經(jīng)網(wǎng)絡(luò)

診斷結(jié)果 訓(xùn)練數(shù)據(jù) 測(cè)試數(shù)據(jù)

肺癌患者 非肺癌患者 肺癌患者 非肺癌患者

+ 460 2 25 3

- 0 38 1 22

其中對(duì)于訓(xùn)練集,肺癌病人的正確檢出率為100%,非肺癌病人誤診率為5%。對(duì)于測(cè)試集,肺癌病人的正確檢出率為96.2%;非肺癌患者正確檢出率為88%,誤診率為12%。

討 論

1.本研究所采用的人工神經(jīng)網(wǎng)絡(luò)的肺癌診斷方法的結(jié)果較好地符合了已知數(shù)據(jù),具有較高的準(zhǔn)確性,特別是對(duì)于肺癌患者一般都能準(zhǔn)確地做出診斷,有利于肺癌的早期發(fā)現(xiàn)和治療。

2.要想進(jìn)一步提高該方法的準(zhǔn)確性,應(yīng)該注意收集更多更全面的病例數(shù)據(jù)。人工神經(jīng)網(wǎng)絡(luò)主要是利用它能自動(dòng)從數(shù)據(jù)集中抽取函數(shù)的關(guān)系的功能。如果我們所使用的數(shù)據(jù)越多越全面,則其中所蘊(yùn)含的事物本身的規(guī)律性就越強(qiáng),利用人工神經(jīng)網(wǎng)絡(luò)從中所抽取的函數(shù)關(guān)系就越具有普遍性,因而就更準(zhǔn)確。

3.實(shí)現(xiàn)對(duì)肺癌的診斷的關(guān)鍵在于準(zhǔn)確找到罹患肺癌的判定函數(shù),可利用前向網(wǎng)絡(luò)的函數(shù)逼近功能來(lái)實(shí)現(xiàn)。但是這里涉及到兩個(gè)問(wèn)題。首先,由于差別函數(shù)和預(yù)測(cè)率函數(shù)都是利用人工神經(jīng)網(wǎng)絡(luò)從已知的病例數(shù)據(jù)集中抽取出來(lái)的,它實(shí)際反映的是這些數(shù)據(jù)集中輸入輸出對(duì)的映射關(guān)系。因此要想保證診斷具有較高的準(zhǔn)確性,就應(yīng)該使用來(lái)建立函數(shù)關(guān)系的這些數(shù)據(jù)集(稱(chēng)訓(xùn)練集)具有充分的代表性,即這些數(shù)據(jù)應(yīng)基本蘊(yùn)含肺癌診斷的醫(yī)學(xué)原理。這就涉及到如何選擇網(wǎng)絡(luò)合理的訓(xùn)練集及關(guān)鍵的輸入項(xiàng)。另一個(gè)問(wèn)題涉及到神經(jīng)網(wǎng)絡(luò)本身的要求,即網(wǎng)絡(luò)的輸入輸出數(shù)據(jù)值都應(yīng)在區(qū)間(0,1)中。這可以通過(guò)數(shù)據(jù)的編碼和歸一化來(lái)實(shí)現(xiàn)。

4.由于某些原因有些病人的病例數(shù)據(jù)不完整,約占總病例數(shù)據(jù)的10%左右。顯然,如果按照傳統(tǒng)的方法來(lái)建立肺癌病人的診斷模型〔4〕,這些有缺項(xiàng)的數(shù)據(jù)是不太好處理的,但是由于人工神經(jīng)網(wǎng)絡(luò)有較強(qiáng)的容錯(cuò)性,輸入數(shù)據(jù)在某些項(xiàng)上的錯(cuò)誤對(duì)網(wǎng)絡(luò)最終結(jié)果的正確性影響不大。

參考文獻(xiàn)

1.焦李成.神經(jīng)網(wǎng)絡(luò)系統(tǒng)理論.第1版.西安:西安電子科技大學(xué)出版社,1995,3

篇(9)

經(jīng)訓(xùn)練的ANN適用于利用分析振動(dòng)數(shù)據(jù)對(duì)機(jī)器進(jìn)行監(jiān)控和故障檢測(cè),預(yù)測(cè)某些部件的疲勞壽命[2]。非線形神經(jīng)網(wǎng)絡(luò)補(bǔ)償和魯棒控制綜合方法的應(yīng)用(其魯棒控制利用了變結(jié)構(gòu)控制或滑動(dòng)模控制),在實(shí)時(shí)工業(yè)控制執(zhí)行程序中較為有效[3]。人工神經(jīng)網(wǎng)絡(luò)(ANN)和模糊邏輯(FuzzyLogic)的綜合,實(shí)現(xiàn)了電動(dòng)機(jī)故障檢測(cè)的啟發(fā)式推理。對(duì)非線形問(wèn)題,可通過(guò)ANN的BP算法學(xué)習(xí)正常運(yùn)行例子調(diào)整內(nèi)部權(quán)值來(lái)準(zhǔn)確求解[4]。

因此,對(duì)于電力系統(tǒng)這個(gè)存在著大量非線性的復(fù)雜大系統(tǒng)來(lái)講,ANN理論在電力系統(tǒng)中的應(yīng)用具有很大的潛力,目前已涉及到如暫態(tài),動(dòng)穩(wěn)分析,負(fù)荷預(yù)報(bào),機(jī)組最優(yōu)組合,警報(bào)處理與故障診斷,配電網(wǎng)線損計(jì)算,發(fā)電規(guī)劃,經(jīng)濟(jì)運(yùn)行及電力系統(tǒng)控制等方面[5]。

本文介紹了一種基于人工神經(jīng)網(wǎng)絡(luò)(ANN)理論的保護(hù)原理。

1人工神經(jīng)網(wǎng)絡(luò)理論概述

BP算法是一種監(jiān)控學(xué)習(xí)技巧,它通過(guò)比較輸出單元的真實(shí)輸出和希望值之間的差別,調(diào)整網(wǎng)絡(luò)路徑的權(quán)值,以使下一次在相同的輸入下,網(wǎng)絡(luò)的輸出接近于希望值。圖1是人工神經(jīng)Ui的結(jié)構(gòu)模型,圖中Ui為神經(jīng)元內(nèi)部狀態(tài),Qi為門(mén)檻值,Yi為輸出信號(hào),Xi(i=1,2,…,n)為神經(jīng)元接收信號(hào)。該模型可表示為:

式中Wji——連接權(quán)值。

BP算法的神經(jīng)網(wǎng)絡(luò)圖形如圖2所示,設(shè)網(wǎng)絡(luò)的輸入模塊為p,令其作用下網(wǎng)絡(luò)輸出單元j的輸出為Opj。如果輸出的希望值是Tpj,則其誤差為Dpj=Tpj-Opj。若輸入模塊的第i個(gè)單元輸入為Ipi,則就輸入模塊p而言,輸入接點(diǎn)I與輸出接點(diǎn)j之間的權(quán)值變化量為:

ΔWpji=zDpjIpi

式中,z是某一個(gè)常數(shù)。當(dāng)反復(fù)迭代該式時(shí),便可使實(shí)際值收斂于目標(biāo)值[6]。其中隱含層既有輸入網(wǎng)線,又有輸出網(wǎng)線,每一個(gè)箭頭都有一定的權(quán)值。

在神經(jīng)網(wǎng)絡(luò)投運(yùn)前,就應(yīng)用大量的數(shù)據(jù),包括正常運(yùn)行的、不正常運(yùn)行的,作為其訓(xùn)練內(nèi)容,以一定的輸入和期望的輸出通過(guò)BP算法去不斷修改網(wǎng)絡(luò)的權(quán)值。在投運(yùn)后,還可根據(jù)現(xiàn)場(chǎng)的特定情況進(jìn)行現(xiàn)場(chǎng)學(xué)習(xí),以擴(kuò)充ANN內(nèi)存知識(shí)量。從算法原理看,并行處理能力和非線是BP算法的一大優(yōu)點(diǎn)。

2神經(jīng)網(wǎng)絡(luò)型繼電保護(hù)

神經(jīng)網(wǎng)絡(luò)理論的保護(hù)裝置,可判別更復(fù)雜的模式,其因果關(guān)系是更復(fù)雜的、非線性的、模糊的、動(dòng)態(tài)的和非平穩(wěn)隨機(jī)的。它是神經(jīng)網(wǎng)絡(luò)(ANN)與專(zhuān)家系統(tǒng)(ES)融為一體的神經(jīng)網(wǎng)絡(luò)專(zhuān)家系統(tǒng),其中,ANN是數(shù)值的、聯(lián)想的、自組織的、仿生的方式,ES是認(rèn)知的和啟發(fā)式的。

如圖3所示,裝置可直接取線路及其周邊的模擬量、數(shù)字量,經(jīng)模式特征變換輸入給神經(jīng)網(wǎng)絡(luò),根據(jù)以前學(xué)習(xí)過(guò)的訓(xùn)練材料,對(duì)數(shù)據(jù)進(jìn)行推理、分析評(píng)價(jià)、輸出。專(zhuān)家系統(tǒng)對(duì)運(yùn)行過(guò)程控制和訓(xùn)練,按最優(yōu)方式收集數(shù)據(jù)或由分析過(guò)程再收集控制,對(duì)輸出結(jié)果進(jìn)行評(píng)估,判別其正確性、一致性,作出最終判決,經(jīng)變換輸出,去執(zhí)行機(jī)構(gòu)。即使是新型保護(hù),也會(huì)存在著某些功能模塊不正確動(dòng)作的可能,這時(shí)可以過(guò)后人為干預(yù)擴(kuò)展專(zhuān)家系統(tǒng)數(shù)據(jù)庫(kù)或由專(zhuān)家系統(tǒng)作出判別,作為訓(xùn)練樣本訓(xùn)練ANN的這部分功能模塊,改變其某些網(wǎng)線的權(quán)值,以使下次相同情況下減少不正確動(dòng)作的可能。

下面是一個(gè)簡(jiǎn)單的ANN線路保護(hù)例子。當(dāng)電力系統(tǒng)故障時(shí),輸電線路各相、各序電壓、電流也隨之發(fā)生變化,特別是故障后故障相的相電壓和相電流,以及接地系統(tǒng)在接地故障的零序電流的變化有明顯的代表性。比如選輸入層神經(jīng)元個(gè)數(shù)為14個(gè),分別是Uar,Uai,Ubr,Ubi,UcrUci,Iai,Ibr,Ibi,Icr,Ici,Ior,Ioi(下標(biāo)r和i分別代表實(shí)部與虛部),選定輸出層神經(jīng)元個(gè)數(shù)為5個(gè):YA(A相),YB(B相),YC(C相),YO(接地),YF(方向),各輸出值為1,代表選中;輸出值為0,代表沒(méi)選中(YF為0代表反向)。這5個(gè)輸出完全滿足線路方向保護(hù)的需求(沒(méi)考慮正向超越),隱含層神經(jīng)元數(shù)目為2N+1(N為輸入層神經(jīng)元數(shù)目)。訓(xùn)練樣本集包含14個(gè)輸入變量和5個(gè)輸出變量,而測(cè)試樣本集中的樣本則只有14個(gè)輸入變量。選圖4的雙側(cè)電源系統(tǒng)作研究對(duì)象,輸電線路、系統(tǒng)的等值正、零序參數(shù)如圖4所示。

考慮的故障類(lèi)型包括單相接地(K1),兩相短路(K2),兩相接地(K1—1),三相短路(K3)。

對(duì)圖4所示的500kV雙側(cè)電源系統(tǒng)的各種運(yùn)行方式和故障情況建立訓(xùn)練樣本。

在正常狀態(tài)下,令h∠δ=(EM)/(EN),h=1,δ

隨負(fù)荷變化,取為-60°,-50°,-40°,-30°,-20°,-10°,0°,10°,20°,30°,40°,50°,60°,有13個(gè)樣本。故障情況下,δ取值為-60°,-30°,0°,30°,60°,故障點(diǎn)選反向出口(-0km),正向出口(+0km),線路中部(150km),線末(300km)。接地電阻Rg取值0Ω,50Ω,100Ω,150Ω,200Ω,相間電阻Rp取值0Ω,25Ω,50Ω,則共有5×4×(5+3+5×3+3)=520個(gè)樣本。每個(gè)樣本的5個(gè)輸出都有一組期望的輸出值,以此作為訓(xùn)練樣本。而實(shí)際運(yùn)行、故障時(shí),保護(hù)所測(cè)到的電流、電壓極少直接與樣本相同,此時(shí)就需要用到模糊理論,規(guī)定某個(gè)輸出節(jié)點(diǎn)。如YA(A相)在某一取值范圍時(shí),則被選中。

文獻(xiàn)[1]認(rèn)為全波數(shù)據(jù)窗建立的神經(jīng)網(wǎng)絡(luò)在準(zhǔn)確性方面優(yōu)于利用半波數(shù)據(jù)窗建立的神經(jīng)網(wǎng)絡(luò),因此保護(hù)應(yīng)選用全波數(shù)據(jù)窗。

ANN保護(hù)裝置出廠后,還可以在投運(yùn)單位如網(wǎng)調(diào)、省調(diào)實(shí)驗(yàn)室內(nèi)進(jìn)行學(xué)習(xí),學(xué)習(xí)內(nèi)容針對(duì)該省的保護(hù)的特別要求進(jìn)行(如反措)。到現(xiàn)場(chǎng),還可根據(jù)該站的干擾情況進(jìn)行反誤動(dòng)、反拒動(dòng)學(xué)習(xí),特別是一些常出現(xiàn)波形間斷的變電站內(nèi)的高頻保護(hù)。

3結(jié)論

本文基于現(xiàn)代控制技術(shù)提出了人工神經(jīng)網(wǎng)絡(luò)理論的保護(hù)構(gòu)想。神經(jīng)網(wǎng)絡(luò)軟件的反應(yīng)速度比純數(shù)字計(jì)算軟件快幾十倍以上,這樣,在相同的動(dòng)作時(shí)間下,可以大大提高保護(hù)運(yùn)算次數(shù),以實(shí)現(xiàn)在時(shí)間上即次數(shù)上提高冗余度。

一套完整的ANN保護(hù)是需要有很多輸入量的,如果對(duì)某套保護(hù)來(lái)說(shuō),區(qū)內(nèi)、區(qū)外故障時(shí)其輸入信號(hào)幾乎相同,則很難以此作為訓(xùn)練樣本訓(xùn)練保護(hù),而每套保護(hù)都增多輸入量,必然會(huì)使保護(hù)、二次接線復(fù)雜化。變電站綜合自動(dòng)化也許是解決該問(wèn)題的一個(gè)較好方法,各套保護(hù)通過(guò)總線聯(lián)網(wǎng),交換信息,充分利用ANN的并行處理功能,每套保護(hù)均對(duì)其它線路信息進(jìn)行加工,以此綜合得出動(dòng)作判據(jù)。每套保護(hù)可把每次錄得的數(shù)據(jù)文件,加上對(duì)其動(dòng)作正確性與否的判斷,作為本身的訓(xùn)練內(nèi)容,因?yàn)榧词褂袝r(shí)人工分析也不能區(qū)分哪些數(shù)據(jù)特征能使保護(hù)不正確動(dòng)作,特別是高頻模擬量。

神經(jīng)網(wǎng)絡(luò)的硬件芯片現(xiàn)在仍很昂貴,但技術(shù)成熟時(shí),應(yīng)利用硬件實(shí)現(xiàn)現(xiàn)在的軟件功能。另外,神經(jīng)網(wǎng)絡(luò)的并行處理和信息分布存儲(chǔ)機(jī)制還不十分清楚,如何選擇的網(wǎng)絡(luò)結(jié)構(gòu)還沒(méi)有充分的理論依據(jù)。所有這些都有待于對(duì)神經(jīng)網(wǎng)絡(luò)基本理論進(jìn)行深入的研究,以形成完善的理論體系,創(chuàng)造出更適合于實(shí)際應(yīng)用的新型網(wǎng)絡(luò)及學(xué)習(xí)算法[5]。

參考文獻(xiàn)

1陳炳華.采用模式識(shí)別(智能型)的保護(hù)裝置的設(shè)想.中國(guó)電機(jī)工程學(xué)會(huì)第五屆全國(guó)繼電保護(hù)學(xué)術(shù)會(huì)議,[會(huì)址不詳],1993

2RobertE.Uhrig.ApplicationofArtificialNeuralNetworksinIndustrialTechnology.IEEETrans,1994,10(3).(1):371~377

3LeeTH,WangQC,TanWK.AFrameworkforRobustNeuralNetwork-BasedControlofNonlinearServomechannisms.IEEETrans,1993,3(2).(3):190~197

篇(10)

人工神經(jīng)網(wǎng)絡(luò)模擬人腦生物神經(jīng)網(wǎng)絡(luò)系統(tǒng)處理信息的方式,是通過(guò)經(jīng)驗(yàn)而不是通過(guò)設(shè)計(jì)好的程序進(jìn)行學(xué)習(xí)、訓(xùn)練,這些構(gòu)成了人工神經(jīng)網(wǎng)絡(luò)具有模式識(shí)別、預(yù)測(cè)、評(píng)價(jià)和優(yōu)化決策等能力的基礎(chǔ)。本文就神經(jīng)網(wǎng)絡(luò)近年來(lái)在藥劑學(xué)的處方設(shè)計(jì)及優(yōu)化、制備工藝及體內(nèi)體外相關(guān)性評(píng)價(jià)等方面的應(yīng)用做一綜述。

【關(guān)鍵詞】 人工神經(jīng)網(wǎng)絡(luò);藥物制劑

Abstract:Artificial neural networks simulating the process of human brains nerve systems to deal with information,which learning and training date according with the experience other than the designed programme,is the base of the ability that the artificial neural network could be used for pattern distinguish,prediction and optimization etc.This papertbriefly reviewed the application of neural networks in pharmaceutical fields,such as formulation optimization,preparation parameters optimization and in vitro-in vivo correlation evaluation.

Key words:artificial neural networks;pharmaceutic

藥物制劑研究是一個(gè)復(fù)雜的過(guò)程,包括制劑處方,制劑制備工藝及制劑體內(nèi)體外評(píng)價(jià)等,其中任何一個(gè)方面都屬于多因素,多水平的復(fù)雜優(yōu)化問(wèn)題。例如處方設(shè)計(jì)過(guò)程中涉及不同質(zhì)量不同用量的各種敷料配比及壓力、溫度、水分等,這些因素直接影響劑型的安全性和有效性;制劑設(shè)備工藝涉及眾多紛繁復(fù)雜的工藝參數(shù)優(yōu)化,制劑體內(nèi)體外評(píng)價(jià)更是受生物系統(tǒng)的極端復(fù)雜性影響。過(guò)去人們通常依靠某一方面的專(zhuān)家來(lái)承擔(dān)相應(yīng)的工作,免不了受許多經(jīng)驗(yàn)化主觀因素的影響,效率較低,而基于人工智能的神經(jīng)網(wǎng)絡(luò)則很適于處理這類(lèi)復(fù)雜的多變量非線性系統(tǒng),并可通過(guò)網(wǎng)絡(luò)的預(yù)測(cè)能力實(shí)現(xiàn)多因素的同步優(yōu)化[1-3]。

1 神經(jīng)網(wǎng)絡(luò)理論

人工神經(jīng)網(wǎng)絡(luò)(artificial neural network)是一種由大量簡(jiǎn)單處理單元以某種方式相互連接而成,對(duì)連續(xù)的輸入做出狀態(tài)響應(yīng)的動(dòng)態(tài)信息處理系統(tǒng)。它模擬人腦生物神經(jīng)網(wǎng)絡(luò)系統(tǒng)處理信息的方式,通過(guò)經(jīng)驗(yàn)而不是通過(guò)設(shè)計(jì)好的程序進(jìn)行學(xué)習(xí)、訓(xùn)練。因此,人工神經(jīng)網(wǎng)絡(luò)具有人腦的某些重要特性,如聯(lián)想記憶、并行處理、自學(xué)習(xí)、自組織、自適應(yīng)和容錯(cuò)性等能力,這些構(gòu)成了人工神經(jīng)網(wǎng)絡(luò)具有模式識(shí)別、預(yù)測(cè)評(píng)價(jià)和優(yōu)化決策等能力的基礎(chǔ)。

如圖1所示,這是含有一個(gè)隱含層的神經(jīng)網(wǎng)絡(luò)示意圖,其中空心圓圈表示神經(jīng)元,神經(jīng)元是神經(jīng)網(wǎng)絡(luò)(neural network)的基本單元,也稱(chēng)為節(jié)點(diǎn)。每層中可以包含多個(gè)節(jié)點(diǎn),多層節(jié)點(diǎn)之間按一定的方式相互連接構(gòu)成神經(jīng)網(wǎng)絡(luò)。神經(jīng)網(wǎng)絡(luò)的信息處理功能由神經(jīng)元的輸入和輸出、網(wǎng)絡(luò)的拓?fù)浣Y(jié)構(gòu)、連接權(quán)的大小(突觸聯(lián)系強(qiáng)度)以及神經(jīng)元的閾值所決定的。輸入層節(jié)點(diǎn)的輸入變量為自變量(樣本圖1 神經(jīng)網(wǎng)絡(luò)結(jié)構(gòu)示意圖

Fig.1 Delineation of structure of artificial neural networks

參數(shù)),輸出層節(jié)點(diǎn)的輸出變量為應(yīng)變量(目標(biāo)函數(shù)),當(dāng)多個(gè)輸入進(jìn)入神經(jīng)元后,其加權(quán)求和值超過(guò)神經(jīng)元的閾值后會(huì)形成輸出,通過(guò)連接權(quán)連接,傳遞到下一層神經(jīng)元,作為下一層神經(jīng)元的輸入值,這樣按網(wǎng)絡(luò)的拓?fù)浣Y(jié)構(gòu)依次傳遞。根據(jù)神經(jīng)網(wǎng)絡(luò)的計(jì)算原理,每一神經(jīng)元的輸入值將更新變化,最后到達(dá)輸出層。將輸出值與樣本的期望輸出值進(jìn)行比較,計(jì)算出誤差,按學(xué)習(xí)規(guī)律將誤差反向傳播到前一層神經(jīng)元,調(diào)整連接權(quán)大小,重新計(jì)算,再輸出。如此反復(fù),直到訓(xùn)練集樣本輸出誤差和達(dá)到期望值。至此得到固定的連接權(quán)值,就達(dá)到對(duì)未知樣本進(jìn)行預(yù)測(cè)和分析。其中網(wǎng)絡(luò)的信息主要儲(chǔ)存在連接權(quán)中[4]。

根據(jù)神經(jīng)元之間的相互結(jié)合關(guān)系和作用方式,神經(jīng)網(wǎng)絡(luò)模型可以分為很多種,其中反向傳播神經(jīng)網(wǎng)絡(luò)(back-propagation neural network)即BP[5]神經(jīng)網(wǎng)絡(luò)是目前藥劑領(lǐng)域中應(yīng)用最廣泛、計(jì)算能力最強(qiáng)的人工神經(jīng)網(wǎng)絡(luò)模型之一。由于這種網(wǎng)絡(luò)的權(quán)值和閾值調(diào)整采用了反向傳播的學(xué)習(xí)算法,解決了感知器所不能解決的問(wèn)題,可以實(shí)現(xiàn)從輸入到輸出的任意非線性映射。在確定了網(wǎng)絡(luò)的結(jié)構(gòu)后,利用輸入樣本集對(duì)其進(jìn)行訓(xùn)練,即對(duì)網(wǎng)絡(luò)的權(quán)值和閾值進(jìn)行學(xué)習(xí)和調(diào)整。經(jīng)過(guò)訓(xùn)練的BP網(wǎng)絡(luò),對(duì)于不是樣本集中的輸入樣本也能給出合適的輸出,利用這種方式可以使用該網(wǎng)絡(luò)對(duì)未知樣本進(jìn)行預(yù)測(cè)。

2 人工神經(jīng)網(wǎng)絡(luò)在藥劑中的應(yīng)用

2.1 藥物制劑處方設(shè)計(jì)及優(yōu)化

制劑處方設(shè)計(jì)及優(yōu)化是目前神經(jīng)網(wǎng)絡(luò)在藥物制劑中應(yīng)用最多[6-11],也是比較有發(fā)展前景的方向之一,尤其是應(yīng)用于緩控釋制劑的處方優(yōu)化和設(shè)計(jì)中。

梁文權(quán)[12]等將人工神經(jīng)網(wǎng)絡(luò)應(yīng)用于優(yōu)化HPMC緩釋片處方。以藥物的溶解度、含藥量、HPMC的量、HPMC的固有黏度、輔料的量、黏合劑的濃度、溶出儀的轉(zhuǎn)速為神經(jīng)網(wǎng)絡(luò)的輸入,藥物的累計(jì)釋放量作為輸出,采用BP網(wǎng)絡(luò)對(duì)52個(gè)樣本進(jìn)行訓(xùn)練,建立BP神經(jīng)網(wǎng)絡(luò)模型。然后與優(yōu)化算法相結(jié)合實(shí)現(xiàn)對(duì)乙酰氨基酚、甲氧芐氨嘧啶、米諾地爾、氧氟沙星等模型藥物在不同的含藥量、不同轉(zhuǎn)速條件下的處方進(jìn)行優(yōu)化。試驗(yàn)結(jié)果發(fā)現(xiàn)利用神經(jīng)網(wǎng)絡(luò)預(yù)測(cè)藥物的釋放、訓(xùn)練處方和測(cè)試處方的實(shí)測(cè)值和預(yù)測(cè)值能很好吻合,得到的4個(gè)優(yōu)化處方的釋放值均和目標(biāo)值很接近。魏曉紅[13]等選取9種藥物作為模型藥物,按HPMC:糊精=5-0.2∶1配比制成不同釋放度的緩釋片,測(cè)定各個(gè)處方的釋放度,以每個(gè)藥物的溶解度和處方中HPMC∶糊精的配比值作為網(wǎng)絡(luò)的輸入,以釋放度測(cè)量中每個(gè)給定取樣時(shí)間點(diǎn)藥物的累積釋放量作為輸出變量,得到含一個(gè)隱含層,迭代次數(shù)為25次的BP神經(jīng)網(wǎng)絡(luò),通過(guò)優(yōu)化,成功擬定了4個(gè)制劑處方,按此處方制備的緩釋片的實(shí)測(cè)釋放值與神經(jīng)網(wǎng)絡(luò)預(yù)測(cè)值相符。根據(jù)此法,可以從藥物的溶解度設(shè)計(jì)符合一定釋放度要求的緩釋制劑處方。

駱快燕[14]等用干壓包衣技術(shù)制備卡托普利延時(shí)起效延緩片時(shí),用人工神經(jīng)網(wǎng)絡(luò)預(yù)測(cè)釋藥時(shí)滯。運(yùn)用一個(gè)3層BP神經(jīng)網(wǎng)絡(luò),以釋放度作為輸入層神經(jīng)元,以對(duì)應(yīng)時(shí)間點(diǎn)作為輸出層神經(jīng)元,得到一個(gè)含8個(gè)隱含層神經(jīng)元的BP網(wǎng)絡(luò),其中變換函數(shù)為雙曲正切函數(shù),學(xué)習(xí)規(guī)則為歸一化累積Delta規(guī)則,目標(biāo)誤差為0.001,學(xué)習(xí)速率為0.01。神經(jīng)網(wǎng)絡(luò)預(yù)測(cè)釋藥時(shí)滯結(jié)果為后面用SAS進(jìn)行多元線性回歸提供了可靠的數(shù)據(jù),使預(yù)測(cè)優(yōu)化處方很快達(dá)到設(shè)計(jì)要求。

吳濤等[15]在硫酸沙丁胺醇滲透泵控釋片的處方篩選中采用反應(yīng)曲面法和人工神經(jīng)網(wǎng)絡(luò)法優(yōu)化法。選擇包衣液中PEG 1 500含量與包衣膜的厚度為網(wǎng)絡(luò)的輸入因素,以各個(gè)處方1~8小時(shí)的積累釋放度對(duì)實(shí)踐的相關(guān)系數(shù)和各處方8小時(shí)的累積釋放度為輸出因素,在36個(gè)實(shí)驗(yàn)處方中隨機(jī)抽取24個(gè)作為網(wǎng)絡(luò)的訓(xùn)練數(shù)據(jù),其余作為網(wǎng)絡(luò)的測(cè)試數(shù)據(jù)檢測(cè)網(wǎng)絡(luò)預(yù)測(cè)性能,建立了含一個(gè)隱含層的BP神經(jīng)網(wǎng)絡(luò)建立模型,最后根據(jù)預(yù)測(cè)結(jié)果實(shí)現(xiàn)處方優(yōu)化。比較結(jié)果證實(shí)神經(jīng)網(wǎng)絡(luò)方法較優(yōu)。

2.2 藥物制劑制備工藝方面的應(yīng)用

藥物劑型的制備工藝過(guò)程中,存在著諸如溫度、壓力、粘度、流速等諸多影響因素,這些工藝參數(shù)與制劑質(zhì)量指標(biāo)之間往往存在很強(qiáng)的非線性和耦合性,很難用傳統(tǒng)的方法建立有效的質(zhì)量控制模型。基于人工智能的人工神經(jīng)網(wǎng)絡(luò)具有辨識(shí)和逼近任意復(fù)雜非線性系統(tǒng)的能力,而且具有一定的容錯(cuò)能力,可以同步優(yōu)化制備工藝中的多個(gè)工藝參數(shù)[16]。

張宇飛等[17]收集某大型中藥企業(yè)滴丸制劑生產(chǎn)線的100多個(gè)生產(chǎn)批次,每個(gè)批次包含多個(gè)數(shù)據(jù)的樣本作為神經(jīng)網(wǎng)絡(luò)訓(xùn)練集,設(shè)計(jì)了一個(gè)具有三個(gè)層的BP神經(jīng)網(wǎng)絡(luò),輸入層的5個(gè)節(jié)點(diǎn)分別為化料溫度,化料時(shí)間,滴制溫度,滴制速度及冷凝溫度;輸出層的結(jié)點(diǎn)為滴丸成品率,建立了某滴丸制劑過(guò)程工藝參數(shù)與滴丸成品率之間的神經(jīng)網(wǎng)絡(luò)映射模型。然后利用遺傳算法對(duì)模型輸入?yún)?shù)空間進(jìn)行尋優(yōu),搜索使滴丸成品率達(dá)到最優(yōu)時(shí)所對(duì)應(yīng)的工藝參數(shù)值。經(jīng)生產(chǎn)試制,利用優(yōu)化后的工藝參數(shù)值進(jìn)行生產(chǎn),能使該制劑過(guò)程的成品率提高約2.6個(gè)百分點(diǎn),表明利用神經(jīng)網(wǎng)絡(luò)與遺傳算法對(duì)制劑過(guò)程進(jìn)行建模與優(yōu)化是合理的,該項(xiàng)目屬于國(guó)家863高技術(shù)研究發(fā)展計(jì)劃項(xiàng)目。

2.3 藥物制劑體內(nèi)-體外相關(guān)性評(píng)價(jià)的應(yīng)用

建立體內(nèi)外相關(guān)性評(píng)價(jià)方法對(duì)藥物制劑研究非常重要。一個(gè)好的體內(nèi)外相關(guān)性模型應(yīng)能使預(yù)測(cè)值與實(shí)測(cè)值相互吻合,從而用體外的釋藥數(shù)據(jù)預(yù)測(cè)藥物的體內(nèi)過(guò)程,設(shè)計(jì)與已知制劑生物等效的制劑,或者制定藥物制劑的質(zhì)量標(biāo)準(zhǔn)及指導(dǎo)臨床用藥。但是生物系統(tǒng)是極其復(fù)雜的,藥物在體內(nèi)的代謝過(guò)程也是相當(dāng)復(fù)雜的,使得判定藥物療效與生物學(xué)、藥物動(dòng)力學(xué)及藥物分布等各因素之間的關(guān)系非常困難[18]。人工神經(jīng)網(wǎng)絡(luò)是模擬生物神經(jīng)系統(tǒng)對(duì)外界系統(tǒng)的認(rèn)知過(guò)程,它給我們提供了一個(gè)很好的研究體內(nèi)外相關(guān)性的方法[19-20]。

李凌冰[21]等采用人工神經(jīng)網(wǎng)絡(luò)結(jié)合Wagner-Nelson法,研究氯氮平非pH依賴(lài)型緩釋片的體內(nèi)體外相關(guān)性。以處方中HPMC與琥珀酸的用量為神經(jīng)網(wǎng)絡(luò)輸入變量,考慮到緩控釋制劑的特點(diǎn),以2h的血藥濃度,12h的血藥濃度一時(shí)間曲線下面積AUCl2,以及血藥濃度的峰值(max數(shù)據(jù)為輸出,建立了氯氮平非pH依賴(lài)型緩釋制劑處方組成和血藥濃度之間的關(guān)系模型。以此為基礎(chǔ),繪制輸出三個(gè)輸出變量的等高線圖譜,分別在3個(gè)等高線圖譜上標(biāo)記最佳變量所取值的范圍,將3個(gè)圖中的最佳區(qū)域結(jié)合在一起從而求得生物利用度最佳的處方。李凌冰等[22]應(yīng)用人工神經(jīng)網(wǎng)絡(luò)研究紅霉素緩釋微囊的體內(nèi)外相關(guān)性。以明膠為囊材制備紅霉素緩釋膠囊,以體外釋放度的數(shù)據(jù)作為網(wǎng)絡(luò)輸入,血藥濃度數(shù)據(jù)作為網(wǎng)絡(luò)輸出,通過(guò)比較血藥濃度實(shí)測(cè)值與預(yù)測(cè)值的差異考察了網(wǎng)絡(luò)的可靠性,結(jié)果令人滿意。

3 結(jié)語(yǔ)

人工神經(jīng)網(wǎng)絡(luò)技術(shù)作為一種新方法新技術(shù)雖然已在藥劑研究領(lǐng)域取得了一定的進(jìn)展,但仍然有許多問(wèn)題需要進(jìn)一步的研究。例如神經(jīng)網(wǎng)絡(luò)雖然可用于制劑制備工藝參數(shù)的優(yōu)化,但能否利用神經(jīng)網(wǎng)絡(luò)實(shí)時(shí)監(jiān)控工藝過(guò)程以控制質(zhì)量還需要進(jìn)一步探討;人工神經(jīng)網(wǎng)絡(luò)通常需要大量的數(shù)據(jù)訓(xùn)練網(wǎng)絡(luò),但有時(shí)數(shù)據(jù)的獲得比較困難,尤其是體內(nèi)的試驗(yàn)數(shù)據(jù);神經(jīng)網(wǎng)絡(luò)拓?fù)浣Y(jié)構(gòu)的選擇規(guī)律、傳遞函數(shù)的選取,防止過(guò)擬合和陷入局部最優(yōu)等問(wèn)題也需要在模型的建立過(guò)程中考慮;在制劑分析中的方法適應(yīng)性和重現(xiàn)性等基礎(chǔ)工作也還需要深入的研究。

總之,神經(jīng)網(wǎng)絡(luò)是一個(gè)充滿了活力的研究領(lǐng)域,通過(guò)以上的簡(jiǎn)述可以發(fā)現(xiàn)神經(jīng)網(wǎng)絡(luò)在藥劑學(xué)研究領(lǐng)域具有廣闊的應(yīng)用前景,相信隨著神經(jīng)網(wǎng)絡(luò)理論和技術(shù)的不斷發(fā)展,神經(jīng)網(wǎng)絡(luò)以其獨(dú)特的模擬、學(xué)習(xí)、預(yù)測(cè)能力必將在藥劑學(xué)的各個(gè)方面得到更充分的應(yīng)用。

參考文獻(xiàn)

[1]Takayama K,F(xiàn)ujikawa M,Obata Y,et al.Morishita M,Neural Network Based Optimization of Drug Formulations[J].Advanced Drug Delivery Reviews,2003,55(9):1 217-1 231.

[2]Agatonovic-Kustrin S,Beresford R.Basic Concepts of Artificial Neural Networks Modeling and Its Application in Pharmaceutical Research[J].Journal of Pharmaceutical and Biomedical Analysis,2000,22(4):717-727.

[3]K Takayama,A Morva, M Fujikawa,et al.Formula Optimization of Theophylline Controlled-release Tablet Based on Artificial Neural Networks [J].Journal of Controlled Release,2000,68(2):175-186.

[4]Hassoun M.Fundamentals of Artificial Neural Networks[M].The MIT Press,1995:25.

[5]R J Erb.Introduction to Backpropagation Neural Network Computation[J].Pharmaceutical.Research,1993,10(2):165-170.

[6]P.C.Wu,Y.Obata,M.Fujikawa,et al.Simultaneous Optimization Based on Artificial Neural Networks in Ketoprofen Hydrogel Formula Containing O-enthyl-3-butylcyclohexanol as Percutaneous Absorption Enhancer[J].Journal of Pharmaceutical Sciences,2001,90(7):1 004-1 014.

[7]A P Plumb,R C Rowe,P York,et al.The Effect of Experimental Design on the Modeling of a Tablet Coating Formulation Using Artificial Neural Networks[J].European Journal of Pharmaceutical Sciences,2002,16(3):281-288.

[8]Onuki Y,Hoshi M,Okabe H,et al.Formulation Optimization of Photocrosslinked Polyacrylic Acid Modified with 2-hydroxyethyl Methacrylate Hydrogel as an Adhesive for a Dermatological Patch[J].Journal of controlled release,2005,108(2-3):331-340.

[9]Fan T,Takayama K,Hattori Y,et al.Formulation Optimization of Paclitaxel Carried by PEGylated Emulsions Based on Artificial Nneural Network[J].Pharmaceutical Research,2004,21(9):1 692-1 697.

[10]Lim CP,Quek SS,Peh KK.Prediction of Drug Release Profiles Using an Intelligent Learning System:an Experimental Study in Transdermal Iontophoresis[J].J Pharm Biomed Anal,2003,31(1):159-168.

[11]Plumb AP,Rowe RC,York P,et al.Effect of Varying Optimization Parameters on Optimization by Guided Evolutionary Simulated Annealing(GESA)Using a Tablet Film Coat as an Example Formulation[J].European Journal of Pharmaceutical Sciences,2003,18(3-4):259-266.

[12]范彩霞,梁文權(quán).神經(jīng)網(wǎng)絡(luò)多目標(biāo)同步優(yōu)化HPMC緩釋片處方[J].中國(guó)藥學(xué)雜志,2004,39(10):768-771.

[13]魏曉紅,吳建軍,梁文權(quán).神經(jīng)網(wǎng)絡(luò)用于口服緩釋制劑的處方設(shè)計(jì)[J].藥學(xué)學(xué)報(bào),2001,36(9):690-694.

[14]駱快燕,姚彤煒,黃安琪.卡托普利延遲起釋型緩釋片的研制[J].中國(guó)現(xiàn)代應(yīng)用藥學(xué)雜志,2005,22(3):224-228.

[15]吳淘,潘衛(wèi)三,陳濟(jì)民,等.多目標(biāo)同步優(yōu)化法優(yōu)化硫酸沙丁胺醇滲透泵控釋片的制備工藝[J].藥學(xué)學(xué)報(bào),2000,35(8):617-621.

[17]張宇飛,邵秀麗,雷建軍.基于神經(jīng)網(wǎng)絡(luò)和遺傳算法的中藥滴丸制劑過(guò)程建模與優(yōu)化[J].計(jì)算機(jī)工程與應(yīng)用,2005,2(2):191-194.

[18]James AD.Artificial Network Applied to the in Vitro-in Vivo Correlation of an Extended-release Formulation:Initial Trials and Experience[J].Journal of pharmaceutical Science,1999,88(1):154-160.

[19]Fu XC,Chen CX,Wang GP,et al.Prediction of Human Intestinal Absorption Using an Artificial Neural Network[J].Pharmazie,2005,60(9):674-676.

篇(11)

一、引言(研究現(xiàn)狀)

自改革開(kāi)放以來(lái),我國(guó)生產(chǎn)力極大發(fā)展,生活水平總體上得到了提高。但是,地區(qū)間的發(fā)展不平衡始終存在,而且差距越來(lái)越大,不同地區(qū)人民的生活水平也存在顯著的差異。據(jù)此,我們利用自組織人工神經(jīng)網(wǎng)絡(luò)方法對(duì)全國(guó)31個(gè)省市自治區(qū)的人民生活水平質(zhì)量進(jìn)行分析評(píng)價(jià)。

二、指標(biāo)選取與預(yù)處理

1.指標(biāo)選取

遵循合理性、全面性、可操作性、可比性的原則,從以下5個(gè)層面共11個(gè)二級(jí)指標(biāo)構(gòu)建了人民生活質(zhì)量綜合評(píng)價(jià)指標(biāo)體系(如下表所示)。

人民生活質(zhì)量綜合評(píng)價(jià)指標(biāo)體系

2.指標(biāo)預(yù)處理

(1)正向指標(biāo)是指標(biāo)數(shù)據(jù)越大,則評(píng)價(jià)也高,如人均可支配收入,人均公園等。

正向指標(biāo)的處理規(guī)則如下(1):

Kohonen 自組織神經(jīng)網(wǎng)絡(luò)

輸入層是一個(gè)一維序列,該序列有N個(gè)元素,對(duì)應(yīng)于樣本向量的維度;競(jìng)爭(zhēng)層又稱(chēng)為輸出層,該層是由M′N(xiāo)=H個(gè)神經(jīng)元組成的二維平面陣列其神經(jīng)元的個(gè)數(shù)對(duì)應(yīng)于輸出樣本空間的維數(shù),可以使一維或者二維點(diǎn)陣。

競(jìng)爭(zhēng)層之間的神經(jīng)元與輸入層之間的神經(jīng)元是全連接的, 在輸入層神經(jīng)元之間沒(méi)有權(quán)連接,在競(jìng)爭(zhēng)層的神經(jīng)元之間有局部的權(quán)連接,表明競(jìng)爭(zhēng)層神經(jīng)元之間的側(cè)反饋?zhàn)饔谩S?xùn)練之后的競(jìng)爭(zhēng)層神經(jīng)元代表者不同的分類(lèi)樣本。

自組織特征映射神經(jīng)網(wǎng)絡(luò)的目標(biāo):從樣本的數(shù)據(jù)中找出數(shù)據(jù)所具有的特征,達(dá)到能夠自動(dòng)對(duì)樣本進(jìn)行分類(lèi)的目的。

2.網(wǎng)絡(luò)反饋算法

自組織網(wǎng)絡(luò)的學(xué)習(xí)過(guò)程可分為以下兩步:

(1)神經(jīng)元競(jìng)爭(zhēng)學(xué)習(xí)過(guò)程

對(duì)于每一個(gè)樣本向量,該向量會(huì)與和它相連的競(jìng)爭(zhēng)層中的神經(jīng)元的連接權(quán)進(jìn)行競(jìng)爭(zhēng)比較(相似性的比較),這就是神經(jīng)元競(jìng)爭(zhēng)的過(guò)程。相似性程度最大的神經(jīng)元就被稱(chēng)為獲勝神經(jīng)元,將獲勝神經(jīng)元稱(chēng)為該樣本在競(jìng)爭(zhēng)層的像,相同的樣本具有相同的像。

(2)側(cè)反饋過(guò)程

競(jìng)爭(zhēng)層中競(jìng)爭(zhēng)獲勝的神經(jīng)元會(huì)對(duì)周?chē)纳窠?jīng)元產(chǎn)生側(cè)反饋?zhàn)饔茫鋫?cè)反饋機(jī)制遵循以下原則:以獲勝神經(jīng)元為中心,對(duì)臨近鄰域的神經(jīng)元表現(xiàn)為興奮性側(cè)反饋。以獲勝神經(jīng)元為中心,對(duì)鄰域外的神經(jīng)元表現(xiàn)為抑制性側(cè)反饋。

對(duì)于競(jìng)爭(zhēng)獲勝的那個(gè)神經(jīng)元j,其鄰域內(nèi)的神經(jīng)元在不同程度程度上得到興奮的側(cè)反饋,而在Nj(t)外的神經(jīng)元都得到了抑制的側(cè)反饋。Nj(t)是時(shí)間t的函數(shù),隨著時(shí)間的增加,Nj(t)圍城的面積越來(lái)越小,最后只剩下一個(gè)神經(jīng)元,而這個(gè)神經(jīng)元,則反映著一個(gè)類(lèi)的特征或者一個(gè)類(lèi)的屬性。

3.評(píng)價(jià)流程

(1)對(duì)n個(gè)輸入層輸入神經(jīng)元到競(jìng)爭(zhēng)層輸出神經(jīng)元j的連接權(quán)值為(6)式:

(2)獲勝鄰域j*(t),設(shè)定為鄰域函數(shù)(h)t,表示第i個(gè)神經(jīng)元與獲勝神經(jīng)元之間的距離函數(shù)。S2會(huì)隨著學(xué)習(xí)的進(jìn)行而減小,從而鄰域在學(xué)習(xí)初期很寬,隨著學(xué)習(xí)的進(jìn)行會(huì)變窄。因此,權(quán)值隨著學(xué)習(xí)的進(jìn)行從較大幅度調(diào)整向微小幅度調(diào)整變化。鄰域函數(shù)產(chǎn)生了有效的映射作用。其中鄰域函數(shù)的表達(dá)式如下(8)式所示

分析結(jié)果如下:

第一類(lèi):北京,天津,遼寧,上海,江蘇,浙江,廣東

第二類(lèi):福建,山東,湖北,重慶,陜西

第三類(lèi):河北,山西,內(nèi)蒙古,吉林,黑龍江,江西,湖南

第四類(lèi):安徽,河南,廣西,海南,四川,貴州,云南,,甘肅,青海,寧夏,新疆基于分類(lèi)結(jié)果,得知第一類(lèi)中的各地區(qū)的人民生活質(zhì)量最高,主要分布于東部沿海。這些地區(qū)共同點(diǎn)是:工業(yè)和經(jīng)濟(jì)文化實(shí)力雄厚,基礎(chǔ)設(shè)施建設(shè)齊全,醫(yī)療衛(wèi)生事業(yè)、教育水平高度發(fā)達(dá)。

對(duì)于第二類(lèi),他們的生活質(zhì)量相對(duì)于第一類(lèi)次之,但比第三、四類(lèi)的評(píng)價(jià)則較優(yōu)。福建是東南部沿海的經(jīng)濟(jì)大省,山東、湖北、陜西具有較強(qiáng)的工業(yè)實(shí)力和較高的教育水平;重慶市內(nèi)地唯一的直轄市,境內(nèi)有長(zhǎng)江干道,這五省的共同他點(diǎn)在于其工業(yè)實(shí)力較強(qiáng),教育水平發(fā)達(dá),基礎(chǔ)設(shè)施齊全。

第三類(lèi)中的諸多省份均是我國(guó)農(nóng)業(yè)和采礦業(yè)大省,相比前兩類(lèi),他們則是缺少雄厚的工業(yè)基礎(chǔ),但有良好的氣候條件社會(huì)環(huán)境和豐富的自然資源。

第四類(lèi),造成這些地區(qū)的人民生活質(zhì)量較差的原因多且復(fù)雜。就安徽、河南而言,自古以來(lái)河南是華夏文化的中心,安徽是有名的產(chǎn)量大省,是什么因素限制了它們生活水平的發(fā)展還值得考究。廣西,海南,貴州,云南,,等的一個(gè)共性在于自然條件的劣勢(shì)。廣西,海南自古以來(lái)是官員貶庶之地;貴州、則云南困于云貴高原,交通向來(lái)閉塞;、青海更是由于自然環(huán)境惡劣而在各方面的發(fā)展較為欠缺;寧夏、甘肅、新疆則是身居內(nèi)地,生活用水奇缺,種植業(yè)較為薄弱,多以畜牧為主,自古有甘涼不毛之地之說(shuō)。四川則居于天府之國(guó),但人口基數(shù)龐大且發(fā)展不平衡,所以人民生活質(zhì)量也不是很高。

總體而言,此分類(lèi)結(jié)果與實(shí)際基本吻合;但受變量體系等因素的干擾,部分地區(qū)仍然存在疑問(wèn),具體原因還值得進(jìn)一步探討。

五、模型評(píng)價(jià)

網(wǎng)絡(luò)結(jié)構(gòu)簡(jiǎn)單、自組織自學(xué)習(xí)能力強(qiáng)和學(xué)習(xí)速度快是自組織網(wǎng)絡(luò)所具有的優(yōu)點(diǎn),在樣本識(shí)別上具有很強(qiáng)的優(yōu)勢(shì)。此外,它將輸出表現(xiàn)成一維或者二維的概率密度分布,因此運(yùn)用越來(lái)越來(lái)廣泛。對(duì)于實(shí)際中復(fù)雜和高維度的數(shù)據(jù),該網(wǎng)絡(luò)具有較好的適應(yīng)性和識(shí)別性。它本屬于一種無(wú)監(jiān)督的自主競(jìng)爭(zhēng)學(xué)習(xí)的神經(jīng)網(wǎng)絡(luò),網(wǎng)絡(luò)根據(jù)樣本的特征進(jìn)行自組織學(xué)習(xí)競(jìng)爭(zhēng)、聚類(lèi),將高維數(shù)據(jù)映射到低維度的二維平面,能夠較好地在保持?jǐn)?shù)據(jù)拓?fù)浣Y(jié)構(gòu)不變的情況下進(jìn)行數(shù)據(jù)壓縮和識(shí)別。其聚類(lèi)的客觀性,更適用于于處理海量未知數(shù)據(jù)問(wèn)題。以此同時(shí),由于模型的可視化,在人們開(kāi)發(fā)和構(gòu)建新型網(wǎng)絡(luò)變得更加簡(jiǎn)潔,易于被人們接受。

自組織神經(jīng)網(wǎng)絡(luò)的二維拓?fù)溆成鋱D的可視性很強(qiáng),通過(guò)映射圖,可以直接觀察到數(shù)據(jù)的特征。同時(shí),清晰的了解其分類(lèi)情況。但是,傳統(tǒng)自組織特征映射神經(jīng)網(wǎng)絡(luò)采用了向量?jī)?nèi)積、歐氏距離函數(shù)等確定輸入樣本最為相似的連接權(quán)向量,這就要求數(shù)據(jù)必須是連續(xù)的,若數(shù)據(jù)是離散的或者數(shù)據(jù)為順序型或者屬性型,則就不能勝任聚類(lèi)這項(xiàng)任務(wù)。

參考文獻(xiàn):

[1]張建萍,劉希玉.基于聚類(lèi)分析的K-means算法研究及應(yīng)用[J].計(jì)算機(jī)應(yīng)用研究,20075(5):166-168.

[2]么枕生.用于數(shù)值分類(lèi)的聚類(lèi)分析[J].海洋湖沼通報(bào),1994(2):2-12.

[3]劉慧,馮乃琴,南書(shū)坡,王偉.基于粗糙集理論和SOFM神經(jīng)網(wǎng)絡(luò)的聚類(lèi)方法[J].計(jì)算機(jī)與應(yīng)用軟件,200926(8):228-230.

[4]郭偉業(yè),趙曉丹,龐英智,奇志.數(shù)據(jù)挖掘中SOM神經(jīng)網(wǎng)絡(luò)的聚類(lèi)方法研究[J].情報(bào)科學(xué),2009,7(6):874-876.

[5]王家偉,周浩宇,同慶,田宏杰,賈花萍.基于MATLAB的自組織特征映射網(wǎng)絡(luò)的實(shí)際應(yīng)用[J].電子設(shè)計(jì)工程,2013,21(6):47-48.

[6]郭麗華.人工神經(jīng)網(wǎng)絡(luò)基礎(chǔ)[M].哈爾濱:哈爾濱工程大學(xué)出版社,2008.

[7]王國(guó)梁,何曉群.多變量經(jīng)濟(jì)數(shù)據(jù)統(tǒng)計(jì)分析[M].西安:西安陜西科學(xué)技術(shù)出版社,1993.

[8]宋浩遠(yuǎn).基于模型的聚類(lèi)方法研究[J].重慶科技學(xué)院學(xué)報(bào),2008(7):71-71.

[9]何曉群.多元統(tǒng)計(jì)分析[M].3版.北京:北京中國(guó)人名大學(xué)出版社,2012.

亚洲欧美日韩成人_亚洲精品国产精品国产自_91精品国产综合久久国产大片 _女同久久另类99精品国产
亚洲乱码国产乱码精品精天堂 | 欧美日韩成人综合在线一区二区| 久久精品国产清高在天天线| 亚洲一区一卡| 正在播放亚洲一区| 在线亚洲激情| 亚洲午夜一级| 亚洲免费视频成人| 亚洲视频免费看| 亚洲网址在线| 亚洲深夜福利网站| 亚洲影院色无极综合| 午夜久久资源| 国产精品亚发布| 国产精品一区二区久久久 | 欧美大片国产精品| 久久综合久久综合九色| 久久夜色精品国产欧美乱极品| 久久大综合网| 久久久久久**毛片大全| 久久精品一二三区| 久久综合九色综合欧美狠狠| 噜噜噜噜噜久久久久久91| 美女精品自拍一二三四| 免费亚洲电影在线| 欧美黄色小视频| 欧美日韩在线不卡一区| 国产精品国产三级国产aⅴ浪潮| 欧美午夜在线一二页| 国产精品入口夜色视频大尺度| 国产精品免费观看视频| 国产区亚洲区欧美区| 国产一区香蕉久久| 亚洲国产精品va在线观看黑人| 亚洲日本va午夜在线电影| 一本色道久久综合亚洲91| 亚洲在线视频网站| 香蕉久久一区二区不卡无毒影院 | 欧美一区二区视频在线观看2020 | 国产精品视频区| 国内精品国语自产拍在线观看| 激情综合中文娱乐网| 亚洲福利精品| 在线一区二区三区四区五区| 亚洲欧美激情在线视频| 久久精品一本| 亚洲香蕉网站| 久久精品99久久香蕉国产色戒 | 欧美二区不卡| 国产精品高精视频免费| 国产视频观看一区| 亚洲国产欧美在线| 一本久久综合| 午夜国产一区| 亚洲美女一区| 欧美一级大片在线观看| 免费视频一区| 国产精品九色蝌蚪自拍| 精品成人一区二区| 亚洲视频在线观看网站| 亚洲国产精品久久久久秋霞蜜臀| 中文日韩在线视频| 亚洲一区二区三区在线| 午夜精品久久久久久| 亚洲国产精品一区二区久| 亚洲少妇中出一区| 亚洲国产综合视频在线观看| 亚洲五月六月| 美女成人午夜| 国产女人精品视频| 亚洲人成久久| 欧美一区二区免费视频| 一区二区三欧美| 久久久久久有精品国产| 欧美特黄一级大片| 精品电影一区| 午夜电影亚洲| 在线综合亚洲| 狂野欧美性猛交xxxx巴西| 欧美午夜一区二区| 亚洲国产高清高潮精品美女| 亚洲欧美日本视频在线观看| 亚洲免费高清视频| 久久久久**毛片大全| 欧美吻胸吃奶大尺度电影| 在线电影欧美日韩一区二区私密| 制服诱惑一区二区| 日韩网站在线观看| 久久免费偷拍视频| 国产毛片久久| 亚洲色图制服丝袜| 99精品视频网| 欧美14一18处毛片| 国内精品久久久久久久影视蜜臀| 一区二区三区成人精品| 亚洲精品美女在线观看播放| 久久久7777| 国产日韩欧美综合在线| 日韩一二三区视频| 亚洲免费成人av| 欧美xxx成人| 伊大人香蕉综合8在线视| 午夜精品久久久久久久99水蜜桃| 亚洲深夜激情| 欧美日韩激情小视频| 在线观看欧美视频| 久久国产精品99国产精| 久久超碰97中文字幕| 国产乱码精品1区2区3区| 在线亚洲美日韩| 亚洲在线视频观看| 欧美色视频在线| 99v久久综合狠狠综合久久| 亚洲精品美女91| 欧美不卡激情三级在线观看| 韩国成人福利片在线播放| 欧美一区二区三区在线看| 久久国产精品72免费观看| 国产精品欧美激情| 一区二区三区四区蜜桃| 这里只有视频精品| 欧美日韩中文在线观看| 99精品视频网| 亚洲一区二区三区免费观看| 欧美色另类天堂2015| 一区二区三区成人精品| 亚洲欧美另类中文字幕| 国产精品久久久久久久app| 亚洲香蕉成视频在线观看 | 亚洲视频狠狠| 欧美一级播放| 狼狼综合久久久久综合网| 激情久久久久久久| 亚洲国产精品成人| 欧美+日本+国产+在线a∨观看| 在线观看国产欧美| 亚洲看片一区| 欧美日韩在线观看一区二区三区 | 欧美日韩一区二区三区免费| 99视频有精品| 亚洲欧美成人精品| 国产欧美日韩一区二区三区在线| 午夜天堂精品久久久久| 久久久精品国产免大香伊| 国产在线视频欧美| 亚洲国产精品t66y| 欧美激情精品久久久久久变态| 亚洲人成艺术| 亚洲免费在线看| 国产日韩欧美在线| 亚洲国产精品毛片| 欧美精品三区| 国产精品99久久久久久白浆小说| 午夜欧美不卡精品aaaaa| 国产综合久久久久久| 亚洲国产第一页| 欧美理论在线播放| 一区二区三区偷拍| 久久岛国电影| 亚洲国产精品一区在线观看不卡| 一区二区三区久久精品| 国产精品网站在线| 久久动漫亚洲| 欧美精品一区二区三区四区| 亚洲视屏一区| 老鸭窝亚洲一区二区三区| 亚洲日本欧美| 欧美综合国产精品久久丁香| 在线观看一区| 亚洲欧美视频在线观看视频| 国内精品伊人久久久久av影院 | 国产午夜久久| 日韩视频永久免费| 国产精品美女久久| 最新国产乱人伦偷精品免费网站| 欧美日韩国产限制| 欧美在线不卡| 欧美日韩在线免费观看| 久久精品成人| 国产精品qvod| 亚洲黄色免费电影| 国产精品一区二区a| 亚洲精品欧美在线| 日韩视频免费观看高清完整版| 国产精品国产福利国产秒拍| 欧美在线观看视频一区二区三区| 欧美黑人多人双交| 亚洲欧美国产精品va在线观看| 欧美fxxxxxx另类| 亚洲欧美成aⅴ人在线观看| 欧美va天堂va视频va在线| 亚洲在线成人| 欧美啪啪一区| 久久高清国产| 国产伦精品一区二区三区高清| 亚洲另类黄色| 国内精品视频在线播放| 亚洲欧美bt| 日韩亚洲综合在线| 欧美大尺度在线观看|