成人亚洲免费_成人在线免费观看网站_啊啊啊射了视频网站_在线精品国产欧美_国产亚洲成年网址在线观看_日韩一区二区在线免费_98在线视频_2019最新中文字幕_色久优优欧美色久优优_亚洲欧洲一区

歡迎來到優發表網

購物車(0)

期刊大全 雜志訂閱 SCI期刊 期刊投稿 出版社 精品范文

信息評價方法范文

時間:2023-07-31 16:42:32

序論:在您撰寫信息評價方法時,參考他人的優秀作品可以開闊視野,小編為您整理的7篇范文,希望這些建議能夠激發您的創作熱情,引導您走向新的創作高度。

信息評價方法

第1篇

論文摘要:本文從組織方法的角度,探討了開展醫院信息化水平綜合評價方法的選擇原則、運用方法的策略和應用評價方法的論點等.為在實施評價前制定評價規則、工作程序、實施細則等提供了方法依據。

1選擇評價方法應遵循的基本原則

醫院信息化水平測度評價方法的科學性、實用性和可操作性.是對順利實施評價的前提。我們對評價方法的選擇和確定遵循”方法科學、先進適用、制度規范、操作簡便”的基本原則,取得了良好的應用效果。

1. 1方法科學的原則所謂方法科學是指評價方法一方面要真實反映醫院信息化基本規律,另一方面也要反映信息化構成要素本身的規律,力求符合客觀現實。屬于技術類的評價要符合信息技術發展的規律,非技術類的評價要符合有關類別本身的發展規律。評價方法要達到”四個適應”:即評價方法要與評價標準相適應,要與評價內容相適應,要與評價指標體系相適應,要與醫院信息化客觀現實相適應。有關國家、省市、企業和其它行業的信息化評價方法很多,我們主要參照企業信息,化某些評價方法,結合醫院信息化客觀實際.依據類比淪、調整論和預測論,并根據不同的評價指標.選用綜合評分分析法、功效系數法、綜合分析判斷法等作為主要評價方法。

1.2先進適用的原則所謂先進適用的原則,是指評價方法對被評價的對象具有先進性和適用性。評價方法的先進性表現在:一是能夠適應定性評價和定量評價:二是對評價指標能夠實現自動測算、分析、排序;三是能夠將評價結果與醫院實際相吻合。所謂評價方法的適用性表現在:能夠適應不同規模的醫院,適應不同的評價環境。先進性和適應性結果如何,必須經過評價對象的技術指標來考察、測試,以驗證其先進性;結合不同評價條件來考察、驗證它的適用性;通過實際測試驗證,認為能夠達到既定的評價標準的,就采用,臺則,予以淘汰。當然,評價方法本身需要隨著信息化的發展和信息環境的不斷變化,而不斷調整、修改、完善和更新。

1.3制度規范的原則嚴格規范的評價制度,是評價工作必須遵守的基本規范和行為準則,同時,也是保障評價工作客觀公正的重要措施。醫院信息化水平測算評價.是一件十分嚴肅而又科學的工作。首先必須制定嚴格、統一的評價規則,以規定評價體系的基本范疇、工作內容、組織原則等,它是評價組織工作的基本制度。其次,還要制定評價操作實施細則,以規定評價的工作程序、指標體系、評價方法、文本格式、評價人員資格職責等,它是實施評價操作的行為規范。第三,還必須制定嚴格的評價標準,規定實施評價的指標標準、計分方法、指標解釋等,是實施評價的基本依據。

1. 4操作簡便的原則整個評價工作的操作程序、評價方法、指標體系等都要既能達到評價的目的,又要簡單易行、可操作性強,不能繁雜臃腫難以運作。為了確保評價操作的合理性和準確性,提高評價工作效率,便于推廣使用,我們充分利用信息技術優勢,配套設計了評價操作軟件,從錄人數據到形成評價結果,能夠在很短的時間內完成。

2評價方法的選擇策略

醫院信息化綜合水平評價方法的多樣性提供了嚴謹的選擇途徑,其方法的選擇除遵循上述原則外,還必須注重以下策略的運用。

2. 1評價方法與評價標準相適應的策略由于評價標準決定著應該評價的指標類型,每一種指標類型都有特定的基礎一邀據來源,并有著特定的主、客觀影響因素,如果評價方法不能很好地對應評價標準,將會造成評價結果的錯誤。換句話說,每一種指標類型可能有多種評價方法,但每種評價方法未必能夠達到評價標準的要求,必須經過反復測算、比較,確定其中一種最理想的方法為該指標類型的評價方法。另外,需要說明的是評價標準與評價方法是兩個不同層次的概念:評價標準是“評什么”,具有排他性,對評價方法具有約束性;而評價方法是“怎么評”,具有多樣性和替代性,評價方法必須服從于評價標準。這兩個概念之間的關系必須處理妥當,否則,在實際評價工作中容易出現張冠李戴、混淆是非,以方法代替標準,以技術方法的多樣性模糊公允標準的確定性,直接影響評價工作的公正性和合理性。

2. 2評價方法與評價對象相適應的策略醫院信息化水平評價體系有四個部分,其屬性既有看得見、摸得著的“硬環境”,如信息基礎設施、信息技術應用情況等,又有看不見、摸不著的“軟環境”,如信息資源開發利用、信息保障條件等,需要采用不同的評價方法,評價不同的對象。換言之,評價對象的屬性不同,要求評價的方法也不盡相同。此外,評價對象的信息化作用狀態不同,也對評價方法的要求不同。由此可見,在進行評價方法的選擇時,必須根據評價對象反復衡量、慎之又慎,只有認為適合評價對象時方可采納,以免造成事半功倍的后果。

2. 3評價方法與評價流程相適應的策略評價流程是針對一個確定的評價對象,從數據、信息、資料的搜索整理,到選擇特定的方法對數據進行分析、處理。最終得出評價值的過程。完成這個評價流程可以用一種評價方法進行到底,也可以用其它評價方法穿行,如橫向穿插、縱向穿插、橫縱交插等。對同一評價對象采用不同方法分別評價。要求這些方法必須具有互補性、互斥性。實踐證明。采用兩三種評價方法分評互驗是最為合適的。

2. 4評價方法與不同評價途徑相適應的策略醫院信息化水平評價的各種方法都需要特定的數據資料支持,也有特定的規程實施運作。盡管它們各具特色,但是都會具有各自的局限和不足。因此,要解決單一方法、單一途徑在運用范圍上的有限性,以及評價準確率方面的局限性,必須將各種方法、不同途徑配合使用,才能擴展評價的可行性,才一能提高評價的準確性。由于對評價結果要進行相互驗證,綜合評價,因此,在選擇評價方法時對不同的評價途徑要統籌兼顧、通盤考慮,以更好地服從和滿足評價標準的要求。就是說,假如,一種評價途徑里有多種評價方法,采取.‘殊途同歸”的辦法。至于某項評價結果需要從兩個或三個途徑來相互驗證。

一方面要看評價數據的質量和方法是否適用性強;另一方面還要參考信息化構成要素本身的性質及其對評價方法的靈敏度。總體來說評價方法與評價途徑要相互支持、密切配合、靈活運用、融為一體。

2. 5評價方法與醫院特色相適應的策略醫院信息化與其他行業單位的信息化性質有許多相同的規律。但是,醫院畢竟與其它行業有著本質的區別。所以,在選擇評價方法時,既要參考、借鑒其他行業評價理論和方法,又要突出醫院信息化的特色,合理選擇適合醫院特色的信息化水平測度評價指標。

3評價方法的應用論點

醫院信息化水平的評價方法是遵循總體評價方案相關的思路。完成其評價任務的技術手段,是實現總體評價方案的具體形式_當前。有關其他行業信息化水平評價方法很多,如何將其他行業信息化水平評價方法移植到醫院信息化評價之中,并有效地借鑒、改良、歸納和運用這些方法,把握其規律性。是值得深究的問題。目前,涉及醫院信息化水平訂價方法可以分為以下幾個方面:

3..1類比論類比是根據兩個對象的某些屬性相同,推出它們的其它屬性也可能相同的間接推理。類比應用在醫院信息化評價中,就是選擇具有較好可比性的對象,參照類比指標。按照評價對象的差異因素相應調整指標系數。類比把評價對象與參照指標對照起來,把可比性建立在重要因素基本相同的基礎上,并就其具有差異的因素確定適當的系數,調整參照指標系數,由已知的參照指標系數得出未知的評價對象系數。

3. 2調整論這是根據醫院信息化發展規律,把局部潛在的因素調整為全局的表現因素。妥善處理”點”與’‘面”的關系。按照”點”上評價的有關資料,調整“面”上的相關數據,求得‘’面”上綜合水平評價指標值。

3. 3預測論預測是對未來事件的陳述。是根據過去和現在的狀況。依照事物發展過程固有的規律性來揭示將來的狀況。醫院信息北水平評價目的之一就是通過評價醫院信息化現狀,預測醫院信息化發展趨勢。如對信息技術應用的預測、信息政策法規的預測、醫院信息化發展前景的預測等等。

4評價組織工作方法

4.1制定評價工作方案評價工作方案是進行評價活動的具體工作計劃和人員、時間安排。具體包括以下內容:評價對象、評價目的、評價依據、評價時間安排、擬用的評價方法、選用的評價標準、人員組成及分工、評價工作要求等。

4. 2確定評價工作程序評價工作程序是從確定評價對象到完成整個評價工作的過程。首先,由上級主管部門確定評價對象,下達評價通知書,組成評價工作組,做好評價前的組織準備工作。其次,由評價工作組制定評價工作方案,做好評價所需表格和文書的準備工作,收集整理相關資料。第三,根據具體的評價方案和評價工作程序,展開評價工作。第四,匯總評價數據,分析評價結果,撰寫評價工作報告。呈報主管部門。

第2篇

 

關鍵詞:醫院信息化;總體水平;綜合評價;方法

 

1選擇評價方法應遵循的基本原則

    醫院信息化水平測度評價方法的科學性、實用性和可操作性.是對順利實施評價的前提。我們對評價方法的選擇和確定遵循”方法科學、先進適用、制度規范、操作簡便”的基本原則,取得了良好的應用效果。

1. 1方法科學的原則所謂方法科學是指評價方法一方面要真實反映醫院信息化基本規律,另一方面也要反映信息化構成要素本身的規律,力求符合客觀現實。屬于技術類的評價要符合信息技術發展的規律,非技術類的評價要符合有關類別本身的發展規律。評價方法要達到”四個適應”:即評價方法要與評價標準相適應,要與評價內容相適應,要與評價指標體系相適應,要與醫院信息化客觀現實相適應。有關國家、省市、企業和其它行業的信息化評價方法很多,我們主要參照企業信息,化某些評價方法,結合醫院信息化客觀實際.依據類比淪、調整論和預測論,并根據不同的評價指標.選用綜合評分分析法、功效系數法、綜合分析判斷法等作為主要評價方法。

1.2先進適用的原則所謂先進適用的原則,是指評價方法對被評價的對象具有先進性和適用性。評價方法的先進性表現在:一是能夠適應定性評價和定量評價:二是對評價指標能夠實現自動測算、分析、排序;三是能夠將評價結果與醫院實際相吻合。所謂評價方法的適用性表現在:能夠適應不同規模的醫院,適應不同的評價環境。先進性和適應性結果如何,必須經過評價對象的技術指標來考察、測試,以驗證其先進性;結合不同評價條件來考察、驗證它的適用性;通過實際測試驗證,認為能夠達到既定的評價標準的,就采用,臺則,予以淘汰。當然,評價方法本身需要隨著信息化的發展和信息環境的不斷變化,而不斷調整、修改、完善和更新。

1.3制度規范的原則嚴格規范的評價制度,是評價工作必須遵守的基本規范和行為準則,同時,也是保障評價工作客觀公正的重要措施。醫院信息化水平測算評價.是一件十分嚴肅而又科學的工作。首先必須制定嚴格、統一的評價規則,以規定評價體系的基本范疇、工作內容、組織原則等,它是評價組織工作的基本制度。其次,還要制定評價操作實施細則,以規定評價的工作程序、指標體系、評價方法、文本格式、評價人員資格職責等,它是實施評價操作的行為規范。第三,還必須制定嚴格的評價標準,規定實施評價的指標標準、計分方法、指標解釋等,是實施評價的基本依據。

1. 4操作簡便的原則整個評價工作的操作程序、評價方法、指標體系等都要既能達到評價的目的,又要簡單易行、可操作性強,不能繁雜臃腫難以運作。為了確保評價操作的合理性和準確性,提高評價工作效率,便于推廣使用,我們充分利用信息技術優勢,配套設計了評價操作軟件,從錄人數據到形成評價結果,能夠在很短的時間內完成。

2評價方法的選擇策略

    醫院信息化綜合水平評價方法的多樣性提供了嚴謹的選擇途徑,其方法的選擇除遵循上述原則外,還必須注重以下策略的運用。

2. 1評價方法與評價標準相適應的策略由于評價標準決定著應該評價的指標類型,每一種指標類型都有特定的基礎一邀據來源,并有著特定的主、客觀影響因素,如果評價方法不能很好地對應評價標準,將會造成評價結果的錯誤。換句話說,每一種指標類型可能有多種評價方法,但每種評價方法未必能夠達到評價標準的要求,必須經過反復測算、比較,確定其中一種最理想的方法為該指標類型的評價方法。另外,需要說明的是評價標準與評價方法是兩個不同層次的概念:評價標準是“評什么”,具有排他性,對評價方法具有約束性;而評價方法是“怎么評”,具有多樣性和替代性,評價方法必須服從于評價標準。這兩個概念之間的關系必須處理妥當,否則,在實際評價工作中容易出現張冠李戴、混淆是非,以方法代替標準,以技術方法的多樣性模糊公允標準的確定性,直接影響評價工作的公正性和合理性。

2. 2評價方法與評價對象相適應的策略醫院信息化水平評價體系有四個部分,其屬性既有看得見、摸得著的“硬環境”,如信息基礎設施、信息技術應用情況等,又有看不見、摸不著的“軟環境”,如信息資源開發利用、信息保障條件等,需要采用不同的評價方法,評價不同的對象。換言之,評價對象的屬性不同,要求評價的方法也不盡相同。此外,評價對象的信息化作用狀態不同,也對評價方法的要求不同。由此可見,在進行評價方法的選擇時,必須根據評價對象反復衡量、慎之又慎,只有認為適合評價對象時方可采納,以免造成事半功倍的后果。

2. 3評價方法與評價流程相適應的策略評價流程是針對一個確定的評價對象,從數據、信息、資料的搜索整理,到選擇特定的方法對數據進行分析、處理。最終得出評價值的過程。完成這個評價流程可以用一種評價方法進行到底,也可以用其它評價方法穿行,如橫向穿插、縱向穿插、橫縱交插等。對同一評價對象采用不同方法分別評價。要求這些方法必須具有互補性、互斥性。實踐證明。采用兩三種評價方法分評互驗是最為合適的。

2. 4評價方法與不同評價途徑相適應的策略醫院信息化水平評價的各種方法都需要特定的數據資料支持,也有特定的規程實施運作。盡管它們各具特色,但是都會具有各自的局限和不足。因此,要解決單一方法、單一途徑在運用范圍上的有限性,以及評價準確率方面的局限性,必須將各種方法、不同途徑配合使用,才能擴展評價的可行性,才一能提高評價的準確性。由于對評價結果要進行相互驗證,綜合評價,因此,在選擇評價方法時對不同的評價途徑要統籌兼顧、通盤考慮,以更好地服從和滿足評價標準的要求。就是說,假如,一種評價途徑里有多種評價方法,采取.‘殊途同歸”的辦法。至于某項評價結果需要從兩個或三個途徑來相互驗證。

一方面要看評價數據的質量和方法是否適用性強;另一方面還要參考信息化構成要素本身的性質及其對評價方法的靈敏度。總體來說評價方法與評價途徑要相互支持、密切配合、靈活運用、融為一體。

2. 5評價方法與醫院特色相適應的策略醫院信息化與其他行業單位的信息化性質有許多相同的規律。但是,醫院畢竟與其它行業有著本質的區別。所以,在選擇評價方法時,既要參考、借鑒其他行業評價理論和方法,又要突出醫院信息化的特色,合理選擇適合醫院特色的信息化水平測度評價指標。

第3篇

關鍵詞:信息生態;新媒體信息;評價指標

隨著時代的發展,人們對于信息的使用和需求越來越大。在這一背景下,居于生態學的背景下針對人類工作生活中所接觸到的信息進行系統性的搜集和處理,對于信息的利用效率提升具有極大的促進作用。另一方面,信息技術在助推現代社會發展之時,同時也為人們的日常工作生活帶來了一些比較嚴重的負面影響,即引發了新型的生態問題。基于此,針對信息生態視角下新媒體信息素養評價指標及評價方法這一課題進行深入研究,具有重要現實意義。

一、信息生態視角下新媒體信息素養

信息素養主要是指,在現代化信息社會中,人們在解決問題時對于信息使用的技術和能力。信息素養的內容主要包括發現、理解、信息,并對信息進行更好的創新和使用,或者是直接參與新知識的探索和社群學習的綜合能力的集合[1]。另一方面,也有一部分學者對信息生態下的新媒體信息素養進行了重新定義:在互聯網時代中,信息素養應該是具備能夠獨立地將信息的獲取、評價、整合以及利用一系列過程單獨完成的一種能力,同時,在此種能力的支配下,還能夠將整理出的結果用于全新知識體系的構建中,使其成為全新的信息資源。

二、信息生態視角下新媒體信息素養評價指標構建

(一)理論依據

在我國,第一個相對比較完整的信息素養能力體系是《北京地區高校信息素質能力指標體系》。在該體系中,明確地指出了信息素養評價評價指標在信息源的選擇和識別方案,并就信息意識進行了比較詳細的分析,分析了信息意識中應該包含信息敏感度、應用和價值意識,同時判斷意識也十分重要[2]。另一方面,我國現階段中對于信息知識的認知也有了較大的進步和提升,從而使得信息檢索、工具、法律等方面得以完善,最終為全新新媒體信息素養評價指標構建奠定堅實的基礎。

(二)評價指標構建內容

1.新媒體信息知識。在當前的新媒體環境中,人們要想獲取信息,拓展應用渠道,就必須提升自身的信息素養。只有這樣,才能在信息搜集之前制定完善的將要檢索的知識類型和此次信息的檢索范圍。與此同時,人們還應該就當前的新媒體環境中知識產權等信息法律相關知識借以了解和解讀。2.新媒體信息搜索技術。一般情況下,新媒體信息搜索技術的應用,可以在人們面對海量信息之時進行專業性的搜索[3]。以美食這一主題為例,為了能夠更加充實地對于主題內容進行了解,搜索時應該將搜索的范圍拓展到大眾點評、美團評價等渠道之上,而在有關于某一影視劇作評價時則需要拓展到票房、豆瓣、貓眼等渠道之上。除此之外,在針對某一行業進行搜索評價時,搜索的信息不能僅是局限于文字,而是應該將更多的視頻、音頻等信息搜索技術納入搜索范圍。3.新媒體信息處理技術。伴隨著全球網絡化時代的到來,云儲存已經成為各個行業工作中的重要文件的主要存儲問題,同時數據挖掘技術的應用價值也越來越高。在新媒體環境下,想要實現信息生態化發展,就必須將信息素養列入現代人必備技能中,包括使用網盤、云筆記軟件、云空間等新媒體信息處理技術[4]。期間,在進行智能移動端和計算機之間的信息傳輸轉換編輯時,也對信息使用人員具有極高的信息素質要求。

三、信息生態視角下新媒體信息素養評價方法

在進行信息生態視角下新媒體信息素養評價方法分析時,本文中主要采用的是模糊綜合評級法,此種方法的應用,能夠很好地對新媒體信息素養原本的難以量化問題、非確定性問題進行綜合評價。

(一)確定評價對象

1.因素集。在應用模糊綜合評級法對新媒體信息素養進行評價時,其因素集主要是由以下內容構成:(1)信息,一級指標是新媒體信息意識、新媒體信息知識,前者二級指標是信息應用、判斷、價值意識,后者二級指標是信息檢索、工具、法律知識。在進行指標描述時,新媒體信息意識是指有意識地利用信息解決問題,新媒體信息知識是指了解各類信息檢索工具。(2)信息技術,一級指標是新媒體信息搜索技術、新媒體信息處理技術,前者二級指標是信息垂直、社會化、跨媒體搜索,后者二級指標是信息云儲存、數據分析技術。在進行指標描述時,新媒體信息搜索技術是指通過信息搜索技術應用了解行業信息,新媒體信息處理技術是指對搜索到的信息進行存儲處理。(3)新媒體環境,一級指標是新媒體環境,二級指標是電子設備、公共信息設備、移動互聯網、網絡社區,指標描述內容包括通過各類電子設備促使人們更加適應新媒體環境。2.評語集。在信息生態視角下,新媒體信息素養評價指標的評語集主要是指,全面性地針對不同層次的因素導致的評價結果進行直接性的描述,針對描述內容,對模型中的不同因素進行風級劃分,共分為三個等級,分別是差、一般、好。

(二)評價矩陣運算

在矩陣運算過程中,需要全面性地針對模糊合成算子將權重向量與模糊關系矩陣兩者進行有效的合成,繼而得出更加明確的個體評價對模糊綜合評價結果的向量,公式為:新媒體信息素養評價結果=權重向量*模糊關系矩陣。

四、實證分析

(一)樣本選取

在本次課堂研究中,為了能夠更好地提升研究主題的價值,在進行研究樣本的選擇時,選用的是信息使用群體比例最大的高校學生,通過網絡郵件問卷發放的方式,對選定的北京地區五所高校學生進行信息素養抽樣調查,分別為北方工業大學、首都師范大學、北京語言大學、北京工商大學以及北京中醫藥大學,共計調查1000名學生,并邀請10名新媒體信息素養課題專家針對調查對象的信息素養進行評價。在整個樣本選取過程中,必須嚴格秉承數據真實可靠、評價公正客觀的原則,尤其是在樣本選取上,必須遵從隨機抽取原則。

(二)分析過程

在進行新媒體信息素養的評價時,主要應用層次分析法進行評價,具體的評價過程為:(1)邀請10名信息素養課題專家,在相互不干擾的基礎上對測評體系進行分層,構造完善的判斷矩陣。(2)運用Excel軟件進行權重向量求值,得出具體的權重指標。(3)計算平均隨機一致性指標,保障數據指標的精準性和可靠性。(4)由10名專家對所有參與調查的學生進行評價,將評價結果進行整理,將結果按照不同等級統計出來,共分為三個等級,分別是差、一般、好。

第4篇

關鍵詞:信息系統;評價方法;德爾菲法

隨著互聯網技術的飛速發展以及工業4.0的到來,信息系統的開發與應用成為當下最熱門的領域。信息系統的評價作為信息系統實施的一個重要步驟,一直是人們所研究和探討的方向。信息系統的評價是通過比較實際指標和計劃指標來對系統進行全面的分析、估測和審評,判斷系統在需求實現上完成情況,以及系統建成后所帶來的效益和影響。信息系統的評價一方面是為了提高信息系統實施的成功率,破除曾甚囂一時的“IT黑洞”一說,另一方面也是為下一次的系統開發累計改進經驗。但是信息技術的突飛猛進以及環境的變化不定讓信息系統評價出現更多視角和指標,使得信息系統的評價變得更加復雜和困難。

1 信息系統評價的特點

(1)信息系統的評價不同于普通的建筑工程項目的評價,它的費用和成本投資不是一次性的或者是對看得見摸得著的硬件投資,信息系統的成本費用會有很多其他不明顯的費用,比如軟件運行開發費用,軟件維護費用,并且這些費用會隨著時間的增長比例越來越大。[1]

(2)信息系統的效益評價較其他項目評價更加滯后,并且有很強的相關性和不明顯性,信息系統在開發運行成功之后相當一段長的時間是看不到它能帶來的效益的,而且信息系統的效益大小跟開發人員技術、用戶使用的技術水平有很大相關性。

(3)信息系統評價的復雜性。信息系統的好壞成敗因素有很多,不再僅僅是技術層面的評價,而是包括技術、組織、管理等多種因素結合的評價體系。信息系統評價的復雜性在于三個方面:信息系統的多主體性,多層次性,多目標性。[2]

2 信息系統評價的方法

目前常用的評價方法有層次分析法、模糊綜合評判法、多因素加權平均法、德爾菲法、神經網絡法等。[3]

(1)層次分析法。層次分析法是將一個決策問題分為多個目標或準則,再分多個目標或準則的若干層次,然后根據層次元素之間影響的關系和比重確定每個層次中元素對上一層次某元素的權重,最后通過逐層加權求和得到最終權重,此權重最大者即為最優決策。層次分析法是一種簡單實用的決策方法,適用于目標多、準則多、時期多且結構化特性不明顯的系統評價,但是層次分析法在指標過多時權重難以確定,而權重的確定直接影響最終決策或評價的結果,所以層次分析法在權重確定上存在一定的不足。[4]

(2)模糊綜合評判法。模糊綜合評判法首先需要構建模糊綜合評判指標,指標的構建涉獵廣泛,考量全面,直接影響評判的準確性,然后構建權重向量和評價矩陣,評價矩陣的建立需要選擇合適的隸屬函數,最后根據合成因子進行計算合成,并對結果做出解釋。模糊綜合評判法將定性與定量結合,做到了對評價對象的多層次多角度全面的綜合評價,使得評價結果可靠性得以提高。但是模糊綜合評價法的指標體系難以涉及全面,這就可能導致最后結果的偏差。

(3)多因素加權平均法。多因素加權平均法是由清華大學侯炳輝教授提出的一種簡單易用的綜合評價方法。該法首先請專家對每個指標進行評判并打出一個權重值,根據專家權威性給出專家權重,由專家權重和專家給出的權值求得該指標應有的權重。然后由專家對整個系統進行評價,對比指標體系中的標準,打出相應分值,最終求得該系統的得分。[2]此方法簡單通用,但是只能得出系統優良好壞,無法知道系統的各項各層次之間的聯系和細節。在系統改進和優化上無法給出實質性的評價。

(4)德爾菲法。德爾菲法又稱專家意見法,是由調查人員以函件的形式聯系各個專家,將調查表發給他們,而他們之間互不認識,互不通信,互不討論,他們只能和調查人員有接觸,然后通過多次回收整理調查表,多輪次征詢專家的意見,最后匯總趨于集中的專家意見,作為評判的結果。而這其中專家的選擇可以是多方面的,可以是用戶,可以是技術人員或者各行各業的人士,集思廣益,揚長避短,提高了評價準確性,但是評判標準缺乏嚴格的科學分析,最終獲得的一致意見,仍可能帶有一定隨大流的主觀性。[5]

3 信息系統評價方法的改進

信息系統評價的方法有很多種,每種方法都有各自的優缺點,信息系統評價的準確性和可靠性對信息系統的優化和改進有著不可磨滅的作用,基于提高信息系統評價的準確度的思考,信息系統評價方法的改進工作是當前刻不容緩的任務,我們可以將兩種或兩種以上的方法合并使用,取長補短,綜合利用。例如在此簡單介紹將多因素加權平均法和德爾菲法結合的一種方法。

(1)按照信息系統所需要的知識范圍,確定專家,組成專家小組。

(2)向所有專家提出信息系統評價有關的問題和要求,并附上有關這個信息系統的所有背景材料,以及為所有專家演示并講解這個信息系統,同時請專家親自體驗。

(3)各個專家根據他們的體驗了解或者專業知識,對提供的指標根據重要性打一個權重,再請每個專家分別對被評價系統的每個指標項進行打分。根據專家的打分表求得每個指標的權重值。

(4)把每位專家的打分表匯總整理,列成表格,但是不列出專家姓名,將這個結果再次分發給所有專家,讓專家對比自己和別人的意見,參考整理,反思修改,再一次打分。

(5)將所有專家的打分表收集起來,匯總,再次分發給各位專家,以便做第二次修改。逐輪收集分數并為專家反饋信息是德爾菲法的主要環節。收集分數和信息反饋一般要經過三、四輪。在向專家進行反饋的時候,只給出指標權重和指標得分,但并不說明給出分數的專家的具體姓名。這一過程重復進行,直到每一個專家不再改變自己的分數為止。

(6)對專家的評價進行綜合處理。得出最后結論,總結評價該信息系統。

4 結束語

在如今這個互聯網大數據的時代,不管是一個企業的信息系統還是政府機關的信息系統都關乎這個企業或社會的發展,信息系統的評價是信息系統發展的關鍵步驟,信息系統的評價并不是件容易的事情,它包含系統開發的技術,人員,管理,以及系統使用的用戶的技術水平和積極性等方面。并且信息系統的評價目前大多數都還處于定性分析的階段,未來信息化更加發達的時代能不能做到定量分析評價依然是個發展和研究的空間。建立完善的信息系統評價指標以及評價方法將對信息系統的發展,信息資源的利用以及信息系統經濟效益的發揮起到極大的促進作用。

參考文獻

[1]侯炳輝,程佳惠,曹慈惠.信息系統評價體系及評價方法[J].中國管理科學,1993(3).

[2]仲秋雁,陸牡丹.企業信息系統評價的復雜性研究[J].科技管理研究,2004,24(1):67-69.

[3]張翠玲.信息系統評價研究[J].情報探索,2006(8):61-63.

[4]王艷瑋,王娟.基于AHP的信息系統綜合評價[J].現代情報,2011,31(10):42-46.

第5篇

關鍵詞:網絡信息資源;評價方法;定性分析;定量分析

中圖分類號:G250.73 文獻識別碼:A 文章編號:1001-828X(2017)003-00-02

互聯網的迅速普及帶來了豐富的網絡信息資源,但這些網絡信息資源具有海量性、無序性和無控制性等特征,人們在篩選信息時往往需要耗費大量的人力、物力。為了應對網絡信息資源的繁雜,對網絡信息資源進行及時、準確的評價是十分必要的,這些評價可以幫助我們高效篩選出所需要的信息,從而進一步提高生活、工作、學習的效率。近年來,學術界對于如何進行網絡信息資源的評價進行了討論,現今,網絡信息資源的評價方法分為定性評價方法、定量評價方法以及二者相結合的評價方法。

一、定性與定量研究發展歷程

1.定性評價方法

定性評價法從主觀角度出發,依據評價的目的與服務對象的需求,按照預設的評價指標和賦值標準,對網絡信息資源表現形式、內容進行評價。在早期的網絡信息資源評價研究中,定性評價方法占主導地位。該評價方法需要評價者具備一定的知識或者經驗。

國外首先對于如何定性評價網絡信息資源這一問題展開研究。Richmond(1991)提出“10C原則”,Stoker和Cooke(1994)提出網絡信息資源評價的8條評價標準,美國Harris(1997)教授提出不同角度的8條標準,同期,美國喬治大學Wilkinson(1997)教授等人在全面分析網站特點、網站屬性的基礎上,提出11個大類125個“質量指標”以及“OASIS評價系統”。除此之外,Smith(1998)等學者也提出很多評價方法和評價體系。國內學術界對網絡信息資源評價研究開始較晚,主要以介紹國外成果為主,隨著研究的深入,許多適應我國國情的新方法被提出。最早,董小英(1997)在總結出9項標準,隨即我國學者對網絡信息資源的評價展開研究。蔣穎(1998)認為網絡信息資源評價可以包括信息質量、范圍、穩定性和連續性等,她是國內最早將自己提出的理論發表在學術期刊上的學者。隨即,基于內容權威性、準確性、可用性、可獲取性的定性評價方法不斷涌現。

經國內外學者接近30年的研究,定性評價方法取得了豐碩的研究成果,該方法成熟度較高。

2.定量評價方法

定量評價法利用數學知識分析數據,從量化角度進行評價。該方法初期主要立足于瀏覽量等一些便于觀察和統計的數量指標。定量評價方法的提出,迅速引起學術界的廣泛關注,國內外學者延伸利用文獻計量學、應用數學以及網絡計量學的方法進行不斷的嘗試,最終提出網絡計量學方法、對應分析法等定量評價方法。

丹麥學術界首次提出“Webometrics”這一概念后,網絡計量學逐步被應用在網絡信息資源評價領域。比如鏈接分析法就是網絡計量學的具體應用。在網絡信息資源評價中,將鏈接看作是文獻中的引文,繼而借用傳統的引文分析法進行研究,即鏈接分析法。鏈接分析法是定量評價網絡信息資源的核心。因網絡鏈接能夠指明資源間的引用關系,所以頗受學者重視,比如李小云(2016)、李宗富(2016)等人利用了該方法對不同網站進行了評價,評價結果的認可度極高。也有專家提出利用檢索次數等方法來對網絡信息資源進行評價。

對應分析方法最初用于企業決策定位,后推廣至網絡信息資源評價中。Berthon(2001)運用對應分析法評價了世界范圍內的電信公司網站,具有重大參考價值。我國侯治平、白丁(2011)等運用了分析法,對電子商務網站進行了實驗性評價,取得了突破。

定量評價方法發展迅速,其研究成果很多,還有江正華(2014)的基于方差的最優組合賦權等評價方法。

二、定性與定量評價方法分析

國內定性評價仍以國外成果的經驗性總結為主,國內方法理論研究缺乏完整性和創新性。評價方法中摻雜了大量例如心情、素質、知識儲備量等人為因素,可靠性低,富有極強主觀色彩。與此同時,還受社會因素的制約。導致評價方法不僅操作性較差、可靠性較低而且成本較高。然而定性評價能夠幫助解決無法定量評價的問題,在一定程度上降低定量分析絕對化造成的差錯率。

定量分析利用客觀數據進行對比分析,可以克服主觀因素,具有更高的客觀性、系統性、科學性、精確度。但定量評價方法過于表面,存在太多的不確定因素,不利于深入探究評價內容。再者,由于難以收集信息和缺少部分計算工具,定量方法在推廣使用中受到限制。我國定量評價方法雖發展迅速,但起步較晚,目前成熟度低于定性評價方法。

綜上分析,定性是定量的基礎,而沒有定量的定性是片面的,只有令定性評價方法的全面性、成熟性和定量評價方法的科學性、客觀性相輔相成,二者結合使用,才能達到較為全面的評價網絡信息資源。

三、定性與定量研究的結合

隨著對定性、定量評價方法的深入探討,現今網絡信息資源評價初步形成定性評價和定量評價相結合的新模式。目前定性和定量研究相結合的評價方法如下:

第6篇

一、單一指標綜合評價模型

單一指標綜合評價模型是最基礎的評價模型,在這個模型中,首先應對上市公司的會計信息質量的每項評價指標均進行單一評價,并根據其質量為其評分,從而得出關于會計信息質量的單一指標的分值,然后把這些分值進行加總,可以得出上市公司會計信息質量的總體分值,最后可以根據這個總體分值對會計信息質量進行綜合評價。

設U1,U2,……,U0分別代表會計信息質量的評價指標,其中0?燮U0?燮100,Q代表上市公司會計信息質量的總評值,且0?燮Q?燮100,則有:Q=(U1+U2+……+Un)/n,利用這個公式很容易計算出上市公司會計信息質量的分值,進而評價會計信息質量的好壞。

二、單項指標加權平均評價模型

以單一指標綜合評價模型為基礎,加以改動而來。同理:設U1,U2,……,Un分別代表會計信息質量的八個單項評價指標,其中0?燮U0?燮100,Q代表上市公司會計信息質量的總評分,0?燮Q?燮100,和上一種評價模型不同的是,在這里為U1,U2,……,Un分別按其對會計信息質量的影響程度的不同賦予了不同的權重a1,a2,……,an,同時規定0?燮an?燮1,且 ∑an=1,然后得出:Q=a1U1+a2U2+……+anUn。

可以看出,這一評價模型為會計信息質量單項評價指標賦予了不同的權重,可以減少非主要因素對評價結果的影響,更有利于評價結果的準確。

三、模糊評價法模型

模糊集理論是L.A.Zadeh(扎得)1965年提出的一種數學理論,它是處理事物的屬性,如好壞、大小、長短等概念處于模糊性的問題。評價人員在會計信息質量評價時,由于影響會計信息質量的因素存在較大的不確定性。因此,為了能夠使這些模糊的因素量化,可以將模糊數學應用于此,建立模糊評價模型。通過建立模糊評價,可以使得那些性質、內容等不一致的影響因素歸為單一指標,從而對企業會計信息質量做出科學的評價。

第一步,建立因素集。把所有影響會計信息質量量化的因素分成S個子集,記為U1,U2,U3,……,Us,并滿足條件 U={U1,U2,U3,……,Us},Ui∩Uj=??I(i≠j),對于每一個子集 Ui又可以由它的下一級評價指標子集Uin來評價,即可以表示為Ui={Ui1,Ui2,……,Uin},i=1,2,……,s,其中:Ui表示第i個影響因素;n表示Ui總共有n個影響因素。通常這些選取的因素都具有不同程度的模糊性。第二步,建立權重集。影響會計信息質量的因素眾多,但是一般來說,各個因素的影響程度不一樣。為了充分體現客觀性,依據個影響的實際影響,對他們分別賦予一定的權重。

A={A1,A2,……,As},(其中:i=1,2,……,s)

其中,Ai表示第i個影響因素的權重,S為總的會計信息質量影響因素。

第三步,建立評價集。評價集是依據信息質量評價人員對會計信息質量的各種可能評估結果所組成的集合。可以表示為:V={V1,V2,……,Vm},(其中:j=1,2,……,m)

其中,Vj表示第j個評價結果,m為總的評價結果數。

第四步,單因素評價。單獨對每一個因素進行評價,以確定會計信息質量隸屬于評價集中個元素的隸屬程度。取因素集U中的第i個因素Ui進行評價,對評價集V中第 j個元素Vj的隸屬度為Yij,則對Ui的單因素評價可以得出評價的模糊集Ri={ri1,ri2,……,rim},(其中:i=1,2,……,s)

對所有的因素分別進行單因素評價后,可以得到綜合評價矩陣R為:

R=R1…Rn=ri1 ri2 … rim… …… …rn1 rn2 … rnm

第五步,進行綜合評價。綜合評價矩陣就是將各個影響因素都按評價集元素進行了評價,但未考慮各個因素的權重。要進行綜合評價必須考慮各個因素的權重,建立數學模型如下:B=A×R=(b1,b2,b3,b4……,bm)式中:bj=∨(ai∧rij)

將ai與rij比較,取較小值,再從幾個較小值中取最大值作bj。若計算出的綜合評價模型B中各元素相加不等于1,采用“歸一化”處理。此時,B集合仍是一個m維向量,需要再依據評價集上給定的標準向量C,則質量評估的結果將是一個明確的代數值。

Q=B×C

根據Q值的大小認為公司的會計信息質量的等級,并可對多個企業的Q值進行排隊,進行比較分析。

四、功效系數法

功效系數法是指根據多目標規劃原理,把所要評價的各項指標分別對照各自的標準,并根據各項指標的權數,通過功效函數轉化為可以度量的評價分數,再對各項指標的單項評價分數進行加總,求得綜合評價分數的方法。功效系數評價過程包括初步評價和基本評價兩個環節。

1、初步評價計分

第一步,計算指標實際值。根據評價企業年度對外報告的財務報告所反映的數據,按照本文第三部分提供的各項指標計算公式,計算出各項評價指標的實際值。

第二步,確定指標的標準值。對于會計信息質量評價的各項指標沒有具體的標準值。對此,財政部門可以在評價之前,請相關的專家或者學者進行研究,確定各指標的標準值。

第三步,確定指標值檔次。根據選用的標準值,確定各項指標所處的檔次,即是處于優秀值、良好值、平均值、較低值和較差值等各檔標準值的哪個檔次。

第四步,確定標準系數。標準系數是用于計量指標評價得分的計算的。當判斷出實際值在標準值中所處的檔次后,即可確定應選用的標準系數。

第五步,確定計算公式。

公式為:本檔基礎分+[(指標實際值-本檔標準值)/(上檔標準值-本檔標準值)](上檔基礎分-本檔基礎分)。

第六步,計算指標分數。每個指標分數由基礎分和調整分構成。首先求基礎分,即本檔基礎分,是指對某項指標按照本檔標準值計算求得的分數。

計算公式為:本檔基礎分=指標權數×本檔標準系數

公式中的指標權數,是指在一個特定的指標集合體中,每項指標占有的權重。一個指標體系的總權數通常為100,其中每項指標的權重,可根據各指標在整個體系中的重要程度,運用層次分析法在總權數范圍內分配或請從事有關實際工作和理論研究方面的專家,獨立將100分總權數分配給各項指標,然后綜合分析專家的意見,確定每項指標的權重。然后求調整分,是指某指標實際值在某標準值檔次內,超過本檔標準值部分應得的分數。

計算公式為:功效系數×(上檔基礎分-本檔基礎分),其中,功效系數=(指標實際值-本檔標準值)/(上檔標準值-本檔標準值)。

最后,將各單項基本指標初步評價得分相加,求出基本指標總分。

2、基本評價計分

基本評價是指在初步評價的基礎上,利用修正指標,采用功效系數法對企業會計信息質量初步評價結果所做的進一步調整和完善,使計量指標評價結果更接近于實際的質量實際。

首先,確定各項修正指標的單項修正系數。單項修正系數是指每個修正指標對初步評價結論的修正比例。由基本修正系數和調整修正系數兩部分構成。

(1)基本修正系數的計算

以初步評價得分為基礎,按照規定的劃分方法確定修正指標應處的區段,再根據修正指標的實際值,按照規定的劃分方法確定修正指標實際值所處的區段,而后,按規定的公式計算如下:

基本修正系數=[1+(修正指標所處區段-修正指標應處區段)×0.1]

公式中應處區段和所處區段是一種對比修正關系。當二者相同時,則修正指標不對其所屬部分的初步評價得分進行修正,基本修正系數為1;當二者不同時,則用所處區段與應處區段進行比較,每高出一個區段,基本修正系數就依次遞增0.1,相反每低一個區段,基本修正系數依次遞減0.1。

(2)調整修正系數的計算

按功效系數法計算,修正區間定為0.1,則調整修正系數=功效系數×0.1。其次,確定綜合修正系數。綜合修正系數是指修正指標對其所屬部分基本指標得分進行綜合修正的比率,可根據單項修正系數和各項修正指標的權數進行計算。由于企業會計信息質量評價的不同部分的修正指標與其他部分的基本指標相關性不是很強,修正意義不是很大,因而,把單項修正系數轉化為綜合修正系數,使得每項修正指標只對與其相關性很強的本部分基本指標得分進行修正。

第一步,某指標綜合修正系數的計算。由其單項修正系數乘以該指標在本部分的權重求得,即:某指標綜合修正系數=某指標的單項修正系數×該指標的權重,其中,該指標的權重=該指標的權數/該指標所在部分的權數總和。

第二步,某部分綜合修正系數的計算。是該部分各項修正指標的綜合修正系數之和。

第三步,最后修正總分的計算。首先計算每部分修正后得分,等于該部分綜合修正系數與該部分初步評價得分的乘積。

第四步,對四部分修正后的得分加總,求出最后修正總分。

五、綜合評價法

評價我國上市公司會計信息質量需要采用功效系數法和專家打分法進行綜合評價,即綜合評價法。綜合評價法的主要由三個步驟構成:定量指標評價、定性指標評價和計算綜合得分。

1、定量指標評價過程

第一步,計算指標實際值。根據評價企業年度對外報告的財務報告所反映的數據,按照各指標的計算公式,計算出各項評價指標的實際值。

第二步,確定指標的評分標準。指標評分標準的建立可以由有關的評價部門請專家、學者討論建立。

第三步,確定標準系數。標準系數是對各項指標進行評價時,依據偏離標準值的幅度的大小進行確定,偏離的越大,標準系數越大。該標準系數用于計量指標評價得分。當判斷出實際值在標準值中所處的檔次后,即可確定應選用的標準系數。

第四步,計算單項指標分數。單項指標得分=本指標的總分-調整分其中:調整分=實際失真率/失真率基準點×標準系數×本指標的總分。

第五步,計算基本指標的總分。基本指標的總分=∑單項指標得分。

2、定性指標的評價

第一步,確定單項評議指標的等級。對會計信息質量評價指標體系中定性指標,根據他們影響會計信息質量的輕重分別給與一定的權數,同時給出各項指標的等級。

第二步,計算單項評議指標得分。單項評議指標分數=∑(單項評議指標權數×各項評議員給定的等級參數/評議人員數。

第7篇

關鍵詞:信息隱藏;不可感知性;評價方法;主觀評價;客觀評價;互聯網;信息時代

1引言

信息隱藏是一種防止秘密信息在存儲和傳輸過程中免受敵手的攻擊和破壞而采用的一種安全保障技術,其歷史可以追溯到古希臘,隨著數字技術的發展,信息隱藏被賦予了新的含義。它研究的是如何利用人類感覺器官在感知上的局限性以及多媒體數字信號本身存在的冗余,以數字媒體或數字文件為載體,將秘密信息隱藏在一個宿主信號中而不被人所感知,從而達到保護信息安全的目的。

2主觀評價方法

主觀測試是指依靠不同觀察者的主觀感覺來度量圖像質量的測試方法。主觀評價基于人的主觀視覺模型HVS,主要采用平均評價分數 MOS(Mean Opinion Score)方法來進行評價,計算公式為:

  (1)

式中:為圖像屬于第i類的分數;為判斷該圖像屬于第i類的人數。

應用主觀評價時,需要遵守測試協議,該協議對測試條件和評估的過程進行了詳細的規范。測試過程主要包括兩個步驟。第一步,將失真的數據集按照從最好到最壞的次序排序;第二步,挑選測試人員按照一定的質量等級準則觀察確定受測對象的感知級別,主觀評價的典型方法為ITU-R Rec 500的質量等級評判法。ITU-R Rec 500采用5個評價等級,各等級與對圖像質量損壞的關系如表1所示。

表1 主觀質量評價等級表

質量等級對圖像質量損壞的感受描述質量級別5不可察覺優4可察覺,不讓人厭煩良3輕微的讓人厭煩中2讓人厭煩差1非常讓人厭煩極差

由于載密圖像的不可感知性最后要由人的視覺系統來判斷,人的視覺做出的質量評價應是最直接也是最可靠的評價。但是視覺感知能力因人而異(比如高度近視的人感知就較差,更為極端的例子是盲人的視覺感知幾乎為0),由歐洲OCTALIS(offer of Content Through Trusted Access Links)項目組完成的工作表明,即使具有同樣感知能力,但經歷不同的人(比如專業攝影師和研究員)對圖像的主觀測試結果差異也很大,并且同一觀察者在不同的觀測環境下對圖像的主觀測試結果也可能不同。由于這種差異性,使得主觀評價載密圖像的不可感知性很難給出穩定可靠的結論,因此在研究和開發隱藏算法中主觀評價的方法并不是很實用,實際的度量往往采用客觀定量度量的方法。

3基于像素的客觀評價方法

與主觀評價相比,客觀評價盡管有些機械,但由于測量結果不依賴于主觀感覺和意識,并可以使基于不同機理的圖像處理方法按照同一個固定的評價標準進行計算,具有可重復性和易于實現的優點,所得結果相互間的比較多數情況下也比較合理,因此是一種具有通用性的有效評測方法,現有的信息隱藏性能評價研究多集中于此。目前使用的客觀度量方法多數是基于像素失真的失真度量評價方法。如平均絕對差分、均方誤差(MSE)、范數、拉普拉斯(Laplace)均方誤差、信噪比、峰值信噪比(PSNR)等。其中峰值信噪比或均方誤差是目前在信息隱藏領域中定量度量載密圖像的不可感知性時用得最多的指標,下面給出部分評價方法的數學表示。

假設數字原始圖象I為一個像素的灰度圖像,隱藏信息后的圖像為。圖像I和在(i,j)位置的像素的值分別為f(i,j),g(i,j),(i=1,2,…,M;j=1,2,…,N)。

(1)圖像的均方誤差(MSE)

均方誤差的計算公式如式(2)所示。

(2)

MSE逐點計算了圖像數據處理前后的變化情況,在一定程度上反映了待檢測圖像與原始圖像的近似程度,大的MSE值表示處理前后圖像的差別大,不可感知性差;反之,表示處理前后圖像的差別小,不可感知性好。

(2)圖像的峰值信噪比(PSNR)

峰值信噪比(PSNR)的計算公式如式(3)所示。

(3)

PSNR同MSE一樣逐點計算了圖像數據處理前后的變化情況,其單位為分貝(dB)。由于PSNR能定量衡量信息隱藏引入的失真且計算簡便,PSNR己經被眾人接受和熟知,且被廣泛使用,有的文獻甚至還把它作為衡量信息隱藏引入的失真的唯一評價指標。

4結語

互聯網絡和信息科學的飛速發展,為信息的傳輸和處理帶來了極大方便,但是網絡在給人們帶來便利的同時也暴露出越來越嚴重的安全問題。信息隱藏作為一種保證信息安全傳遞的重要手段,引起了人們的極大關注,它通過隱藏信息的“存在性”來保證信息的安全傳輸,能解決密碼學在應用上容易引起攻擊的問題。信息隱藏的應用包括隱秘通信、版權保護、數字指紋、多媒體內容篡改認證等軍事和民用領域,有重要的理論和應用研究價值。在過去的十多年中,信息隱藏的一大分支數字水印取得了快速的發展,但在隱秘通信和篡改認證方面取得的研究成果相對較少,其主要原因是缺乏對安全性和感知質量客觀準確的評價手段,隱藏算法的嵌入容量、安全性、感知失真之間的固有約束存在著一定的難度,尤其是多數隱藏算法的嵌入容量還遠未達到隱秘通信的容量要求。

參考文獻:

日韩免费在线观看| 伊人精品久久| 国产乱子精品一区二区在线观看| 第84页国产精品| 性欧美hd调教| 精品裸体bbb| 男女啪啪999亚洲精品| 未满十八勿进黄网站一区不卡| 欧美电影在线观看网站| 国产精品麻豆| 国产精品视屏| 精品日韩免费| 欧美一区影院| 免费在线日韩av| 奇米精品一区二区三区在线观看| 美女看a上一区| 国产精品一区在线观看乱码| 成人黄色综合网站| 国产亚洲欧洲997久久综合| 国产精品成人免费精品自在线观看 | 国产精品porn| 亚久久调教视频| 久久99久久99精品免视看婷婷| 国产老妇另类xxxxx| 91欧美激情一区二区三区成人| 欧美经典一区二区| 一区二区三区免费网站| 色综合久久99| 日韩欧美一二区| 亚洲欧美一区二区三区情侣bbw| 中文字幕亚洲无线码在线一区| 久久99视频精品| 中文字幕第八页| 国产色在线播放| 天天操夜夜做| 中文在线一二区| 麻豆影院在线| 日韩三级影视| aaa国产精品| 久久一本综合| 性娇小13――14欧美| 国产一区二区网址| 国产欧美精品一区二区三区四区 | 香蕉青柠影院| 欧美高清xxxxxkkkkk| 国产特黄在线| 91探花在线观看| av在线精品| 精品国产美女| 国产精品婷婷| 丁香婷婷综合网| 亚洲欧洲日产国码二区| 欧美在线一二三四区| 亚洲精品美女久久久| 欧美成人午夜激情在线| 欧美成人做性视频在线播放| 成人免费视频网站在线看| 视频在线不卡| 91九色国产在线播放| 精品国产亚洲一区二区在线观看| 国产精品欧美三级在线观看| 日韩午夜免费| 不卡一区二区三区四区| 亚洲图片欧美综合| 日韩欧美国产成人一区二区| 日韩视频在线一区| 亚洲精品人成电影网| 麻豆美女网站| 9色在线观看| 日韩成人亚洲| 亚洲欧洲免费| 久久激情中文| 久久久精品天堂| 日韩欧美精品中文字幕| 精品亚洲一区二区三区| 97在线观看免费| 狠狠色噜噜狠狠狠狠黑人| 日本午夜在线视频| 婷婷综合六月| 不卡中文字幕| 麻豆传媒一区二区三区| 国产精品的网站| 91精品国产黑色紧身裤美女| 久久亚洲春色中文字幕| 国产精品理人伦一区二区三区| 免费观看的av网站| sm在线观看| 天堂一区二区三区四区| 日韩中文字幕亚洲一区二区va在线 | 国产三级免费观看| 在线中文字幕第一页| 国产美女亚洲精品7777| 欧美日韩一卡| 99久久精品免费看国产 | 亚洲国产中文字幕在线观看| 久久久久久久电影一区| 成年网在线观看免费观看网址| 黄色在线播放| 日韩成人在线电影| 国产精品a久久久久| av不卡在线观看| 色综合久久天天| 日韩在线观看免费全集电视剧网站 | 亚洲欧洲另类国产综合| 欧美成人女星排名| 97香蕉超级碰碰久久免费软件| 另类高清dbsm日本tvav| 黄色网址在线免费观看| av不卡一区| 亚洲欧美视频一区二区三区| 国产欧美日韩精品在线| 欧美一级爆毛片| 97在线观看免费| 蜜桃视频网站www| 日韩脚交footjobhdboots| 成人av二区| 久久精品国产一区二区| 亚洲激情图片一区| 亚洲欧美制服综合另类| 国产老肥熟xxxx在线观看| 免费在线观看一级毛片| 秋霞影院一区| 肉色丝袜一区二区| 一区二区三区中文字幕| 国产亚洲一区二区精品| 日本爱爱网站| 香蕉久久aⅴ一区二区三区| 亚洲午夜久久| 国产xxx精品视频大全| 色天使色偷偷av一区二区| 欧美精品日韩三级| 超碰超碰97| 亚洲www啪成人一区二区| 国产精品国码视频| 中文字幕免费一区| 亚洲精品999| 影音先锋5566资源站| 国产三区视频在线观看| 精品一区电影| 2020国产精品久久精品美国| 欧美一二三在线| 欧美色图第二页| av片在线免费观看| 国产不卡av一区二区| 成人免费视频视频在线观看免费| 欧美午夜一区二区三区| 影音先锋男人每日资源站| 男女污视频在线观看| 国产精品玖玖玖在线资源| 国产一区啦啦啦在线观看| 91福利在线看| 欧美一级高清免费播放| 日韩欧美在线观看一区二区| 91精品啪在线观看国产爱臀 | 精品日韩欧美在线| 久久国产热视频| 国产在线观看91| 91视频综合| 国产精品精品国产色婷婷| 亚洲另类图片色| 大黑人xxx| www.成人爱| 久久久久久久欧美精品| 日韩欧美高清视频| 亚洲第一色网| 91大神在线网站| 久久99视频| 久久久无码精品亚洲日韩按摩| 日韩成人在线视频观看| 丰满少妇在线观看网站| 日本成人片在线| 日韩精品午夜视频| 91成人国产精品| 亚洲免费国产| 国产蜜臀一区二区打屁股调教| 欧美日韩一区二区高清| 亚洲图片欧美综合| 992tv成人免费影院| 伊人免费在线| 久久久久久美女精品 | 蜜桃福利入口| 成人在线爆射| 另类调教123区| 欧美一区二区三区婷婷月色| 69堂视频在线观看国产| 亚洲美女久久精品| 蜜桃视频第一区免费观看| 欧美日本一区二区三区四区 | 竹菊久久久久久久| 国产色综合一区| 日韩视频免费观看| 日本私人网站在线观看| 国产不卡一二三区| 国产精品久久久久婷婷二区次| 中文字幕在线精品| 天天射综合网站| 精品国产91久久久久久浪潮蜜月| 国产精品―色哟哟| 久久亚洲春色中文字幕| 免费观看成年在线视频网站| 日本欧美肥老太交大片| 亚洲免费在线播放| 国内揄拍国内精品| 最近中文字幕免费mv2018在线 | 亚洲精品一区二三区不卡| 国产精品影视| 欧美亚洲国产日韩| 国产精品久久久一本精品 | 91精品影视| 经典一区二区三区| 亚洲国产精品va在线观看黑人| 口述被爽到呻吟高潮自述| 日韩毛片网站| 不卡高清视频专区| 一区二区欧美亚洲| 亚在线播放中文视频| 三区四区不卡| 五月婷婷另类国产| 热99精品视频| 欧美人与性动交xxⅹxx| 国产一区二区三区久久久| 亚洲风情亚aⅴ在线发布| 嫩草懂你的影院| 久久a爱视频| 国产精品久久久久一区| 午夜美女久久久久爽久久| 美女91在线| 久热成人在线视频| 亚洲欧美国产一区二区三区| 青青草视频在线观看| 久久久久久免费视频| 色婷婷综合在线| 黄网站网址视频| 99国产精品久久一区二区三区| 中文成人综合网| 一区二区三区视频在线免费观看| 九色porny丨首页入口在线| 国产一区日韩二区欧美三区| 国产亚洲精品日韩| yes4444视频在线观看| 黄色成人在线网址| 91精品一区二区三区久久久久久| 免费av大全| 国产不卡av一区二区| 五月综合激情日本mⅴ| 三年片大全在线观看大全有哪些| 亚洲综合影院| 亚洲精品乱码久久久久久黑人| 小早川怜子痴女在线精品视频| 国产福利91精品一区二区| 久久色.com| 17婷婷久久www| 播放一区二区| 久久久久久一级片| 68精品久久久久久欧美| 久久电影tv| 久久亚洲欧美国产精品乐播 | 国产精品美女| 亚洲第一福利网| 你懂的在线播放| 国产欧美一区二区色老头 | 亚洲成年人在线播放| 在线观看黄色小视频| 亚洲久久一区| 日韩成人av在线| 自拍视频在线免费观看| 青青草原综合久久大伊人精品优势 | 日韩中文理论片| 性xxxxfjsxxxxx欧美| 国产传媒日韩欧美成人| 欧美高清激情视频| 一根才成人网| 欧美国产在线观看| 国产在亚洲线视频观看| 懂色av一区二区| 精品高清美女精品国产区| av资源在线看| 天天影视欧美综合在线观看| 欧美高清性hdvideosex| 一色桃子在线| 六月丁香综合| 中文字幕日韩欧美在线 | av在线精品| 亚洲最大的成人av| www.精选视频.com| 爽成人777777婷婷| 91精品国产综合久久精品app| 中文字幕网在线| 美女爽到呻吟久久久久| 在线电影欧美日韩一区二区私密| 中文字幕在线观看网站| 成人午夜视频免费看| 亚洲同志网站入口| 亚洲国产中文在线| 欧美日韩午夜视频在线观看| 中文字幕免费中文| 欧美三区视频| 亚洲美女激情视频| 性欧美videos高清hd4k| 91美女片黄在线观看| 青春娱乐分类视频精品2动漫| 都市激情亚洲| 欧洲av一区二区嗯嗯嗯啊| 夜夜嗨aⅴ免费视频| 免费日韩av| 久久久国产在线视频| 日韩精选视频| 亚洲一区二区三区四区在线| 制服丝袜影音| 一区二区动漫| 俺去了亚洲欧美日韩| 婷婷综合六月| 亚洲在线观看免费视频| xxxxx国产| 亚洲一区亚洲| 欧美巨乳在线观看| 四虎国产精品免费久久| 精品国产91久久久久久| 一级日本免费的| 奇米四色…亚洲| 久久人人爽人人| 午夜精品在线| 欧美精品黑人性xxxx| 成年网站在线| 91影院在线观看| 日本激情五月| 你懂的视频一区二区| 亚洲免费成人av电影| 僵尸再翻生在线观看| 亚洲视频一二三| 九七午夜视频| 日本成人中文字幕在线视频| 久久人人爽人人爽人人片av高请 | 日韩av网站导航| f2c人成在线观看免费视频| 国产精品久久久久久久浪潮网站| 九九爱在线视频观看免费视频| 欧美另类专区| 日韩视频永久免费观看| 国产精品久久久久久久久久辛辛| 色域天天综合网| 国产69精品久久app免费版| 99综合电影在线视频| 你懂的视频网址| 亚洲激情国产| 九九热在线精品视频| 91蜜桃臀久久一区二区| 日韩一区二区在线观看| 国产美女一区视频| 怡红院av一区二区三区| 国产69精品久久久久孕妇| 国产一区二区免费视频| 九色精品视频在线观看| 久久精品久久久| 久久精品久久精品亚洲人| 国产高清视频一区二区| 欧美日韩免费视频| 在线欧美三级| 亚洲影院久久精品| 欧美午夜黄色| 91啪九色porn原创视频在线观看| xxx视频在线观看| 久久美女性网| 最新国产热播激情视频| 亚洲二区三区不卡| 久久中文字幕在线视频| 丁香五月缴情综合网| 亚洲精品按摩视频| 二区三区不卡| 欧美亚洲一区二区三区四区| sm国产在线调教视频| 自拍偷拍欧美精品| 亚洲精品97久久久babes| 91色九色蝌蚪| 丁香婷婷自拍| 国产剧情一区在线| 啪啪导航网站| 蜜桃视频一区二区三区| 国产麻豆一区二区三区精品| 亚洲激情自拍| 久草在线免费资源| 欧美欧美天天天天操| 97人人爽人人喊人人模波多| 日韩欧美1区| 美女精品久久久| 精品一区在线| 中文字幕一精品亚洲无线一区 | 国产欧美日本一区二区三区| 日本特黄a级高清免费大片| 国产69精品一区二区亚洲孕妇| 色版视频在线观看| 蜜桃精品在线观看| 又爽又黄的午夜网站| 三级影片在线观看欧美日韩一区二区| 亚洲精品自产拍在线观看app | 岛国精品在线观看| 可以看av的网址| 高清国产一区二区| 99精产国品一二三产品香蕉| 成人午夜精品在线|