天天看點

肯德爾系數怎麼分析_論文實戰2——德爾菲法與信度分析

原創 阿飛 金木數讀

國内疫情快要結束了,各地都開始了複工,小王家也不例外。小王家開的是燒烤店,臨近複工,老王(小王他爸)開始犯愁了。受疫情影響,年前采購的幾百斤的貨全部賠損,現在該采購多少呢,采購少了吧,怕不夠用,采購多了吧,怕賣不完。

這時候小王站了出來,“爸,不用擔心,讓你見識一下知識的力量。”

肯德爾系數怎麼分析_論文實戰2——德爾菲法與信度分析

聰明的小王利用了學校老師講過的德爾菲法。

首先

,選擇專家。這個不難找,老王從事餐飲行業多年,人脈寬廣,很快找到了大型餐飲店老闆、當地餐飲行業資深大佬、老主顧等人,将這些人員組成專家小組。

肯德爾系數怎麼分析_論文實戰2——德爾菲法與信度分析
然後

,小王将自己家的情況整理成文字發給各位專家,要求專家們在疫情這一背景下,根據自己家的狀況,來估計最低銷售量、最高銷售量、最可能銷售量。同時給出自己做出判斷的主要理由。

其次

,等到專家回信後,小王将專家們給出的資料與理由進行整理,然後重新發給專家,請他們參考其他專家的意見再次做出預測。

小王在第二次收到資料後發現,大部分專家都對自己之前的結果進行了修改。于是小王将第二次預測的結果進行整理,再發給專家,第三次預測的結果,專家改動不算太大。

小王再接再厲,再一次發給專家,在第四次預測中,專家都沒有改變自己的預測數量。

肯德爾系數怎麼分析_論文實戰2——德爾菲法與信度分析
最後

,結束了預測,對專家的意見作出了綜合處理,在得到的最終資料中,去掉最高與最低值,然後算數平均,得到了今年自己家今年的進貨量。

老王此刻也開心的說,“好小子,沒白供你念書!”

大家都露出了開心的笑容。

這個案例就是德爾菲法最直接的使用。

在上一篇文章,我提到過,德爾菲法可以用于名額體系的建構,那問題來了,什麼是德爾菲法呢?

一、簡介 德爾菲法,也叫專家調查法

是一種通過匿名的形式,以書面的方法咨詢專家的意見,并對意見進行反複的收集彙總回報,最終得到不再修改的專家意見。

其具體過程如下,

首先

,确定要預測的主題與目标,并收集整理該主題相關的資訊與資料;

其次

,根據這一主題與資料,尋找具有相關背景,經驗豐富與能力超強的專家,建立專家小組,該小組人數在20人以内最好;

然後

,将所需解決的問題與相關資料,發送給各個專家,征詢專家的意見,并聲明對專家的回報進行匿名處理;

緊接着

,将收集到全部專家的回報意見進行第一輪的彙總,整理為綜合意見。将其再次發送給各個專家,請專家參考其他人的意見後,修改自己之前的意見;

最後

,進行第二、三輪的彙總整理,于此循環反複,直到所有的專家都不再修改自己的意見或得到統一的意見為止。

(一般來說,第三次便會獲得統一的意見,如果分歧較大,再進第四、第五次)

肯德爾系數怎麼分析_論文實戰2——德爾菲法與信度分析

圖檔來源:消費者之聲

二、論文執行個體 德爾菲法在論文中的使用,不是簡單的咨詢一下銷售量如何如何,隻有幾個名額。而是繁多的名額,一般的方法就是制作一個問卷,來讓專家評判,保留哪些、删除哪些。

上一篇文章,我提到德爾菲法可以與層次分析法一起使用,首先利用德爾菲法确定出科學的績效評價名額,然後利用層次分析法确定這些名額的權重。

但為了便于了解,我就不用績效名額來講述這個方法,還是我們招生辦的小李老師吧。

01 設計問卷 德爾菲法的第一步就是确定主題與相關背景資料

對于小李老師來說,為了確定評價學生名額的科學性,不再是他自己随便列了四個名額。

肯德爾系數怎麼分析_論文實戰2——德爾菲法與信度分析

而是根據自己的經驗,列出了他認為的所有可以用來評價學生的名額。列出這堆名額後,來讓專家評判,哪個用處大,哪個用處小。

小李老師這次很聰明,專門設計了問卷,來評判這些名額。

首先,為了保持是專家來評判這些名額,小李在問卷第一部分,先調研了被問卷者的基本資訊。

然後為了能夠評判各個名額,小李老師又一次引入量表。特别重要計5分,重要計4分,不清楚計3分,不重要計2分,非常不重要計1分

問卷内容

您認為評價學生的這些名額的重要性

一、

您的身份

教師 招生辦老師

工齡

5-10年 10-15年 15-20年 20-30年 30-40年

二、

1、大學出身

特别重要 重要 不清楚 不重要 非常不重要

為什麼()

為節省篇幅,後面的省略

2、是否跨專業

特别重要 重要 不清楚 不重要 非常不重要

……… 3、一志願學校

特别重要 重要 不清楚 不重要 非常不重要

……… 4、考研總成績

特别重要 重要 不清楚 不重要 非常不重要

5、專業課成績

特别重要 重要 不清楚 不重要 非常不重要

6、英語成績

特别重要 重要 不清楚 不重要 非常不重要

7、個人能力

特别重要 重要 不清楚 不重要 非常不重要

8、綜合評價:
肯德爾系數怎麼分析_論文實戰2——德爾菲法與信度分析
02 确定專家 為了保證問卷資訊的權威性,專家的組成也十分重要

小李老師不僅工作經驗豐富,人脈也十分廣闊,于是小李老師分别選取了各個學院的招生辦老師5人,各個院系的老師15人,組成了專家小組。

(德爾菲法樣本保持在20個以内最佳)

03 問卷回收與處理

首先,第一輪問卷進行完成後,小李老師回收到資料,進行整理。部分内容整理如下:

1、大學出身

特别重要 (2人) 重要(13人) 不清楚(2人) 不重要 (3人) 非常不重要(0人)

為什麼(ABCD理由)

………

(還是上述的8個問題)

在将這部分内容整理完畢後,小李老師将其發送給各個專家,再由專家參考這部分内容,修改自己的意見。

在進行到第三輪後,專家們不再修改自己的意見或達成統一意見。

04 結果的檢驗 判斷德爾菲法的可靠性和科學性主要由專家的代表性、積極性系數、專家的權威系數、專家意見的協調程度來衡量。是以在問卷各輪運作中,都要對其進行檢驗。

(以下名額,不需要知道為什麼,論文中直接計算運用即可)

1、專家的代表性

以專家的個人基本特征來評判,

如專家的工作經驗均為10年以上。

2、專家的積極性

用問卷的回收率來反映,

如發出20份問卷,回收18分,回收率為90%,發出20份問卷,準時回收16份,準時回收率為80%。隻要回收率>70%是較好的标準。

3、專家的權威程度Cr

是專家對評價内容的判斷依據(Ca)和專家對問題的熟悉程度(Cs)的算數平均數

Ca是專家對評價内容的判斷依據,按正常分為理論依據、實踐經驗、國内外資料、直覺四類,影響程度為大中小,分别指派 ,其權重如下圖:

肯德爾系數怎麼分析_論文實戰2——德爾菲法與信度分析
肯德爾系數怎麼分析_論文實戰2——德爾菲法與信度分析

如上圖例子中,“√”的勾選,Ca=0.3+0.3+0.1+0.1=0.8

Cs是專家對問題的熟悉程度,Cs分為5個等級,即1(不熟悉)——5(很熟悉),分别指派為0、0.2、0.5、0.8、1。

如圖勾選的“特别熟悉”,其權重為1,即Cs=1

專家的權威系數(Cr)為兩者的算數平均數,

即Cr=(Ca+Cs)/2

圖中Cr=(0.8+1)/2=0.9

通常Cr≥0.7為良好名額

其在論文中的寫作格式為:

肯德爾系數怎麼分析_論文實戰2——德爾菲法與信度分析
4、專家的協調程度

是專家們對條目意見的一緻程度

通過變異系數(CV)與肯德爾協調系數(W)來評價

變異系數Cv:表示專家對名額重要性、計算公式合理性、收集方法可操作性的協調程度,系數越小,說明專家協調程度越高。

通常認為Cv<0.25是一個較好的名額

Cv=标準差/平均數

關于平均數,如一輪名額所得重要性得數為:5/4/4/3

平均數則為(5+4+4+3)/4=4

标準差可直接運用統計軟體計算得出

論文中寫作格式為:

肯德爾系數怎麼分析_論文實戰2——德爾菲法與信度分析

圖檔來源于:《基于德爾菲法的書商評價名額體系研究》

肯德爾協調系數(W)

是計算多個等級變量相關程度的一種相關量,在德爾菲法中用來檢驗專家對名額的評分結果是否一緻的名額。

W值越大,專家的協調程度就越高

因公式較為複雜,直接用SPSS就可以實作

(使用其他統計軟體的同學可直接百度,這個方法百度有很多教程)

肯德爾系數怎麼分析_論文實戰2——德爾菲法與信度分析
肯德爾系數怎麼分析_論文實戰2——德爾菲法與信度分析
肯德爾系數怎麼分析_論文實戰2——德爾菲法與信度分析
肯德爾系數怎麼分析_論文實戰2——德爾菲法與信度分析

圖檔來源:護理科研

05 結果的篩選與處理 在各輪操作都通過檢驗後,獲得的最終資料要進行處理。

小李老師通過德爾菲法獲得了專家對各個名額的最終評價資料。各個名額的得分如下:

大學出身 4.55 是否跨專業2.87 一志願學校3.46 考研總成績 4.3 專業課成績2.1 英語成績4.9 個人能力 3.7

因為小李老師通過專家檢驗的是評價體系,是以小李老師隻需要根據各個名額的得分,将重要性名額在3分以下的名額删除即可,便得到最終對學生的評價名額。

經過德爾菲法确定的體系,是經過所有權威專家反複認真篩選之後的名額,可以科學、合理的評判每個學生的水準。

如果我們運用德爾菲法要确定的不是名額評價體系,而是文章開頭的預測數值呢?其最終的結果必然不是完全一樣的,此時對于數值的處理,有兩種方法,

一、算數平均法

去掉一個最高值與最低值,将剩餘結果進行算數平均,進而得到最終資料

二、權重統一法

因為我們找的專家來自不同領域,對你要預測的資料熟悉程度也各不相同,這時可以為不同專家賦予權重,如本行業的專家可以賦予0.6的權重,娶她行業的專家賦予0.4的權重,最終結果乘以權重再求和平均。

三、評價

看到這裡同學們,應該對德爾菲法有了一個基本的認知了。

優勢

在于:

(1)能集中不同領域的專家,實作集思廣益;

(2)能把各位專家意見的分歧點表達出來,取各家之長,避各家之短;

(3)可以通過反複多輪的回報修改,實作資料的科學性與準确性。

同時,德爾菲法匿名的特點又可以避免專家會議法的缺點:

(1)權威人士的意見影響他人的意見;

(2)有些專家礙于情面,不願意發表與其他人不同的意見;

(3)出于自尊心而不願意修改自己原來不全面的意見。

不過德爾菲法也存在很大的

劣勢

(1)過程較複雜,花費時間、精力較多;

(2)一旦結果無法通過檢驗,修正過程較複雜。

四、信度檢驗 信度,即可靠性,主要是對問卷資料可靠性的檢驗。

在論文中,我們常常會使用問卷法,但發出去的問卷是否被認真填寫?所得資料是否具有一緻性?

為了驗證這一問題,要運用到信度檢驗。

常用的信度檢驗為克隆巴赫Alpha系數,也稱α系數

通常認為,信度系數應該在0~1之間,

量表的信度系數在0.9以上,表示量表的信度很好;

量表的信度系數在0.8~0.9之間,表示量表的信度可以接受;

量表的信度系數在0.7~0.8之間,表示量表有些項目需要修訂;

量表的信度系數在 0.7以下,表示量表有些項目需要抛棄。

下圖來源于:丁香園論壇

肯德爾系數怎麼分析_論文實戰2——德爾菲法與信度分析
肯德爾系數怎麼分析_論文實戰2——德爾菲法與信度分析
肯德爾系數怎麼分析_論文實戰2——德爾菲法與信度分析
肯德爾系數怎麼分析_論文實戰2——德爾菲法與信度分析

由上表可以看出:本次樣本量一共486份,無缺失項。整體的克隆巴赫Alpha系數達到0.93

系數大于0.7,通過了可靠性性檢驗,說明我們收集到的資料可靠性良好

上圖為各個名額的克隆巴赫Alpha系數

論文中,在對績效評價體系進行問卷調研的部分,可以這樣表述:

本研究采用克隆巴赫α系數進行問卷樣本的信度分析。其中一級名額重要性評價α系數為0.835, 二級名額重要性評價α系數為0.853, 三級名額重要性評價α系數為0.871, 是以結果表明該問卷具有較高的信度名額。 總結

本文第一部分講述了德爾菲法的使用。

德爾菲法是一種通過匿名的形式,以書面方式反複多輪擷取、回報專家意見,最終得到所有專家讨論出的科學、合理的預測主題。

(在一般碩士論文中,關于德爾菲法的部分不需要詳寫,簡略提一下步驟,列出檢驗結果即可,重點在于後文的實證分析)

其主要分為以下五步:

1、确定主題,收集資料

2、建構專家小組

3、第一輪,将主題與意見送出給專家,收集專家的意見,将專家回報彙總整理,第二輪,将彙總資料再次發給專家,要求專家參考他人意見,修改自己意見。反複多次進行,直到專家不再修改意見或達成一緻。

4、将每一輪的資料進行檢驗,若未通過檢驗,要求專家重新思考意見

5、對最終的結果進行篩選整理。

文章第二部分講述了信度檢驗,信度檢驗是對問卷可靠性的檢驗。隻有通過檢驗的問卷資料,才能使用分析。

後記

本以為德爾菲法是一個比較簡單的方法,沒想到一寫就是一天。最開始認為的德爾菲法僅僅是将資料經過專家反複多輪檢驗就夠了,在論文中,單純的文字講述就可以。

但在查閱參考文獻的過程中發現,部分參考文獻對德爾菲法的資料進行了檢驗。可去尋找相關的資料,大部分資料關于德爾菲法并沒有檢驗的過程,有檢驗過程的,也很簡略。最後隻能根據每個檢驗的名稱,挨個搜尋查詢,才彙成了這篇文章。

寫這篇文章的時候略帶傷感,德爾菲法是大二期間,我們刁剛刁老師教授的,一個可以在京東獲得年薪二百萬的男人。

那時每天上課的樂趣就是聽刁老師講他這個周末去了哪裡,幹了什麼。印象最深刻的是,有一節課上,刁老師開心的對我們說,“我身價又漲了幾十萬,原來在京東能拿150萬,現在能拿200萬”,聽得我們滿眼小星星。可惜當時機率、統計基礎太差,刁老師講的模組化也聽得一知半解。現在重新開始自學模組化,才懂得有老師教導的好處。正如星爺的那句話“曾經有個機會擺在我的面前,但我沒有珍惜。”

可惜回不去了,刁老師已經離職去追求他的夢想。

是以請每一位同學,珍惜人生路上碰到的每一位導師。Good Good Study ,Day Day Up!!! 下期預告:回歸分析

回歸分析是論文使用最多的模型,大學學的最多的也是多元回歸模型,這個模型很簡單,也很複雜。

你“在看”我嗎?
肯德爾系數怎麼分析_論文實戰2——德爾菲法與信度分析