項目反應(yīng)理論指導下村民生活滿意度調(diào)查問卷的設(shè)計

吳 廣,張運吉*,張敬瑋,閆明慧,趙秀華,徐學東*,

1.山東農(nóng)業(yè)大學 園藝科學與工程學院,山東 泰安 271018

2.山東農(nóng)業(yè)大學 水利土木工程學院,山東 泰安 271018

項目反應(yīng)理論指導下村民生活滿意度調(diào)查問卷的設(shè)計

吳 廣1,張運吉1*,張敬瑋2,閆明慧2,趙秀華2,徐學東2*,

1.山東農(nóng)業(yè)大學 園藝科學與工程學院,山東 泰安 271018

2.山東農(nóng)業(yè)大學 水利土木工程學院,山東 泰安 271018

新農(nóng)村建設(shè)背景下，村莊改造以村民為主體。通過科學的問卷設(shè)計進行民意調(diào)查，能更加準確地了解村民真實意愿，對村莊改造具有指導意義。本文以項目反映理論為指導編寫村民生活滿意度調(diào)查問卷，詳細闡述問卷設(shè)計的基本流程、問項篩選、誤差控制等技術(shù)環(huán)節(jié)，最終形成精簡的村民生活滿意度調(diào)查問卷。結(jié)果表明，IRT理論能精簡調(diào)查問項，嚴格控制問卷標準，極大提高調(diào)查問卷的設(shè)計質(zhì)量，對新農(nóng)村建設(shè)過程中切實了解民意、指導改造建設(shè)工作具有重要意義。

社情民意調(diào)查;項目反應(yīng)理論;問卷設(shè)計;村民生活滿意度;Likert量表

村莊改造是一項惠民工程。近年來，新農(nóng)村建設(shè)如火如荼，各地相繼開展了各種形式的村莊改造實踐工作，政府投入大量人力、物力和財力，在切實改善農(nóng)村地區(qū)生產(chǎn)、生活條件上取得了顯著成效，為推進新農(nóng)村建設(shè)、統(tǒng)籌城鄉(xiāng)發(fā)展作出了積極探索和實踐。

但是，在改造的具體實施中，政府或集體一般處于主體地位，有些農(nóng)民反映強烈、生活生產(chǎn)急需改造的項目，政府并沒有作出及時安排，還有些改造項目是根本脫離了農(nóng)民實際需求的“面子工程”。這使作為改造受益人的村民長期處于被動地位。究其原因除了財政預(yù)算、施工過程等人為因素外，主要是政府站在改造的制高點俯視村民，不了解村民的真實需求。村莊是村民生產(chǎn)生活的家園，村莊改造如不能突出村民的主體地位，尊重村民意愿，就不能真正實現(xiàn)村莊改造政策的良好初衷，不但造成資源上的巨大浪費，最終損害廣大村民的利益[1]。為解決這種政府供給與農(nóng)民需求不對等的局面，切實了解村民需求，建設(shè)改造前進行相應(yīng)社情民意調(diào)查顯得尤為必要。

1 社情民意調(diào)查

社情民意調(diào)查是使用社會科學的調(diào)查和分析方法，對一個地方政府所管轄的居民的調(diào)查，通過調(diào)查了解公民的需求、行為特征、政策偏好及其對政府服務(wù)的評價，并確定公民對政府服務(wù)評價高低的決定因素，以利于政府改進服務(wù)的過程[2]。民意調(diào)查的方法與國際接軌，包括問卷、焦點小組、網(wǎng)絡(luò)問卷調(diào)查、數(shù)據(jù)挖掘等多種方法，其中問卷調(diào)查法在我國應(yīng)用最為普遍。如何遵循科學理論，設(shè)計出合理的問卷（量表），對公眾就政府行為及其產(chǎn)生的后果進行準確地心理特質(zhì)（如感受、意愿、態(tài)度等）測量，是社情民意調(diào)查中的關(guān)鍵問題[3]。

民意調(diào)查設(shè)計中對問卷設(shè)計質(zhì)量的評價主要是通過“信度”和“效度”進行。實際中，一方面由傳統(tǒng)的問卷設(shè)計理論所衍生出的信度指標（克朗巴哈α信度、重測信度、評分者信度、復(fù)本信度、折半信度等）與效度指標（結(jié)構(gòu)效度、鑒別效度、內(nèi)容效度、準則效度等）在調(diào)查中發(fā)揮著積極作用，但也存在真值假設(shè)不足、平行性假設(shè)不足、信度定義不足、正態(tài)假設(shè)不足、評價理論適用范圍不足等缺點[4]；另一方面，問卷設(shè)計者多憑經(jīng)驗或前者研究文獻主觀臆造問項，沒有邏輯依據(jù)，從而導致問卷設(shè)計質(zhì)量不高。而以項目反應(yīng)理論（IRT）為代表的現(xiàn)代反應(yīng)理論，彌補了傳統(tǒng)理論的不足，逐漸成為社情民意調(diào)查的重要理論。

2 項目反映理論

項目反應(yīng)理論[5]（Item response theory）也稱潛在特質(zhì)理論或潛在特質(zhì)模型，是一種現(xiàn)代心理測量理論，即在一定的假設(shè)之下，用一個數(shù)學函數(shù)去描述被試在項目上可觀察的作答表現(xiàn)與其不可觀察的特質(zhì)水平之間的函數(shù)關(guān)系。IRT認為，任何受訪者就調(diào)查問題能否得到肯定或滿意回答的概率，取決于兩個方面：一是自身態(tài)度，即主觀因素；二是用“難度”與“區(qū)分度”等屬性所反映的調(diào)查問題的客觀屬性[5]。IRT具有以下特點：（1）項目統(tǒng)計量不依賴于特定的被試樣組；（2）被試的測驗分數(shù)與測驗的難度無關(guān)；（3）能夠根據(jù)該測驗理論選擇和被試能力相匹配的測驗項目；（4）不要求測驗誤差和方差對所有被試都相同；（5）不要求通過嚴格的平行測驗來評價測驗精確度。

自20世紀50年代誕生以來，IRT已跨越近70個年頭，滲入軍事、醫(yī)療、教育、工業(yè)等眾多領(lǐng)域。在社情民意調(diào)查中應(yīng)用IRT理論，目的在于了解公民對政府行為及其產(chǎn)生后果的心理特質(zhì)（如感受、意愿、態(tài)度等）評價，以及決定這些評價的影響因素，這與社情民意調(diào)查的目的一致。在調(diào)查問卷設(shè)計中，采用IRT方法進行調(diào)查問題的取舍、等級量表的選級、基于不同受訪群體的問卷選項、滿意度（和諧度）合格線標準劃分等方面優(yōu)勢明顯[5]。

文章主要論述村民生活滿意度問卷的設(shè)計流程，從而切實了解村民需求。借助軟件對問卷數(shù)據(jù)進行處理，所以有關(guān)項目反應(yīng)理論的數(shù)學模型以及項目特征曲線本文不再詳述。

3 調(diào)查研究——村民生活滿意度問卷設(shè)計

在民意調(diào)查中，被試者一般只根據(jù)切身體會，做出對相應(yīng)調(diào)查結(jié)果的評價，所以滿意度調(diào)查是民意調(diào)查的主要形式。滿意度是顧客或用戶接受產(chǎn)品和服務(wù)的實際感受值與期望值比較的實際程度。村民是政府實施村莊改造行為的“消費者”，屬于顧客的范疇，因此本文將顧客滿意度理論應(yīng)用于農(nóng)民滿意度研究中。

3.1 問項編寫與預(yù)調(diào)查

3.1.1 村民生活滿意度指標的構(gòu)建 滿意度測量有很多模型可供參考，其中最具主流代表性的是費耐爾提出的包括顧客預(yù)期、感知質(zhì)量、感知價值、顧客抱怨和顧客忠誠等五方面組成的邏輯模型[6,7]（圖1）。借助費耐爾邏輯模型（ACSI）的核心概念和架構(gòu)，并結(jié)合村莊的具體情況，利用結(jié)構(gòu)方程模型等理論，構(gòu)建出村民生活滿意度評價模型（VL-CSI）（圖2），并在此基礎(chǔ)上形成了相應(yīng)的評價指標體系（表1），將不可直接測量的一級指標轉(zhuǎn)化為可直接測量的二級指標。

圖1 費耐爾邏輯模型Fig.1 The logical model of Fei Naier

圖2 村民生活滿意度指標評價模型Fig.2 The evaluation model of satisfaction index for villagers’living

表1 村民生活滿意度評價指標體系Table 1 The index system of satisfaction for villagers’living

3.1.2 問項編制 根據(jù)所構(gòu)建的評價指標體系，針對二級指標編寫問項。一般情況下編寫問項要足夠多（至少30個[8]），并盡量保證調(diào)查問項與調(diào)查目的的內(nèi)在一致性，以便后期優(yōu)化。同時為保證IRT的測量精度，被試一般在500以上[8]。本調(diào)查運用可與IRT理論模型相擬合的五級Likert量表[9]，正向問項由非常滿意、滿意、一般、不滿意、非常不滿意5種答案分別設(shè)置5分、4分、3分、2分、1分，反向問項設(shè)置1分、2分、3分、4分、5分，編寫初始問卷（共設(shè)置70個問項）。受農(nóng)村地區(qū)經(jīng)濟發(fā)展水平制約，抽取泰安地區(qū)經(jīng)濟發(fā)展狀況不同的邱家店鎮(zhèn)（經(jīng)濟發(fā)展狀況良好）、祝陽鎮(zhèn)（經(jīng)濟發(fā)展狀況中等）、石萊鎮(zhèn)（經(jīng)濟發(fā)展較落后）3個地區(qū)的657位村民進行問卷發(fā)放，做好預(yù)調(diào)查工作，并收回問卷進行數(shù)據(jù)處理。

3.1.3 數(shù)據(jù)預(yù)處理 將問卷統(tǒng)計數(shù)據(jù)輸入IBM SPSS Statistics 2.1軟件進行問項數(shù)據(jù)的同向化，并作二級評分處理，得分為1、2、3的記0分，4、5記1分，得到IRT建模的基礎(chǔ)數(shù)據(jù)。

3.2 擬合度檢驗

3.2.1 單維性檢驗 所謂單維性，就是只有一種的潛在特質(zhì)對反應(yīng)數(shù)據(jù)起作用。單維性檢驗是是IRT的一個基本假設(shè)。常用主成份分析法檢驗單維性：若第一特征根與第二特征根之比均在3以上，而且第一主成分解釋的方差比率在20%以上，則可認定測驗滿足單維性要求；或第一、二特征根之比小于3，但是卻都是唯一的大于1的特征根，即可認為數(shù)據(jù)滿足單維性[10]；若第一主成份與第二主成份項目特征根之比小于3，且第二特征根大于0，為得到單維量表，要去掉第二公因素上負荷較大的問項[5]。各一級指標單維性檢驗情況如表2所示。其中感知質(zhì)量所反映的內(nèi)容與村莊改造最為密切，所以將感知質(zhì)量劃分為七個維度的二級指標分別檢驗單維性（表3）。

表2 各一級指標用主成份分析法抽取的第一和第二特征根Table 2 Trait root No.1 and 2 extracted from each level indexes by principal components analysis

表3 感知質(zhì)量指標用主成份分析法抽取的第一和第二特征根Table 3 Trait roots No.1and 2 extracted from perceived quality indexes by principal components analysis

本調(diào)查去掉8個問項后，各潛在變量的特征根如表1、2所示，各項被測數(shù)據(jù)均滿足要求，故可認為基礎(chǔ)數(shù)據(jù)滿足單維性。

3.2.2 等區(qū)分度檢驗 計算各個項目的點雙列相關(guān)系數(shù)（即項目區(qū)分度），然后計算每個分測驗的相關(guān)系數(shù)的平均數(shù)和標準差。如果標準差相對平均數(shù)非常小的話，可認為這些項目區(qū)分度比較接近，符合等區(qū)分度假設(shè)。如表4所示，各項目區(qū)分度比較分散，顯然不符合等區(qū)分度假設(shè)。

綜上所述，調(diào)查數(shù)據(jù)滿足單維性，故可用IRT模型擬合，因為數(shù)據(jù)不滿足等區(qū)分度的要求，故不能采用單參數(shù)邏輯斯蒂模型；由于不存在猜測性問題，不必采用三參數(shù)邏輯斯蒂模型，所以采用雙參數(shù)邏輯斯蒂ICC模型為好。

表4 各一級指標點相關(guān)系數(shù)的平均數(shù)和標準差Table 4 Averages and standard differences of correlation coefficients of indexes

3.3 參數(shù)估計與問項初選

根據(jù)預(yù)調(diào)查的基礎(chǔ)數(shù)據(jù)，可采用不同IRT軟件對各問項的二參數(shù)邏輯斯蒂ICC模型的參數(shù)進行估計。而問項初選是根據(jù)估計出來的各問項模型參數(shù)，將有極端參數(shù)值的問項去掉。通常講對于a≤0.3（或a≥4），b＞2.95（或b＜-2.95），c＞0.4中的任意一個問項均屬于項目區(qū)分度和難度不滿足要求的項目，需要修改或被刪除[7]。本文模型的參數(shù)估計運用BILOG_MG軟件，得到各問項的ICC曲線，刪除43個難度和項目區(qū)分度不滿足要求的問項，剩余29個問項。如表5所示。

表5 村民生活滿意度調(diào)查的二參數(shù)邏輯斯蒂模型參數(shù)估計Table 5 The parameter estimation of two parameters logistic model of survey on villagers for life satisfaction

3.4 確定目標信息函數(shù)曲線

在調(diào)查精度的考量中，將信息量標準對調(diào)查精度的要求轉(zhuǎn)變成調(diào)查問項的最低信息量。精度要求越高，對應(yīng)的信息函數(shù)值就越大。根據(jù)用戶對調(diào)查精度要求，計算調(diào)查的標準誤SE(θ)，得出調(diào)查所需最低信息量的要求，即目標信息曲線TIC。IRT規(guī)定，如果我們要顧及某個總體均數(shù)，它的置信區(qū)間寬度就和標準誤的平方SE2有關(guān)。SE2越小，置信區(qū)間越小，則表示我們已經(jīng)獲得的信息量最大。因此，在能力水平θ處的能力估計標準誤SE(θ)為[5]等值化處理后，態(tài)度測量應(yīng)該把量表值為中性（即θ=0）以下的被試鑒別出來，但由于測量誤差的存在，有些真實θ大于0的被試其測量值可能小于0，有些真實值小于0的其估計值也可能大于0。為此就要確定能夠允許的估計標準誤，在置信區(qū)間為98%的真實態(tài)度θ1的置信度下，θ1=0.8在θ0=0以上的兩個標準誤之外，即|θ0-θ1|≥2SE，于是θ=0.8處的SE（θ）=0.4，帶入上述公式得出問項應(yīng)具有的最低信息量I（θ）=6.25。故問卷所含問項的信息函數(shù)累計值必須大于或等于6.25的最低信息量要求。如圖3所示。

3.5 問項選擇、形成最終問卷

根據(jù)所計算出的信息量θ在-0.8和0.8處的取值，分別從大到小順序排序，按θ大小依次提取選項，直到累計的信息量達到6.25以上（表6）。最后去除6個選項，最終形成包含23個問項的村民生活滿意度調(diào)查問卷。

圖3 最終生成的村民生活滿意度調(diào)查方案信息曲線Fig.3 The final information curve of the investigation scheme of villagers for life satisfaction

4 結(jié)論

本文一改傳統(tǒng)滿意度問卷的編制方法，首次將項目反應(yīng)理論應(yīng)用于村民生活滿意度調(diào)查問卷的設(shè)計當中，詳細闡述了項目反映理論在村民生活滿意度問卷設(shè)計過程中各個技術(shù)環(huán)節(jié)的應(yīng)用，并指導生成結(jié)構(gòu)科學、邏輯嚴密的調(diào)查問卷。

研究表明，村莊改造要以村民為主體。通過科學的問卷設(shè)計，切實了解村民意愿，對于村莊改造建設(shè)工作具有重要的指導意義和實踐意義。項目反應(yīng)理論能夠很好地規(guī)范問卷設(shè)計流程，控制篩選標準，合理精簡問項，極大提高了村民生活滿意度問卷編寫的質(zhì)量,尤其在反映村民針對調(diào)查問項的潛在特質(zhì)方面。

表6 各問項信息量排序Table 6 Rank of each item query information amount

[1]蔡少華.閔行區(qū)村莊改造農(nóng)民滿意度研究[D].上海:上海交通大學,2012

[2]劉 全,劉 勇,劉 汀.項目反應(yīng)理論在我國社情民意調(diào)查中的應(yīng)用[J].中國統(tǒng)計,2011(9):48-49

[3]劉 全.基于項目反應(yīng)理論的社情民意調(diào)查問卷設(shè)計[J].統(tǒng)計與決策,2012,358(10):29-32

[4]劉 全,張 勇.社情民意類調(diào)查問卷設(shè)計的綜合研究[J].中國統(tǒng)計,2013(4):23-26

[5]余嘉元.專著題名缺失[M].南京:江蘇教育出版社,1992

[6]涂榮庭,趙占波.顧客滿意度測量探討:量表設(shè)計、信度和效度[J].管理學報,2008(1):33-39

[7]劉 武,楊 雷.中國高等教育顧客滿意度指數(shù)模型的構(gòu)建[J].公共管理學報,2007(1):84-88,125

[8]漆書青.專著題名缺失[M].北京:高等教育出版社,1998

[9]郭慶科,陳英敏,孟慶茂.自陳量表式測驗應(yīng)用IRT的可行性[J].心理學報,2005,37(2):275-279

[10]楊業(yè)兵.兩級評分自陳式量表項目反應(yīng)理論分析的方法與模型選擇[D].西安:第四軍醫(yī)大學,2011

Design ofVillage Life Satisfaction Questionnaire underthe Guidance of Item ResponseTheory

WU Guang1,ZHANG Yun-ji1*,ZHANG Jing-wei2,YAN Ming-hui2,ZHAO Xiu-hua2,XU Xue-dong2*
1.College of Horticulture Science and Engineering/Shandong Agricultural University,Tai’an271018,China
2.College of Water Conservancy and Civil Engineering/Shandong Agricultural University,Tai’an271018,China

Under the new rural construction,the village is transformed by the villagers as the main body.Through the scientific questionnaire design for public opinion survey,we can more accurately understand the true wishes of the villagers,and have guiding significance for the transformation of villages.In this paper,a questionnaire on the life satisfaction of villagers is guided by the project reflection theory,it elaborates the basic flow of questionnaire design,the selection of questions and the control of error,finally,a concise questionnaire was formed for the life satisfaction of villagers.The results showed that IRT theory can simplify investigation questions,strictly control the questionnaire standards,and greatly improve the design of the questionnaire quality,it is of great significance to effectively understand the public opinions and guide the construction work in the new countryside construction.

Public opinion surveys;item response theory;questionnaire design;village life satisfaction;Likert scale

C915

A

1000-2324(2017)05-0697-05

2016-04-23

2016-05-13

“十二五”國家科技支撐計劃:低成本村鎮(zhèn)基礎(chǔ)設(shè)施與環(huán)境建設(shè)技術(shù)研究與示范(2014BAL04B05)

吳 廣(1991-),男,碩士研究生,研究方向農(nóng)業(yè)園區(qū)規(guī)劃設(shè)計.E-mail:1058707309@qq.com

*通訊作者:Author for correspondence.E-mail:yjzhangdeyouxiang@126.com;xdxu2007@163.com