| 評分者效果 題庫發展組 | |
|
一、嚴苛效果或寬鬆效果 (Severity / Leniency Effect) 自 Kneeland (1929) 首先針對評分者提出「寬鬆」 (Leniency),及 Ford (1931) 提出「嚴苛」(severe) 概念後,便陸續有學者針對這樣的名詞提出不同卻類似的定義與說明。然而,簡單來說,寬鬆效果係指評分者無論在何種情況下,有評高分的傾向;反過來說,嚴苛效果就是評分者無論在何種情況下,皆有評低分的傾向。 二、隨機效果 (Randomness Effect) 隨機效果係指評分者在評定時,對於量尺的運用方式與其他評分者有不一致的傾向。有時候,這些現象可能是因為評分者沒有足夠的背景知識或訓練,以致於無法對量尺作出適當的區別,因而採用一種較不可靠的隨意方式來對受試者進行評估。 三、月暈效果 (Halo Effect) 月暈效果是一種明顯的內在傾向。一般來說,是指某些特質的評比伴隨個人之一般表現的光暈而來。換言之,當評分者對某人某特質的評斷,是依據其對此人整體印象的優劣而定時,就有月暈效果。 四、中央趨勢效果 (Central Tendency) 中央趨勢效果在大部分文獻中的共同定義為:評分者過度使用評分量尺的中央類別,而避免使用極端的類別。會出現中央趨勢的其中一個原因是評分者猶豫於給予極端的評價,因此,傾向於將受試者安置於整個群體的平均位置,尤其是當評分者對受試者不了解時,這種現象就容易發生。 當評分者避免使用量尺中的極端類別,而將評分集中於量尺的中間時,會降低原有量尺寬度的效果,並使得評分較缺乏鑑別力,進而導致信、效度的降低。 五、侷限效果 (Restriction-of-Range Effect) 侷限效果與中央趨勢效果是相連的概念,但中央趨勢專指評分集中於評分量尺的中點附近;而在侷限效果中,評分卻可集中於評分量尺中的任一點,因此,評分可集中於量尺的寬鬆類別、嚴格類別,亦或者是中點,換言之,有中央趨勢效果即代表侷限效果的存在,反之則不一定成立。由於評分者使用量尺中某類別的傾向,可能受到其文化背景及經驗所影響,因此,亦有研究者認為侷限效果的產生,並不一定代表評分偏誤的存在。 六、邏輯偏誤 (Logical Error) 當評分者因相信某兩特質間有所關連,而給予此兩特質相似或不相似之評等時,即有所謂之邏輯偏誤效果。這種偏誤並非導因於評分者對某學生或某量尺類別的偏見,而是因為評分者認為特質間有某種更為直接的關連性。當此偏誤產生時,特質與評分間的交互作用就更增強。值得注意的是,邏輯偏誤和月暈效果並不相同,月暈效果是指評分者無法區別相同受試者內之所有特質;而邏輯偏誤則是由於評分者無法區別欲測量的主要特質和無關的特質。 七、投射效果 (Contrast Error) 所謂的投射效果是指評分者傾向拿自己與受試者作比較,但針對某種自己具有的特質,給予受試者和自己的評等卻完全不同。Guilford (1954) 進一步補充說明,認為投射偏誤在不同的情況下,可能會有不同的顯現方式,亦即對於某些特質,若受試者和評分者有相似性時,評分者可能從寬給分,但對於某些特質,若受試者和評分者相似,評分者卻反而會從嚴給分。 八、評分者偏見、信念、態度以及人格特質的影響 (Influences of Rater Biases, Beliefs, Attitudes, and Personality Characteristics) 評分者在評分時,往往會受到很多因素的影響,有時這些因素會產生評分過程中不希望得到卻又無法測量的無關構念變異 (construct-irrelevant variation)。例如:當評分者對某種族有偏見時,就會造成對該種族的評等過高或過低。評分者對公司的信念與態度,亦會影響其對屬下表現的評價。另外,評分者的自信程度、焦慮程度、興趣、智力……等人格特質,也會對評分產生差異。 九、評分者與受試者背景特質影響 (Influences of Rater/Ratee Background Characteristics) 諸多學者於檢視二十世紀以來眾多研究結果後,歸納出在評分者和受試者背景變項中足以影響評分結果的特徵,包括:性別、年齡、種族、教育程度,以及評分者和受試者背景特徵的交互作用等。 十、鄰近誤差 (Proximity Error) 鄰近誤差指的是兩個特質在空間和時間上的相近性。有些研究發現,所評定的特質在評分表中排放的順序,也會影響評分者的評分結果。除了特質間的鄰近外,受試者在被評順序中是否鄰近,也會影響評分者的評分。 十一、新近誤差或初始誤差 (Recency / Primacy Error) 當評分者對於受試者的判斷,並非依其整體表現而是最近的表現,而此一表現卻又不足以代表此受試者的實際能力時,就會產生新近誤差。反過來說,當受試者的評等是來自評分者對其最初表現的印象或記憶,此一表現卻又不足以代表受試者的實際能力時,則會產生初始誤差。 十二、次序效果 (Order Effect) 所謂的次序效果,是指受試者的受評次序會影響其所得的評等。曾有學者針對次序提出所謂「下滑效果」 (slide effect),也就是排序前面的受試者得分會高於排序後面的受試者得分。這樣的評分行為或許暗示著評分者的疲勞,也或許表示評分者對於評分標準的詮釋,會隨時間而產生變化。
|