第十一章準實驗設計和項目評估

（一）真實驗

●真實驗的特點

a在真實驗中，研究者隨著實驗進程操縱自變量和各個條件，并對其他因素進行嚴格的控制（常見的是通過隨機分配各條件來實現(xiàn)）。

●在自然環(huán)境中進行真實驗的困難

a對于自然環(huán)境下的真實驗，研究者在獲得實驗許可和接近被試時可能會遇到困難。

b雖然有些人認為隨機分配不公平，因為這種方法可能會使某些個體失去接受一種新處理的機會，但隨機分配仍然是確定一種新的處理是否有效的最好和最合理的方法。

●控制真實驗的內(nèi)部效度

a內(nèi)部效度的威脅大多是那些對研究結果看似合理的混淆解釋。

b內(nèi)部效度威脅的主要類型包括歷史、成熟、測驗、測試手段、回歸、選擇、被試缺損以及伴隨選擇的附加效應。

●真實驗也可能控制不到的問題

a如果研究中發(fā)生了實險污染、實驗者期望效應和新奇效應，就會對內(nèi)部效度造成損害。

b當組間被試交流有關實驗的信息時，就發(fā)生了實驗污染，這可能導致級恨、敵對或處理的擴散。

c新奇效應是因為一個新方法（比如實驗處理）引發(fā)了興奮、活力和積極性，從而改變了被試的行為?；羯Ｐ褪且粋€新奇效應。

d當處理效應不能在特定的人群、情境，時間間進行推廣時，就會對外部效度產(chǎn)生威脅。

（二）準實驗

a當真實驗不可行的時候，準實驗提供了一個重要的備選方法。

b準實驗包括某種干預或處理并且可以提供比較，但準實驗不像真實驗控制得那么嚴格，最為明顯和代表性的是準試驗沒有隨機分配。

c當研究者進行準實驗時，必須尋找額外的證據(jù)來消除對內(nèi)部效度的損害。單組的前測一后測設計叫做前實驗設計，這是一種糟糕的實驗設計，因為它幾乎沒有內(nèi)部效度。

●非等控制組設計

a在非等控制組設計中，采用前測和后測方法來比較處理組和對照組。

b如果這兩組在處理前的前測分數(shù)上相似，但是處理后的后測分數(shù)不同，研究者就能夠更加確信地判斷處理產(chǎn)生了效果。

c因歷史、成熟、測驗、測驗工具和回歸造成的對內(nèi)部效度的威脅，能夠在非等控制組設計中得到控制。

d準實驗常常評價一個處理的整體效力，面處理常包含很多組成成分，接下來的研究就可以確定哪些成分對處理而言是關鍵的。（蘭格和羅丁的研究）

●影響非等控制組設計內(nèi)部效度的因素

a為了解釋準實驗設計得到的結果，研究者有必要確定研究中有哪些因素會對內(nèi)部效度形成威脅。

b當采用非等控制組設計的實驗中包含伴隨選擇的附加效應、回歸、觀察者偏差、實驗污染和新奇效應時，必須考慮其對內(nèi)部效度的威脅。

c雖然前測組是可比較的，但是這卻并不能保證組間在與研究結果相關的所有可能的方面都可以進行比較。

●外部效度問題

類似于內(nèi)部效度，研究結果的外部效度也∶必須得到批判性地檢查。研究結果外部效度的量好正明就是用不同的總體、情境和時間重復實驗。

●間斷時間系列設計

當研究者能在實施處理前后的一段時間內(nèi)觀察到因變量變化的時候，另一個準實驗——簡單間斷時間系列設計就是可行的。

a在簡單間斷時間系列設計中，研究者檢查處理前后的一系列觀察結果。時間系列數(shù)據(jù)出現(xiàn)突然改變（不連續(xù)），就說明處理產(chǎn)生了效果。

b在簡單間斷時間系列設計中，對內(nèi)部效度的主要威脅是與實驗處理同時發(fā)生的歷史效應和測量（測試手段）的改變。

●非等控制組的時間系列

在非等控制組時間系列設計中，研究者在處理前后對處理組和對照組都進行一系列的觀察。

（三）項目評估

●項目評估用來評定社會服務組織的效力并為管理機構提供關于服務的反饋。項目評估者評定需要、過程、結果和社會服務的有效性。

●基礎研究和應用研究之間的關系是交互的。

●盡管社會對使用實驗還存在著勉強或不甚情愿，但真實驗和準實驗能為評價社會改革提供最佳的途徑。