實驗設計評價第一頁，共十八頁，編輯于2023年，星期五一、實驗設計的評價

DeterminingTheReliabilityandValidityofAResearch第二頁，共十八頁，編輯于2023年，星期五《心理實驗設計》3研究的信度與效度研究的信度Ameasuringinstrumentisperfectlyreliableifwegetexactlythesameresultwhenwerepeatthemeasurementanumberoftimes.Formallydeterminingreliabilityisparticularlyimportantwhenthedependentvariableisthescorefromatestinstrumentsuchasatestofachievement,aptitude,orpersonalitytraits.Test-retestreliabilityAlternative-formreliabilitySplit-halfreliability第三頁，共十八頁，編輯于2023年，星期五《心理實驗設計》4研究的效度指研究真實、正確地揭示所研究問題的本質及其規律的程度，即結果符合客觀實際的程度。Validityreferstowhetherwearemeasuringwhatwewanttomeasure.第四頁，共十八頁，編輯于2023年，星期五《心理實驗設計》5研究信度與效度的關系：信度是效度的基礎，效度是信度的目的。提高效度必然以提高信度為前提。效度是評價研究設計和結果的根本標準。第五頁，共十八頁，編輯于2023年，星期五《心理實驗設計》6效度的類型

（Cook&Campbell,1979）構思效度（constructvalidity）：也稱建構效度、構念效度、結構效度

內部效度（internalvalidity）統計結論效度（statistic-conclusionvalidity）外部效度（externalvalidity）

對一項研究來說，首先要考慮的是內部效度，而后就是外部效度，其他兩種效度相對次要。第六頁，共十八頁，編輯于2023年，星期五《心理實驗設計》7內部效度內部效度是指在研究的自變量與因變量之間存在關系的明確程度，即保證因變量的變化確系由特定的自變量所引起，而不是其它的外部變量。影響內部效度的因素成熟因素歷史因素被試選擇差異被試的缺失前測效應第七頁，共十八頁，編輯于2023年，星期五《心理實驗設計》8接上頁實驗處理的擴散效應統計回歸效應多種研究條件與因素間的交互作用第八頁，共十八頁，編輯于2023年，星期五《心理實驗設計》9外部效度外部效度是指研究結果的代表性和適用性；涉及研究結論的一般化問題。總體的一般化——實驗結果應用到不同于原始研究的、范圍更廣的其他群體或被試中。（總體效度）情境的一般化——實驗結果應用到不同于原始研究的情境或環境中。（生態效度）時間的一般化——實驗結果應用到不同于原始研究的時期。（時間效度）影響外部效度的因素實驗環境的人為性：反應性情境測量工具的局限性第九頁，共十八頁，編輯于2023年，星期五《心理實驗設計》10接上頁交互作用：實驗處理與實驗持續時間的交互作用、實驗處理與測量時間的交互作用以及選擇與自變量之間的交互作用，等。多重實驗處理的干擾對測量的敏感化樣本的代表性不足第十頁，共十八頁，編輯于2023年，星期五《心理實驗設計》11成熟、歷史選擇、流失測量、設備處理擴散統計回歸交互作用研究的效度統計結論效度內部效度構思效度人為環境工具局限交互作用多重處理敏感化樣本代表性低概念模糊邏輯混亂構思水平混淆實驗者效應被試反應性……外部效度對內部效度的威脅對構思效度的威脅對外部效度的威脅對統計結論效度的威脅數據質量差違反統計檢驗假設統計功效低第十一頁，共十八頁，編輯于2023年，星期五二、如何選擇合適的實驗設計Chooseatypeofexperimentaldesignbecomingly第十二頁，共十八頁，編輯于2023年，星期五《心理實驗設計》13良好實驗設計的標準能滿足理論框架的要求，能恰當地回答要研究的問題，這主要是通過巧妙的實驗構思完成的；能使同樣一批數據給出較多地信息，這依賴于實驗者能按照統計分析的要求收集數據；能提供實驗的高信度，即實驗的可重復性，這主要是通過較好地控制無關變量而達到的；第十三頁，共十八頁，編輯于2023年，星期五《心理實驗設計》14續上頁能提供實驗的高效度，即研究結果反映客觀現實的程度，這是通過增加實驗設計的復雜程度來實現的；能提高實驗的敏感性，即能探索一些深入的、細微的、難以通過日常觀察或經驗察覺到的現象，這主要是通過選擇合適的實驗設計完成的；盡量在實施上是經濟、省力、可行的。第十四頁，共十八頁，編輯于2023年，星期五《心理實驗設計》15選擇合適的實驗設計根據研究問題的復雜程度選擇實驗設計；根據對實驗結果的精度的要求來選擇實驗設計；根據實驗實施的可行性選擇實驗設計；第十五頁，共十八頁，編輯于2023年，星期五《心理實驗設計》16問題復雜性單因素設計：簡單易行，但外部效度和研究的效率偏低，不適合研究復雜的心理教育問題。因素設計：能同時考察多個因素之間的相互影響、相互制約的關系，適合研究復雜的理論和現實問題；問題越復雜，實驗設計的因素就越多。但因素的多少并非任意，過多的因素會帶來數據分析和推論解釋的困難。系列研究：將眾多因素分散在一系列研究中分別予以考察。第十六頁，共十八頁，編輯于2023年，星期五《心理實驗設計》17研究精度研究精度的要求越高，對實驗設計敏感性的要求也越高。提高設計敏感性的途徑：提高設計敏感性減小實驗誤差分離無關變異拉丁方設計區組設計重復測量設計分離特定額外變量分離被試個別差異前提假設前提假設第十七頁，共十八頁，編輯于2023年，星期五《心理實驗設計》18可行性變量特性：被試間自變量——性別、年齡、職業等被試變量被試內或被試間自變量——操作任務、環境特征……最低